E Expert · deel E9 · Data science en AI
Werkboek · hoofdstuk 42 Classificatie en clustering
Labels voorspellen, groepen ontdekken en de kosten van verkeerde besluiten meten
Je voert classifiers en clustering uit en eindigt met een inspectiebeleid dat ook verkeerde voorstellen kan beoordelen.
3× oefenen 4× toepassen 4× uitdagen ± 435 min0 /11 gedaan
Een sensorpatroon en een diagnose hebben verschillende bewijslast.
Handboek Werkboek Oplossingen
Hoe lees je een opdracht?Drie treden Oefenen Toepassen UitdagenElk hoofdstuk bouwt op: eerst oefenen (één stap, direct toepassen), dan toepassen (meerdere stappen, in een context), dan uitdagen (transfer, open problemen, andere leerlijnen erbij).
De StemExpert-schaal 5 Eén moeilijkheidsschaal van 1 tot 9 over de drie niveaus heen: Fundamental loopt van 1 tot 4, Intermediate van 3 tot 7, Expert van 6 tot 9. Zo zie je dat de uitdaging van het ene niveau de oefening van het volgende is.
Oefenen
Oefenen één stap, direct toepassen
Score z=−1,5 voor een plant.
a Bereken p en het label bij drempels 0,5 en 0,15.
200 planten: 20 ziek. Voorspeld ziek: 25, waarvan 15 werkelijk ziek.
a Bereken TP, FP, FN, TN, precisie, recall en accuracy.
Punten 0, 2, 8, 10; begincentra 0 en 8.
a Wijs toe, update centra en bereken J voor en na.
Toepassen
Toepassen meerdere stappen, in een context
x=2, y=0, b=0 en w=0; η=0,1.
a Leid p−y uit kruis-entropie af en voer één stap uit.
Ouder: 12 planten, 6 ziek. Split A geeft 6 met 5 ziek en 6 met 1 ziek. Split B geeft 4 met 4 ziek en 8 met 2 ziek.
a Bereken de gewogen Gini van beide splits en kies de trainingssplit.
Recall=90%, vals-positieve fractie onder gezonde planten=5%. Vergelijk prevalentie 10% met 1%, elk op 10000 planten.
a Bereken TP, FP en precisie voor beide populaties.
Dezelfde plant is elke dag gemeten; vocht is in procent en ΔT in kelvin.
a Ontwerp KNN-validatie die schaal en groepslek voorkomt.
Uitdagen
Uitdagen transfer, open problemen, leerlijnen combineren
Een inspectie kost 1 eenheid bij een gezonde plant; een gemiste ziekte kost 9.
a Leid de theoretische kansgrens af. Waarom kies je die grens niet blind op iedere gewogen modelscore?
K-means geeft drie plantgroepen en het team noemt cluster 2 meteen ‘infectie’.
a Ontwerp externe beoordeling en een gevoeligheidsproef voor deze claim.
Een classifier moet planten voor inspectie voorstellen.
a Schrijf label-, data- en actieregels, inclusief validatie en acceptatie.
b Welke storingen en schadelijke fouten toets je?
Zo wordt dit beoordeeld referentie Label onafhankelijk en reproduceerbaar. evaluatie Groepssplit, onbalans en foutkosten expliciet. actie Begrensde bevoegdheid en herstelprocedure.
Breid de echte NumPy-simulatie uit met gewijzigde ziekteprevalentie en een temperatuur-offset van 1 K in een nieuwe batch.
a Vergelijk logistiek, KNN en boom op vooraf vastgelegde grenzen. Geef een verantwoord inzetbesluit.
Zo wordt dit beoordeeld uitvoering De drie methoden op dezelfde nieuwe groepen. bewijs Aantallen, kosten en verschuiving apart. besluit Manifest en acceptatie traceerbaar.
Zelfevaluatie Kleur per doel: lukt al / bijna / nog niet
Ik kan logistische regressie afleiden uit sigmoid en kruis-entropie. Ik kan KNN en een beslisboom uitvoeren en hun grenzen vergelijken. Ik kan k-means met echte iteraties bouwen en interpreteren. Ik kan confusiematrix, precisie, recall en actiedrempel berekenen. Ik kan klasse-onbalans en plantgroepen eerlijk evalueren.
← Vorige E41 · Van data naar model: regressie Volgende → E43 · Neurale netwerken