‫Nu hebben we kruisvalidatie in actie gezien, laten we enkele andere belangrijke evaluatiestatistieken van classificatiemodellen bekijken, en om
‫dit te doen, beginnen we hier een nieuwe kop.
‫Het is zo belangrijk om onze modellen, evaluatiestatistieken en de vier belangrijkste te evalueren die we
‫gaan behandelen voor de nauwkeurigheid van classificatiemodellen.
‫De volgende is het gebied onder de ARACY-curve.
‫Maak je geen zorgen, als je niet zeker weet wat dit zijn, gaan we ze doornemen.
‫De derde is een verwarringsmatrix.
‫Klinkt chique, toch?
‫En de laatste is een classificatierapport.
‫Dus om te beginnen houden we het lekker simpel.
‫We zullen nauwkeurigheid doen.
‫Dus we zullen onszelf eraan herinneren hoe we een machine learning-model kunnen trainen en
‫evalueren door de Crosswell-score van Saikat learns-modelselectie te importeren.
‫En dan importeren we onze willekeurige bosclassificatie.
‫Een van kan op tab drukken, ja, daar gaan we, mooi, we zullen een willekeurig zaadje opzetten.
‫En dan zullen we onze gegevens maken.
‫Ze zullen onze waarom-gegevens maken.
‫Mooi.
‫Nu zullen we een test opzetten en proberen te splitsen, dus we gaan hier X, trein X test, Y, trein Y test.
‫Nou, eigenlijk is dat niet nodig, want we kunnen gewoon de Crossville-score gebruiken.
‫Dus laten we dat doen.
‫We kunnen hier een kleine kop plaatsen om ervoor te zorgen dat we weten dat we in dit geval nauwkeurig werken.
‫Claff Eagles' willekeurige bosclassificatie.
‫En dan printen we de Crossville-score uit door de classificatie Àlex-gegevens door te geven en wat ben
‫je vijfvoudige kruisvalidatie?
‫Prachtig.
‫Dus hier gaan we, we hebben een aantal schattingen die zullen veranderen.
‫Deze klassieke waarschuwing krijgen, dus dit is slechts een herinnering, we kunnen geen schatting maken op 100
‫en dat zal dat mooie wegwerken.
‫Dus wat dit teruggeeft, is omdat de standaardscoreparameter van onze classificatie een hoofdnauwkeurigheid
‫is.
‫Dit is wat de Crossville-score hier meet.
‫Eigenlijk zou ik dit kunnen opslaan in een variabele Crosswell-score ACL's die het opnieuw uitvoeren.
‫En als we de manen van Cross Val-score nemen, hebben we deze gezien in de kruisvalidatievideo.
‫Dit geeft ons de belangrijkste nauwkeurigheid van ons model en in
‫feite komt dit uit als een decimaal, maar we kunnen dit gemakkelijk op de print typen als hartziekte, nauwkeurigheid van de classificatie.
‫Dus of ons model al dan niet kan classificeren of iemand een hartaandoening heeft of niet, gezien hun parameters die
‫we hier willen invoeren.
‫Nee, je bedoelt niet Crosswell-score.
‫We gaan dit keer honderd en we willen twee decimalen.
‫Misschien hebben we hier een procentteken aan het einde nodig.
‫Mooi.
‫Dit zal de nauwkeurigheid van kruisvalidatie zijn, dus dat is belangrijk om op te merken.
‫Perlis gevalideerde nauwkeurigheid.
‫Dus dat is niet erg, toch.
‫En wat nauwkeurigheid eigenlijk zegt, is.
‫Gegeven een willekeurige steekproef, gegeven een steekproef die een model nog niet eerder heeft gezien.
‫Hoe waarschijnlijk is het dat het juiste label wordt voorspeld?
‫Dus als we naar onze hartziektegegevens kijken, kunnen we het onder deze cel doen, zodat het niet interfereert met
‫hoe.
‫Dus ik krijg een lage hartziekte.
‫Hoofd.
‫Dus gegeven een monster dat er zo uitziet, heeft leeftijd, geslacht, C. P. e. , Trest, T. B. , bel FBS al
‫deze functies, gegeven een voorbeeld zoals dat van ons treinmodel, hoe waarschijnlijk is het dat het het juiste doelwit voorspelt?
‫En in ons geval is de kruisgevalideerde nauwkeurigheid van onze modellen tweeëntachtig komma vier acht procent, dus
‫ongeveer tweeëntachtig komma vijf.
‫Dus dat betekent 82 of ongeveer iets meer dan acht van de tien keer.
‫Ons model voorspelt het juiste label, gegeven een voorbeeld, zoiets als dit op basis van de originele
‫trainingsgegevens.
‫Dus dat is nauwkeurigheid in een notendop.
‫Waar we nu in gaan duiken, is het gebied onder de nauwkeurigheidscurve, en als dat verwarrend klinkt, is het een
‫beetje een mondvol, maar we zullen er doorheen gaan.
‫Dus dat is een beetje hoe je de nauwkeurigheid van je modellen zou presenteren, je print zoiets als dit.
‫Nogmaals, het keert standaard terug, een decimaal en communicatieblokkade.
‫Het is gemakkelijker als u wordt weergegeven als een percentage.