‫ใคร?
‫ฉันกำลังขยี้มือ ถ้าเธอได้ยิน
‫คุณรู้ว่าทำไม?
‫เพราะฉันกำลังสูบฉีด
‫ฉันพร้อมที่จะ
‫เพื่อประเมินโมเดลแมชชีนเลิร์นนิงของเราหรือดูว่าเป็นอย่างไร
‫ดูว่าแต่ละโมเดลเหล่านี้ใช้ฟังก์ชันที่เราเพิ่งสร้างขึ้นในวิดีโอที่แล้วอย่างไร
‫ดูว่าการถดถอยโลจิสติกดำเนินไปอย่างไร
‫K ตัวแยกประเภทเพื่อนบ้านที่ใกล้ที่สุดและตัวแยกประเภทป่าสุ่มไปที่การค้นหารูปแบบในข้อมูลการฝึกอบรมของเรา
‫จากนั้นจึงประเมินรูปแบบเหล่านั้นในข้อมูลการทดสอบของเราอย่างไร
‫ดังนั้นโดยไม่ต้องกังวลใจอีกต่อไป เรามาดูกันว่าแต่ละโมเดลเหล่านี้ทำงานอย่างไร เพื่อให้เราสามารถเรียกฟังก์ชันของเราว่าเหมาะสมและให้คะแนน
‫และหวังว่าจะใช้งานได้
‫และเราก็มาถึงที่นี่
‫เราเห็นว่าต้องใช้แบบจำลองหรือที่จริงแล้วถ้าเรากดแท็บ shift นี่คือจุดที่ docstring ของเรามีประโยชน์เพราะมันบอกเราว่าเกิดอะไรขึ้น
‫พอดี และประเมินโมเดลการเรียนรู้ของเครื่องที่กำหนด
‫นี้เป็นสิ่งที่สวยงาม
‫นี้เหมือนกับสิ่งที่เราเคยเห็นกับฟังก์ชันอื่นๆ
‫แต่ยกเว้นว่าเราได้สร้างสิ่งนี้ขึ้นมาเอง นั่นเป็นประโยชน์ของ docstring
‫ใช่ไหม
‫ดังนั้นเราจะไปที่นี่
‫โมเดลเท่ากับโมเดล ซึ่งเป็นพจนานุกรมของเราเกี่ยวกับโมเดลการเรียนรู้ของเครื่อง
‫เราสามารถไป x รถไฟ x ทดสอบได้ แต่เพื่อความสมบูรณ์ เราจะไป x รถไฟ เท่ากับ x รถไฟ
‫แล้วเราจะไป x ทดสอบ เท่ากับ x ทดสอบ แล้วเราจะไป y เทรน เท่ากับ y เทรน .
‫แล้วสุดท้าย การทดสอบ y เท่ากับ การทดสอบ y
‫และถ้าเราเขียนฟังก์ชันถูกต้องแล้ว คุณคิดว่ามันจะคืนค่าอะไร?
‫เราจะให้เวลาคุณไม่กี่วินาที
‫โอเค แค่นี้พอเพราะเราอยากดู
‫หากมีข้อสงสัยให้เรียกใช้รหัส
‫มาดูกันว่าฟังก์ชัน R ส่งคืนอะไร
‫ตกลง.
‫ดังนั้นเราจึงได้รับคำเตือนที่นี่
‫มันพูดว่าอะไรนะ?
‫หยุดถึงจำนวนการวนซ้ำทั้งหมดแล้ว
‫อืม.
‫นั่นจะทำให้เราต้องดำน้ำเพิ่มจำนวนการวนซ้ำ
‫ดังนั้นนี่คือจุดที่เป็นประโยชน์ เพิ่มจำนวนการวนซ้ำ เบต้าสูงสุด หรือลดขนาดลง
‫นี่กำลังบอกว่าตัวแบบการถดถอยโลจิสติกของเราสามารถปรับปรุงได้
‫และหากต้องการทราบวิธีการทำเช่นนั้น คุณจะต้องไปที่เอกสารประกอบสำหรับตัวเลือกตัวแก้ไขอื่น
‫แต่สิ่งที่เราจะทำคือทำงานกับสิ่งที่เรามีจนถึงตอนนี้
‫ดังนั้นถ้าเราดูนี่ นี่คือคะแนน
‫โมเดลของเราแต่ละรุ่นไม่มีการปรับแต่ง นั่นเป็นสปอยเลอร์สำหรับสิ่งที่กำลังจะออก
‫นี่คือวิธีที่โมเดลแต่ละตัวของเราเป็นคลาสพื้นฐานได้ดำเนินการในการค้นหารูปแบบในข้อมูลการทดสอบของเรา
‫จึงได้คะแนนที่นี่
‫นี่คือสิ่งที่เราได้รับกลับมา
‫ดังนั้นหากเราดูสิ่งนี้ อันไหนสูงที่สุด ดูที่การถดถอยโลจิสติกที่มาในรูปของม้ามืด
‫ไม่ได้แม้แต่ในแผนที่แมชชีนเลิร์นนิง
‫ถูกต้อง.
‫และได้รับคะแนนสูงสุด
‫อืม.
‫นี่อาจต้องใช้เวลาสืบสวนสักหน่อย เพราะจำได้ไหมว่าเราไปถึงไหนแล้ว
‫เรากำลังอยู่ในช่วงทดลอง และนั่นคือสิ่งที่เรากำลังทำอยู่
‫การทดลองคือการเปรียบเทียบแบบจำลองต่างๆ การทดลองแบบจำลองที่แตกต่างกัน และการเปรียบเทียบระหว่างกัน
‫นี่คือการเปรียบเทียบในพจนานุกรม แต่ถ้าเราต้องการแสดงให้ใครเห็น เราอาจเปรียบเทียบด้วยภาพ
‫ลองทำสิ่งนั้นให้ดีและรวดเร็ว
‫เราสามารถสร้างแบบจำลองได้
‫อันที่จริงเราอาจมุ่งหน้าไปที่นี่เล็กน้อย
‫ดังนั้นเราจึงไปที่นี่
‫เปรียบเทียบรุ่น.
‫นายแบบสวยที่เปรียบเทียบเท่ากับอาจเปลี่ยนพจนานุกรมของเราให้เป็น dataframe เพราะมันดีและเรียบง่าย
‫คะแนนแบบจำลองดังนั้น
‫นี่แค่เอาพจนานุกรมมาไว้ตรงนี้
‫คะแนนรุ่น.
‫และเราจะกำหนดให้ดัชนีเป็น
‫มันต้องเป็นอะไร?
‫ต้องเป็นรายการที่เรียกว่าความแม่นยำ เพราะนั่นคือสิ่งที่คะแนนนี้ทำงาน เพราะแบบจำลองของเราเป็นตัวแยกประเภททั้งหมด
‫เมตริกคะแนนเริ่มต้นคือความแม่นยำ
‫เราเห็นว่าในส่วนการยืมพลังจิต
‫ถ้าเราไปที่นี่ เปรียบเทียบแบบจำลอง เราต้องย้ายมัน พล็อตดอท แท่ง บูม
‫ตอนนี้ผมจะแสดงให้คุณดูว่าทำไมเราต้องย้ายมัน เพราะถ้าเราทำแบบนั้น มันจะดูแปลกๆ
‫แบบนั้น และเราอยากให้มันดูจริงๆ
‫ขอให้โชคดี
‫นี่คือสิ่งที่แสดงให้เห็นอย่างรวดเร็วว่าแต่ละรุ่นของเรามีความแม่นยำเพียงใด
‫และคุณสามารถเห็นการถดถอยโลจิสติกได้เพียงแค่บอกเคล็ดลับจากฟอเรสต์สุ่มของเรา และทำได้เช่นกันเพราะนั่นไม่ใกล้เคียงกับความถูกต้องของแบบจำลองการถดถอยโลจิสติกของเรา
‫เรากำลังจะไปบอกลา k n
‫เมื่อเราได้กราฟนี้แล้ว นี่อาจเป็นสิ่งที่เราสามารถนำไปให้เจ้านายหรือเพื่อนร่วมงานคนใดคนหนึ่งของเรา
‫แล้วพูดว่า เฮ้ ดูนี่สิ
‫เราได้สร้างแบบจำลองแมชชีนเลิร์นนิง ซึ่งเป็นแบบจำลองการถดถอยโลจิสติกที่สวยงาม และทำงานได้ดีที่สุด
‫เราจะใช้แบบจำลองการถดถอยโลจิสติกในทางปฏิบัติ
‫งั้นคุณก็ไปได้แล้ว ฉันเจอแล้ว เจ้านายของคุณแบบว่า เยี่ยมมาก คุณพบอะไร
‫แล้วคุณก็แบบว่า อัลกอริธึมที่ดีที่สุดในการทำนายโรคหัวใจ คือการถดถอยโลจิสติก
‫แล้วเธอก็อาจจะพูดประมาณว่า ยอดเยี่ยม
‫ฉันแปลกใจที่พารามิเตอร์สูงในการจูนยังไม่เสร็จสิ้น
‫แล้วคุณอาจสงสัยว่าการปรับค่าพารามิเตอร์แบบไฮเปอร์คืออะไร?
‫ใช่ฉันด้วย.
‫มันค่อนข้างเร็ว
‫ดังนั้นคุณจึงปิดบังตัวเองที่นี่
‫แล้วเธอก็อาจจะพูดว่า ฉันภูมิใจมาก
‫ลองรวบรวมรายงานการจัดหมวดหมู่เพื่อแสดงให้ทีมเห็นและอย่าลืมใส่เมทริกซ์ความสับสนและการเรียกคืนที่แม่นยำที่ผ่านการตรวจสอบแล้วในคะแนน
‫F1
‫ฉันอยากรู้ด้วยว่าคุณลักษณะใดที่สำคัญที่สุด
‫อ้อ และอย่าลืมใส่เส้นโค้ง ROC ด้วย
‫แล้วคุณอาจจะคิดหรือถามตัวเอง
‫โอเค นั่นเป็นคำที่ซับซ้อนมากมาย
‫ยอดเยี่ยม.
‫แต่แล้วคุณก็บอกว่า แน่นอน ฉันจะส่งให้คุณในวันพรุ่งนี้
‫ไม่ต้องกังวลเราจะดูแลสิ่งเหล่านี้ทั้งหมด
‫เราจะดูแลสิ่งเหล่านี้ในวิดีโอหน้า เพราะเรายังอยู่ในจุดที่แม้ว่าเราจะพบโมเดลการเรียนรู้ของเครื่องที่ยอดเยี่ยม
‫และเราอาจได้แสดงให้หัวหน้าหรือเพื่อนร่วมงานของเราเห็นแล้ว และพวกเขาไปแล้ว
‫ว้าว ลองถดถอยกัน
‫แสดงผลด้วยความแม่นยำ 88%
‫เรายังไม่ใกล้เคียงกับการวัดมูลค่าของเรา ซึ่งก็คือถ้าเรากลับมาอยู่ด้านบนสุด
‫ดังที่เราได้กล่าวไปแล้ว เราต้องการความแม่นยำอย่างน้อย 95% เพื่อดำเนินการทดลองนี้ต่อไป
‫นั่นคือสิ่งที่เรากำลังจะทำ เช่นเดียวกับการทำตามคำร้องขอทั้งหมดที่หัวหน้าขอให้เราตรวจสอบให้แน่ใจว่าแบบจำลองของเรามีประสิทธิภาพมากกว่าแค่การรับเมตริกคะแนนเริ่มต้นเพียงเล็กน้อย
‫ดังนั้นโดยไม่ต้องกังวลใจอีกต่อไป หยุดพักสักหน่อย ทบทวนสิ่งที่เราได้ทำไปแล้ว
‫และเราจะทบทวนบางสิ่งที่เราต้องทำเพื่อให้แน่ใจว่าแบบจำลองการจัดหมวดหมู่ของเราได้รับการประเมินอย่างถูกต้องและปรับปรุงให้ดียิ่งขึ้น