-
למידת מכונה · מדידה
המיצוע זרק את התשובה עוד לפני שהמודל ראה אותה
המספר שהמודל שלי אומן לנבא הוא ממוצע, והמיצוע מוחק את מה שמבדיל בין שתי צורות. על נתונים מתוקנים השחזור קטן: +0.02 במקרה הגרוע.
-
למידת מכונה · מדידה
היה מספר אקראי מוסתר בתוך המדידה שלי
דיווחתי שמתאר מאבד את ערכו כשמחשבים אותו בזול. הקריסה הייתה הגרלה אקראית של הפותר שלי, והבדיקה שנועדה לתפוס אותה עברה בהצלחה.
-
למידת מכונה · מדידה
סט האימון מזיז את השגיאה פי 390. שום דבר לא מנבא זאת.
על פני 231 בחירות של סט אימון המקרה הגרוע זז פי 390. בדקתי תשע דרכים זולות לבחור אחת טובה. אף אחת לא החזיקה מעמד.
-
למידת מכונה · מדידה
המדד מדד את המודל שלי, לא את הבעיה
ציון עבירוּת החזיק על 0.54 בשני תקציבים בלתי תלויים, ואז צנח ל־0.14 כשהחלפתי את מחלקת המודל. הוא עקב אחרי האלגוריתם, לא אחרי הבעיה.
-
שרשרת אספקה · מדידה
אי־אפשר לספור את המכירה שלא ביצעתם
נתוני מכירות רושמים מה מכרתם, לא את הביקוש. השניים נבדלים בדיוק בימים שהכי חשובים, ותחזית ביקוש שמותאמת עליהם לומדת להתכווץ.
-
למידת מכונה · שרשרת אספקה
המודל שלי קיבל ציון מושלם וזו הייתה הבעיה
ציון מושלם על סט מוחזק מדד דבר אחד: אם המודל יכול לחזור על מה שכבר ראה. מתוך 30 מבחנים חוצי־משפחות, 20 צנחו מתחת לבסיס השוואה גס.