AI in Production - MLOps, Monitoring, Evaluation
ב-2023, Air Canada בנו chatbot שהבטיח לנוסע הנחה על כרטיס בית עבור קרוב שנפטר - הנחה שמדיניות החברה לא מציעה. בית המשפט הכריח את Air Canada לכבד את ה-הבטחה. הchatbot "שיקר" - והחברה שילמה. זה מה שקורה כשמעלים AI ל-production בלי evaluation, monitoring, ו-guardrails. AI applications כשלים בדרכים חדשות שengineer רגיל לא מצפה להן - ומניעה דורשת discipline שלמה.