RAG - Retrieval Augmented Generation
כשMicrosoft שילבו GPT-4 ב-Bing, הם התמודדו עם בעיה בסיסית: GPT-4 Training cutoff ב-2023. כשמישהו שואל על חדשות שאתמול - המודל לא יודע. הפתרון: לא לאמן מחדש (עולה $100M). לא להחכות ל-release חדש. אלא לתת למודל לחפש לפני שהוא עונה. זה RAG. ב-Bing: Bing search ממצא pages רלוונטיות, מוסיפים ל-context, GPT-4 עונה עם עובדות עדכניות. הנפוץ ביותר בAI Applications שנבנות ב-2026.