הטמעה וקטורית (Embedding)
מודלים ושפה
הטמעה וקטורית (Embedding) היא ייצוג של מילה, משפט, או תמונה כרשימת מספרים (וקטור) — כך שמחשב יכול "למדוד" מתמטית עד כמה שני פריטים דומים במשמעות שלהם.
הרעיון המרכזי: פריטים בעלי משמעות דומה מקבלים וקטורים "קרובים" זה לזה במרחב מתמטי, גם אם המילים עצמן שונות לחלוטין. לדוגמה, הווקטורים של "מלך" ו"מלכה" יהיו קרובים זה לזה בדיוק כמו שהווקטורים של "גבר" ו"אישה" קרובים זה לזה — היחס נשמר, גם בלי שהוגדר במפורש.
הטמעות וקטוריות הן הבסיס הטכני שמאפשר חיפוש-לפי-משמעות (לא רק התאמת-מילים מדויקת) — למשל בטכניקת RAG, שבה מחפשים מסמכים "קרובים משמעותית" לשאלה, גם אם אינם חולקים אותן מילים בדיוק.