Vad är en inbäddning?
En inbäddning är en lång rad tal som beskriver vad en text betyder, så att texter med liknande innehåll hamnar nära varandra.
En modell läser texten och räknar fram talen. Två meningar som handlar om samma sak får liknande tal, även när de använder olika ord. Det gör det möjligt att jämföra betydelse snarare än stavning.
Inbäddningar är grunden för vektorsökning. Dokumenten delas upp i stycken, varje stycke får en inbäddning och frågan får en egen. Sökningen hämtar de stycken som ligger närmast frågan.
Tekniken fick stor spridning genom forskning om ordrepresentationer från 2013. I dag används den i sökning, i rekommendationer och i RAG, där den hjälper en AI-assistent att hitta rätt underlag.
Så fungerar det
Talen kan ses som en plats i ett rum med väldigt många dimensioner. Texter om semester hamnar i ett område och texter om fakturor i ett annat. När någon frågar om ledighet hamnar frågan nära styckena om semester, även om ordet ledighet inte står där.
Samma modell måste användas för dokument och frågor. Byter man modell behöver alla dokument räknas om.
Därför spelar det roll
Inbäddningar gör att en AI-assistent kan hitta rätt stycke när frågan är formulerad på ett annat sätt än texten. Det är en förutsättning för bra svar med RAG, eftersom modellen bara kan svara utifrån det som sökningen hittar.
Att tänka på
Inbäddningarna behöver följa dokumentens behörigheter. Annars kan sökningen hitta stycken som användaren inte har rätt att se. Läs mer om vektorsökning.
Forskning har visat att det går att återskapa delar av en text ur dess inbäddning. Behandla dem därför som en del av innehållet.
Vad det betyder för er
Inbäddningar är beräknade ur era texter och kan avslöja en del av innehållet. Skydda dem med samma behörigheter och lagringsregler som dokumenten.
Vanliga frågor
Är en inbäddning samma sak som en sammanfattning?
Nej. Den går inte att läsa som text. Den beskriver innehållet med tal som en dator kan jämföra med andra.
Behöver vi förstå inbäddningar för att använda AI-sökning?
Nej. Det räcker att veta att de finns och att de ska skyddas som dokumenten. Läs mer om RAG.
Källor: Mikolov m.fl. 2013 på arXivMorris m.fl. 2023 på arXiv
Relaterade begrepp
Läs mer
Alla begrepp Uppdaterad