Het idee
Een embedding is een weergave van een bepaald model en een bepaalde voorbewerking. Gelijke vectorafmetingen betekenen niet dat weergaven onderling passen. Een ander model kan veranderen welke passages dichtbij een zoekvraag liggen, ook als de documenten gelijk blijven.
Ontwerpkeuze
Versieer model, normalisatie en tekstvoorbereiding samen met de index. Bouw opnieuw op of migreer bewust wanneer die afspraak verandert. Bewaar een evaluatieset om een nieuwer model te beoordelen op relevante zoekresultaten, niet op de publicatiedatum.
Uitgewerkt voorbeeld
Tijdens een modelwijziging draaien twee indexen naast elkaar. Dezelfde voorbeeldvragen vergelijken de kwaliteit van gevonden bewijs voordat zoekverkeer naar de nieuwe index gaat.
Voor ingebruikname
- Leg model- en voorbewerkingsversies vast
- Meng geen onverenigbare vectoren ongemerkt
- Bewaar een index voor terugkeer
De voorbeelden zijn illustratief. Pas de controles aan uw eigen omgeving aan.