Så ska listan läsas
En embeddingmodell gör om text till tal så att texter med liknande innehåll hamnar nära varandra. Det är den tekniken som får en sökruta att hitta rätt dokument även om man inte använder exakt samma ord, och som AI-assistenter använder för att slå upp svar i egna dokument.
MTEB har flera topplistor. Vi använder huvudlistan MTEB(Multilingual, v2), som sidan själv lyfter fram först: 131 uppgifter på över 1 000 språk, bland annat sökning, sortering av texter, gruppering, att avgöra om två meningar betyder samma sak och att para ihop översättningar. Det finns också en engelsk lista, en ren söklista (RTEB) och listor för enskilda språk; för svenska, se den skandinaviska listan.
Placeringen räknas fram genom att modellerna rangordnas på varje uppgift och placeringarna vägs ihop (Borda-metoden). Siffran vi visar är snittet över alla uppgifter, 0–100, där högre är bättre, så ordningen följer inte alltid siffran exakt. Modeller som inte körts på alla uppgifter saknar snitt och tas inte med här (till exempel jina-embeddings-v5-text-small på plats 15 och Gemini Embedding 2 i förhandsversion på plats 198).
Vad den inte säger: nästan alla toppmodeller är öppna forskningsmodeller som inte finns i vår katalog. Resultaten skickas oftast in av skaparna själva, och vissa modeller har tränats på data som liknar testerna (sidan visar det som en lägre "zero-shot"-andel). Snittet över så många uppgifter säger inte hur bra en modell är just på att söka i svenska dokument, så testa på egna data.