Google a introdus Gemini Embedding, un model de procesare a textului bazat pe AI, acum integrat în API-ul Gemini.
Modelul a revendicat primul loc pe Text masiv încorporat, cum ar fi mistral) Coher și Qwen în diferite sarcini de procesare a limbajului natural (NLP).
încorporarea gemini și alte modele de încorporare convertesc textul în reprezentări numerice (vectori) pentru a permite căutarea semantică, sisteme de recomandare și regăsirea documentelor. Acestea permit clasamentele de căutare mai inteligente (cum ar fi căutarea Google), regăsirea asistenței pentru clienți, motoarele de clustering și recomandări.
Conform Google , „Familia de încorporare a Gemini Embedding atinge rezultatele de tipul de tipul de texte, care încorporează textul masiv Embedding Whild (Mteb), Outperfuling, în care se află textul masiv Embedding Whild Encord Embedding Whor Rev. Sarcini de clustering, clasificare și relansare.”
mteb Benchmark Relevance
Ca căutare bazată pe AI și tehnologii NLP devin din ce în ce mai sofisticate, reperele de referință precum MTEB servesc ca instrumente de evaluare critică. Creat prin integrarea faptului lor, testele MTEB, testele, testele de clasificare, mai mult Recuperați datele textuale.
MTEB clasament , un clasament industrie-standard pentru modelele de încorporare AI, evaluează performanța în regăsire, clasificare, clustering și relansarea sarcinilor. Gemini Embedding achieved a mean task score of 68.32, outperforming Linq-Embed-Mistral and gte-Qwen2-7B-instruct, both of which scored in the low 60s.
Key results included an 85.13 in pair classification, 67.71 in retrieval, and 65.58 in reranking, making it the highest-performing text embedding model currently Disponibil.
Imagine: Google
Scoruri mai mari pe acest referință indică performanțe îmbunătățite în aplicațiile din lumea reală, cum ar fi motoarele de căutare alimentate AI, analiza documentelor și optimizarea chatbotului.
companii care doresc să integreze AI în platformele lor adesea se bazează pe aceste scoruri pentru a determina care model se potrivește cel mai bine nevoilor lor. Conducerea actuală a Google în acest spațiu semnalează apăsarea sa de a face ca Gemenii să încorporeze o soluție preferată pentru procesarea textului bazată pe AI.
modul în care încorporarea Gemeni ar putea modela căutare AI și aplicații de afaceri
succesul Google în clasamentele MTEB Signale Implications pentru căutarea AI-POTERDED Soluții. Modelele de încorporare servesc drept fundament pentru algoritmi de clasare a căutării, motoare de recomandare și răspunsuri pentru chatbot.
Un model cu scoruri de regăsire ridicate și de clasificare îmbunătățește capacitatea AI de a genera rezultate de căutare mai relevante, ceea ce face ca impactul său În prezent, compania testează un nou mod AI pentru căutarea Google, care oferă rezultate de căutare pur bazate pe AI, care înlocuiesc legăturile tradiționale cu răspunsuri generate de AI.
Dincolo de căutare, Profitivul multilingv al Gemini Embding îl poziționează ca un instrument pentru îmbunătățirea aplicațiilor în limbă încrucișată. Modelele AI care funcționează bine în sarcinile de regăsire sunt cruciale pentru întreprinderile care operează în mai multe limbi, deoarece ajută la îmbunătățirea preciziei traducerii, a automatizării serviciilor pentru clienți și a clasamentului de conținut.
Acest lucru face ca Gemini să încorporeze un activ potențial util pentru industrii, cum ar fi comerțul electronic, documentația legală și asistența tehnică. Analitică, căutare semantică în bazele de date și recuperarea automatizată a datelor pentru cercetare și informații de afaceri.
Capacitatea modelului de a depăși concurenții în organizația de conținut de clasare și clustering sugerează că întreprinderile care se bazează pe AI-uri de conținut bazat pe AI ar putea beneficia de integrarea sa în servicii AI bazate pe cloud.
Google has been refining its text embedding models for years, but previous iterations, including text-multilingual-embedding-002, struggled to maintain dominance over emerging open-source alternatives.
Unlike open-source models, which offer greater customization and transparency, Google’s proprietary solution is integrated directly into the Gemini API, making it a seamless option for enterprises already using its cloud-based AI instrumente. Cu toate acestea, progresele rapide ale concurenților sugerează că viitoarele puncte de referință MTEB pot deveni și mai competitive.
Deși Google conduce în prezent în clasamentele MTEB, spațiul de încorporare a textului AI rămâne competitiv, în special cu alternative open-source care contestă modele proprii. Companii precum Cohere și Mistral au obținut rapid tracțiune, oferind transparență și flexibilitate pe care unele întreprinderi o preferă față de soluții cu sursă închisă.
avantajul principal al modelelor proprii precum încorporarea Gemei se află în integrarea lor profundă cu ecosistemul AI mai larg al Google. Cu toate acestea, modelele open-source oferă o adaptabilitate mai mare pentru întreprinderile care necesită implementări specializate. The question moving forward is whether Google can sustain its leadership in AI text processing as competition intensifies.
AI Model Benchmarks – LLM Leaderboard
Last updated: Mar 7, 2025
OrganizationModelContextParameters (B)Input $/M ieșire $/m licență gpqa mmlu mmlu pro drop humaneval aime’24 simpleben aime’24 Simpleben model SimpleBen model SimpleBen model Simpleben aime OpenAai> O3128,000 ––– Proprietar87.70%–––– –– o3 Claude antropică 3.7 sonet200.000– 3,00 $ 15,00 $ Proprietar84.80%86,10%––– 80,00%46,4%Claude 3.7 Sonnet Xai Xai GROK-3128.000 ––– Proprietar84.60%–79,90%–– 93,30%GROK-3 XAI GROK-3 Mini128.000 ––– Proprietar84.60%–78,90%–– 90,80%Grok-3 Mini OpenAI O3-min200.000-$ 1,10 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 $ 4,40 USD Proprietar79.70%86,90%––– 86,50%22,8%O3-MINI OpenAI O1-PRO128.000 ––– Proprietar79,00%–––– 86,00%O1-Pro Openai O1200.000-15,00 USD 60,00 $ Proprietary78,00%91,80%–– 88.10 $ 83.30 GEMINI 2.0 Flash Thinking1.000.000 ––– Proprietar74,20%–––– 73,30%30,7%Gemini 2.0 Flash Thinking Openai O1-Preview128.000– 15,00 $ 60,00 $ Proprietar73.30%90,80%––– 44,60%41,7 2,19 USD Open71,50%90,80%84,00%92,20%–79,80%30,9%DeepSeek-R1 OpenAigpt-4.5128.000 ––– Proprietar71,4%90,0%–– 88,0%36,7%34,5%GPT-4,5 Claude antropică 3,5 sonnet200,5,5 $ 3,00 $ 15.5 Proprietar67.20%90,40%77,60%87,10%93,70%16,00%41,4%Claude 3,5 Sonnet QWEN QWQ-32B-Preview32.76832.5 0,15 USD 0,20 USD Open65.20%–70,97%––00.00%QWQ-32B-P-P-P-PROVIEW Google GEMINI Flash1.048.576 ––– Proprietar62.10%–76,40%–– 35,5%18,9%Gemini 2.0 Flash OpenAI O1-MINI128.000-3,00 $ 12,00 $ Proprietar60,00%85,20%80,30%–92,40%70,00%18,1%O1-MINI DEPEEKEEK Deepseek-V3131.072671 $ 0,27 $ 1,10 $ Open59,10%88,50%75,90%91,60%–39,2%18,9%Deepseek-V3 Google Gemini 1,5 Pro2.097.152-2,50 $ 10,00 USD Proprietar59.10%85,90%75,80%74,90%84,10%19,3%27,1%GEMINI 1.5 Pro Microsoft PHI-416.00014.7 0,07 $ 0,14 $ Open56,10%84,80%70,40%75,50%82,60%PHI-4 XAI GROK-2128.000-2,00 $ 10,00 $ 10.00 Proprietary56.00%87.50%75.50%–88.40%22.7%Grok-2 openai GPT-4o128,000–$2.50 $10.00 Proprietary53.60%88.00%74.70%––17.8%GPT-4o google Gemini 1.5 Flash1,048,576–$0.15 $0.60 Proprietar51.00%78,90%67,30%–74,30%Gemini 1,5 Flash XAI GROK-2 Mini128.000 ––– Proprietar51.00%86,20%72,00%–85,70%GROK-2 MINI META LLAMA 3,1 405B Instruct128.000405 $ 0,90 $ 0,90 $ 0,90 Open50.70%87,30%73,30%84,80%89,00%23,0%LLAMA 3.1 405B Instruct Meta llama 3.3 70b Instruct128.00070 0,20 $ 0,20 USD Open50,50%86,00%68,90%–88,40%19,9%llama 3,3 70b Instruct Antropic Claude 3 Opus200,000 $ 15.00 70B INSTRUCT 75,00 USD Proprietar50,40%86,80%68,50%83,10%84,90%23,5%Claude 3 Opus QWEN QWEN2.5 32B Instruct131.07232.5––pen49.50%83,30%69,00%–88.40%QWEN2.5 32B Instruct Qwen QWEN2.5 72B Instruct131.07272,7 0,35 USD 0,40 USD Open49,00%–71,10%–86,60%23,30%QWEN2.5 72B Instruct OpenAI GPT-4 Turbo128.000-10,00 USD 30,00 $ Propriary48,00%86,50%–86,00,00%87,10%GPT-4 Turbo Amazon NovA Pro300,00,00%87,10%GPT-4 Turbo Amazon Nov. 3,20 USD Proprietar46,90%85,90%–85,40%89,00%Nova Pro Meta Llama 3.2 90B Instruct128.00090 $ 0,35 0,40 USD Open46,70%86,00%––– LLAMA 3,2 90B Instruct Qwen Qwen2.5 14B Instruct131.07214.7––pen45,50%79,70%63,70%–83,50%QWEN2.5 14b Instruire Mistral Mistral Small 332.00024 $ 0.07 0,14 $ Open45,30%–66,30%–84,80%Mistral Small 3 QWEN qwen2 72b Instruct131.07272–-OpenS42.40%82,30%64,40%–86,00%QWEN2 72B Instruct Amazon Nova Lite300.000-0,06 USD 0,24 $ Proprietar42.00%80,50%–80,20%85,40%Nova Lite Meta 0,2 3,1 70B Open41.70%83,60%66,40%79,60%80,50%LLAMA 3,1 70B Instruiți Claude antropică 3.5 Haiku200.000-0,10 $ 0,50 $ Proprietar41.60%–65,00%83,10%88,10%CLAUDE 3,5 $ Haiku Anthropic Claude 3 Sonnet200,000 $ 3,00 USD 15.00 Proprietar40,40%79,00%56,80%78,90%73,00%Claude 3 Sonnet OpenAI GPT-4O Mini128.000-0,15 $ 0,60 $ Proprietar40,20%82,00%–79,70%87,20%10,7%GPT-4O Mini Amazon NOVA Micro128.000-0,04 $ 0,1 Proprietar40,00%77,60%–79,30%81,10%Nova Micro Google Gemini 1,5 Flash 8B1.048.5768 $ 0,07 $ 0,30 $ Proprietar38.40%–58,70%–– Gemini 1,5 Flash 8B AI21 JAMBA 1,5 MARGE256.000398 $ 2.00 $ 8.00 $ 8.00 $ 8.00 Open36.90%81,20%53,50%–– Jamba 1,5 Microsoft PHI-3,5-MOE-INSTRUCT128.00060––Pen36.80%78,90%54,30%–70,70%PHI-3,5-MOE-Instruct QWEN QWEN2.5 7B Instruct131,0727.6 $ 0.30 $ 0.30 0,30 7B Instruct131,0727.6 $ 0.30 $ 0.30 $ 7. Open36.40%–56.30%–84.80%QWEN2.5 7B Instruiți Xai Grok-1.5128.000 ––– Proprietar35.90%81,30%51,00%–74.10%GROK-1.5 OpenAI GPT-432.768– 30,00 USD 60,00 USD 60,00 USD Proprietary35.70%86.40%–80.90%67.00%25.1%GPT-4 anthropic Claude 3 Haiku200,000–$0.25 $1.25 Proprietary33.30%75.20%–78.40%75.90%Claude 3 Haiku meta Llama 3.2 11B Instruct128,00010.6$0.06 $0.06 Open32.80%73,00%––– LLAMA 3,2 11B Instruiți meta llama 3.2 3b Instruct128.0003,2 0,01 $ 0,02 $ Open32.80%63,40%––– LLAMA 3,2 3B Instruct AI21 JAMBA 1,5 mini256.14452 $ 0.20 $ 0,5 Open32.30%69.70%42.50%$ $ 0,40 OPEN32.30 Mini OpenAI GPT-3,5 Turbo16.385– 0,50 $ 1,50 $ Proprietar30.80%69,80%–70,20%68,00%GPT-3,5 Turbo Meta llama 3,1 8B Instruct131.0728 $ 0,03 0,03 USD Open30.40%69,40%48.30%59,50%72.60% Microsoft PHI-3,5-Mini-Instruct128.0003,8 $ 0,10 $ 0,10 $ Open30.40%69,00%47,40%–62.80%PHI-3,5-mini-instrucțiune Google Gemini 1.0 Pro32,760-0,50 USD 1,50 $ Proprietar27,90%71,80%–– GEMINI 1.0 Pro QWEN2 71 Instruct131.0727.6–-OpenT25.30%70,50%44,10%–– QWEN2 7B Instruiți codestral mistral-22b32.76822,2 $ 0,20 $ 0,60 $ Open ––––– 81.10%Codestral-22b Comanda cohere r+ 128.000104 $ 0,25 $ 1,00 $ deschis Deepseek-V2.58.192236 0,14 $ 0,28 $ Open-80,40%–– 89,00%Deepseek-V2.5 Google GEMMA 2 27B8.19227.2–Open-75.20%–– 51,80%Gemma 2 27B Google Gemma 2 9B8.1929.2–Open-71.30%-40.20%GEMMA 2-OPEN-7 9B XAI GROK-1.5V128.000 ––– Proprietar ––––– GROK-1.5V Moonshotai Kimi-K1.5128.000 ––– Proprietar-87.40%–––-Kimi-K1.5 Nvidia Llama 3.1 Nemotron 70B Instruct128.00070-Open-80.20%––– Llama 3.1 70b Instruiți Mistral Ministral 8B Instruct128.0008 0,10 $ 0,10 $ Open-65,00%–– 34,80%Ministral 8B Instruiți mistral Mistral mare 2128.000123 $ 2,00 $ 6,00 $ Open-84,00%–– 92,00%22,5%Mistral mare 2 Mistral Mistral NEMO Instruct128.00012 $ 0.15 $ 0.15 Mistral NemoN Deschis-68,00%––– Mistral nemo Instruiți mistral Mistral Small32.76822 $ 0,20 $ 0,60 USD deschis ––––– Mistral Microsoft PHI-3,5-Vision-Instruct128.0004.2–Open –––– PHI-3,5-Vision-Insstruct Mistral Pixtral-10b128.0001 Deschis-69,20%–– 72,00%Pixtral-12B Mistral Pixtral Large128.000124 $ 2,00 $ 6.00 $ Open ––––– Pixtral mare QVQ-72B-Preview32.76873.4–Open –––– QVQ-72B-Preview QWEN $ 0.5.5-CODER 32B 32B 0,09 USD deschis-75,10%50,40%–92,70%QWEN2.5-coder 32B Instruiți QWEN QWEN2.5-Coder 7B Instruct128.0007–-Open-67,60%40,10%–88.40%QWEN2.5-Coder 7B Instruct QWEN QWEN2-VL-72B-INSTRUCT32.76873.4–– Open ––––– QWEN2-VL-72B-INSTRUCT
Related Posts
Acest articol discută noua caracteristică din Windows 11, permițând utilizatorilor să arate sau să ascundă ecusoanele de notificare a dispozitivului mobil în meniul Start prin aplicația Link Phone. Prin accesarea aplicației
Acest articol detaliază cum să afișați sau să ascundeți conținutul recent al dispozitivului mobil în meniul Start de pe Windows 11 folosind aplicația Link Phone. Cea mai recentă actualizare permite utilizatorilor să își personalizeze vedeta
Zoom a introdus lanțul de proiect, o nouă metodă de solicitare a AI care reduce utilizarea jetonului cu 92% și reduce costurile operaționale cu 90%. Lanțul de reduceri de redactare a proiectelor de la Post Zoom