Google ha introducido la incrustación de Gemini, un modelo de procesamiento de texto con IA ahora integrado en la API de Gemini.
El modelo ha reclamado el primer lugar en el Texto masivo que está en benchmark (mteb) , lo que sigue a Rivging Rivals. y QWEN en varias tareas de procesamiento del lenguaje natural (PNL).
Gemini Incrustación y otros modelos de incrustación convierten el texto en representaciones numéricas (vectores) para permitir la búsqueda semántica, los sistemas de recomendación y la recuperación de documentos. Permiten clasificaciones de búsqueda más inteligentes (como la búsqueda de Google), la recuperación de atención al cliente con IA, la agrupación de documentos y los motores de recomendación.
>
Según google , “la familia de los modelos de estado de la familia de los modelos de estado de los modelos de estado de la historia de los modelos de estado. Tareas de agrupación, clasificación y relevancia. y recupere los datos textuales.
The Mteb Raeatboard , una clasificación de la industria para los modelos de incrustación de IA, evalúa el rendimiento en la recuperación, la clasificación, la clúster y las tareas de las tareas. La incrustación de Gemini logró una puntuación de tarea media de 68.32, superando a Linq-Embed-Mistral y GTE-Qwen2-7b-Instructo, ambos calificados en los 60s bajos.
Los resultados clave incluyeron un 85.13 en la clasificación de pares, 67.71 en recuperación y 65.58 en reno Disponible.
Imagen: Google
Los puntajes más altos en este punto de referencia indican un rendimiento mejorado en aplicaciones del mundo real, como motores de búsqueda con IA, análisis de documentos y optimización de chatbot.
Las empresas que buscan integrar IA en sus plataformas a menudo se basan en estos puntajes para determinar qué modelo se adapta mejor a sus necesidades. El liderazgo actual de Google en este espacio señala su impulso para hacer de Gemini que incorpora una solución preferida para el procesamiento de texto impulsado por la IA.
cómo la incrustación de Gemini podría remodelar las aplicaciones de búsqueda de IA y aplicaciones comerciales
El éxito de Google en las clasificaciones de MTEB en las implicaciones de ampliación de la búsqueda de AI para la búsqueda y las soluciones empresariales. Los modelos de incrustación sirven como base para los algoritmos de clasificación de búsqueda, los motores de recomendación y las respuestas de chatbot.
Un modelo con altos puntajes de recuperación y clasificación mejora la capacidad de la IA para generar resultados de búsqueda más relevantes para que su impacto sea especialmente valioso para la búsqueda de Google y otros servicios impulsados por AI. Actualmente, la compañía está probando un nuevo modo de IA para la búsqueda de Google, que proporciona resultados de búsqueda puramente impulsados por la IA que reemplazan los enlaces tradicionales con respuestas generadas por IA.
Más allá de la búsqueda, la competencia multilingüe de Gemini Insquding lo posiciona como una herramienta para mejorar las aplicaciones de los idiomas cruzados. Los modelos de inteligencia artificial que funcionan bien en las tareas de recuperación son cruciales para las empresas que operan en varios idiomas, ya que ayudan a mejorar la precisión de la traducción, la automatización del servicio al cliente y la clasificación de contenido.
Esto hace que Gemini integre un activo potencialmente útil para las industrias como la documentación de comercio electrónico, la documentación legal y el apoyo técnico.
. Análisis, búsqueda semántica dentro de las bases de datos y la recuperación de datos automatizada para la investigación y la inteligencia empresarial.
La capacidad del modelo para superar a los competidores en la clasificación y la agrupación de tareas sugiere que las empresas que dependen de la organización de contenido impulsada por la IA podrían beneficiarse de su integración en los servicios AI basados en la nube.
Google ha estado refinando sus modelos de incrustación de texto durante años, pero las iteraciones anteriores, incluidas el texto-mate-incrustación-002, tienen dificultades para mantener el dominio sobre las alternativas de código abierto emergentes.
A diferencia de los modelos de código abierto, que ofrecen una mayor personalización y transparencia, la solución de propiedad de Google está integrada directamente en el API GeMini, lo que hace que una opción de costura es una gran cantidad de costosas, que ya está en la configuración de la nube. herramientas. Sin embargo, los rápidos avances de los competidores sugieren que los futuros puntos de referencia de MteB pueden volverse aún más competitivos.
Aunque Google actualmente lidera en la clasificación MTEB, el texto de IA integrar el espacio sigue siendo competitivo, particularmente con alternativas de código abierto que desafían modelos propietarios. Empresas como Cohere y Mistral han ganado rápidamente tracción, ofreciendo transparencia y flexibilidad que algunas empresas prefieren sobre soluciones de código cerrado.
La principal ventaja de modelos patentados como Gemini Incorporación radica en su profunda integración con el ecosistema AI más amplio de Google. Sin embargo, los modelos de código abierto proporcionan una mayor adaptabilidad para las empresas que requieren implementaciones especializadas. La pregunta en el futuro es si Google puede mantener su liderazgo en el procesamiento de texto de IA a medida que la competencia se intensifica.
Benchmarks de modelos AI-LLM Raeperboard
Última actualización: marzo de marzo, 2025
organización modelo context contexters parámetros (b) toping tope context contextamets parámetros (b) toping> $/MOutput $/MLicenseGPQAMMLUMMLU ProDROPHumanEvalAIME’24SimpleBenchModel openai O3128,000 ––– Propietario87.70%–––– O3 Anthrope Claude 3.7 Sonnet200,000– $ 3.00 $ 15.00 Propietario 84.80%86.10%––– 80.00%46.4%Claude 3.7 Sonnet Xai Grok-3128,000 –––-Propietary84.60%–79.90%-93. XAI GROK-3 MINI128,000 ––– Propietario 84.60%–78.90%–– 90.80%Grok-3 Mini OpenAi O3-Mini200,000– $ 1.10 $ 4.40 Propietario79.70%86.90%–– 86.50%22.8%O3-Mini OpenAi O1-Pro128,000 ––– Propietario79.00%–––– 86.00%O1-Pro OpenAI O1200,000– $ 15.00 $ 60.00 Propietario78.00%91.80%–– 88.10%83.30%40.1%O1 Gemini 2.0 Flash Thinking1,000,000 –––-Propietary74.20%––––-7.30%30.7%30. 2.0 Pensamiento flash OpenAI O1-Preview128,000-$ 15.00 $ 60.00 Propietario73.30%90.80%––– 44.60%41.7%O1-Preview Deepseek DeepSeek-R1131,072671 $ 0.55 $ 2.19 Open71.50%90.80%84.00%%92.20%–79.80%30. OpenAigpt-4.5128,000 ––– Propietario71.4%90.0%–– 88.0%36.7%34.5%GPT-4.5 antrópico Claude 3.5 Sonnet200,000– $ 3.00 $ 15.00 Propietario 67.20%90.40%77.60%87.10%93.70%16.00%41.4 CLAUDE QWEN QWQ-32B-Preview32,76832.5 $ 0.15 $ 0.20 Open65.20%–70.97%–– 50.00%QWQ-32B-Preview Google Gemini 2.0 Flash1,048,576 ––-Propiedad 62.10%–76.40%–– 35.5%18.9%Gemini Flash O1-Mini128,000– $ 3.00 $ 12.00 Propietario60.00%85.20%80.30%–92.40%70.00%18.1%O1-Mini Deepseek Deepseek-V3131,072671 $ 0.27 $ 1.10 Open59.10%88.50%75.90%91.60%–39.2%18.9%9%9% 1.5 Pro2,097,152– $ 2.50 $ 10.00 Propietario59.10%85.90%75.80%74.90%84.10%19.3%27.1%Gemini 1.5 Pro Microsoft Phi-416,00014.7 $ 0.07 $ 0.14 Open56.10%84.80%70.40%75.50%82.60%%Phi-4 Grok-2128,000– $ 2.00 $ 10.00 Propietario56.00%87.50%75.50%–88.40%22.7%GROK-2 OPERAI GPT-4O128,000– $ 2.50 $ 10.00 Propietario53.60%88.00%74.70%–– 17.8%GPT-4O GOGE GEMINI 1.5 FLASH1,04888,O8,EBLAS $ 0.60 Propietario51.00%78.90%67.30%–74.30%Gemini 1.5 Flash Xai Grok-2 Mini128,000 ––– Propietario51.00%86.20%72.00%–85.70%Grok-2 Mini Meta Llama 3.1 405B Instrucciones128,000405 $ 0.90 $ 0.900 $ 0.900 Open50.70%87.30%73.30%84.80%89.00%23.0%LLAMA 3.1 405B Instruir Meta Llama 3.3 70B Instruye128,00070 $ 0.20 $ 0.20 Open50.50%86.00%68.90%–88.40%19.9%Llama 3.3 70B Instructo Anthopic CLAUDE 3.200.000. $75.00 Proprietary50.40%86.80%68.50%83.10%84.90%23.5%Claude 3 Opus qwen Qwen2.5 32B Instruct131,07232.5––Open49.50%83.30%69.00%–88.40%Qwen2.5 32B Instruct qwen Qwen2.5 72B Instruir131,07272.7 $ 0.35 $ 0.40 Open49.00%–71.10%–86.60%23.30%Qwen2.5 72B Instruir OpenAI GPT-4 Turbo128,000– $ 10.00 $ 30.00 Propietario 48.00%86.50%–86.00%87.10%Gpt-4 Turbo Amazon Novebo Noventa. $ 3.20 Propietario46.90%85.90%–85.40%89.00%Nova Pro Meta Llama 3.2 90b Instruct128,00090 $ 0.35 $ 0.40 Open46.70%86.00%––––lama 3.2 90B Instructo QWEN QWEN2.5 14B 14B 14B Instruye131,07214.7–-Open45.50%79.70%63.70%–83.50%QWEN2.5 14B Instruir Mistral Mistral Small 332,00024 $ 0.07 $ 0.14 Open45.30%–66.30%–84.80%Maldal 3 qwen Qwen2 72BBBBBBBBBA Instruir131,07272–-Open42.40%82.30%64.40%–86.00%QWEN2 72B Instruir Amazon Nova Lite300,000– $ 0.06 $ 0.24 Propietario 42.00%80.50%–80.20%85.40%Nova Lite Meta Llama 3.1 70B Instructura128,00070 $ 0.20 $20 $20 $20 $20 $20 $ 0.20 $20 Open41.70%83.60%66.40%79.60%80.50%Llama 3.1 70B Instruct anthropic Claude 3.5 Haiku200,000–$0.10 $0.50 Proprietary41.60%–65.00%83.10%88.10%Claude 3.5 Haiku anthropic Claude 3 Sonnet200,000–$3.00 $15.00 Propietario40.40%79.00%56.80%78.90%73.00%Claude 3 Sonnet OpenAi GPT-4O Mini128,000– $ 0.15 $ 0.60 Propietario 40.20%82.00%–79.70%87.20%10.7%GPT-4O Mini Amazon Nova Micro128,000-$ 0.04 $ 0.14 Propietario40.00%77.60%–79.30%81.10%Nova Micro Google Gemini 1.5 Flash 8B1,048,5768 $ 0.07 $ 0.30 Propietario 38.40%–58.70%–– Gemini 1.5 Flash 8B AI21 JAMBA 1.5 Grandes256,000398 $ 2.00 $ 8.00 $ 8.00 Open36.90%81.20%53.50%–– Jamba 1.5 Gran Microsoft Phi-3.5-Moe-Instructo128,00060–– Open36.80%78.90%54.30%–70.70%Phi-3.5-moe-Instructo Qwen Qwen2.5 7B Instrucc131,0727.6 $ 0.30 $ 0.30 $ 0.30 $ 0.30 $ 0.30 Open36.40%–56.30%–84.80%Qwen2.5 7B instruye a Xai Grok-1.5128,000 ––– Propietario35.90%81.30%51.00%–74.10%Grok-1.5 OpenAi GPT-432,768– $ 30.00 $ 60.00.00 Propietario35.70%86.40%–80.90%67.00%25.1%GPT-4 Antrópico Claude 3 Haiku200,000– $ 0.25 $ 1.25 Propietario33.30%75.20%–78.40%75.90%Claude 3 Haiku Meta Llama 3.2B 11B Instruct128,00010.6 $ Open32.80%73.00%––– Llama 3.2 11B Instruye Meta Llama 3.2 3B Instruct128,0003.2 $ 0.01 $ 0.02 Open32.80%63.40%–––– Llama 3.2 3B Instruct de AI21 Jamba 1.5 Mini256,14452 $ 0.20 $ 0.40 Open32.30%69.70%420%42.50%-JAMBA–JAMBA–JAMBA–JUBT Mini Openai GPT-3.5 Turbo16,385– $ 0.50 $ 1.50 Propietario30.80%69.80%–70.20%68.00%GPT-3.5 Turbo Meta Llama 3.1 8B Instructive131,0728 $ 0.03 $ 0.03 Abierto30.40%69.40%48.30%59.50%72.60%%Be. Microsoft Phi-3.5-mini-Instructo128,0003.8 $ 0.10 $ 0.10 Open30.40%69.00%47.40%–62.80%Phi-3.5 mini-Instrucciones Google Gemini 1.0 PRO32,760– $ 0.50 $ 1.50 Propietario27.90%71.80%—Gemini 1.0 Pro Qwwen Instruct131,0727.6––Open25.30%70.50%44.10%––Qwen2 7B Instruct mistral Codestral-22B32,76822.2$0.20 $0.60 Open––––81.10%Codestral-22B cohere Command R+128,000104$0.25 $1.00 Open–75.70%–––17.4%Command R+ deepseek DeepSeek-V2.58,192236$0.14 $0.28 Open–80.40%––89.00%DeepSeek-V2.5 google Gemma 2 27B8,19227.2––Open–75.20%––51.80%Gemma 2 27B google Gemma 2 9B8,1929.2––Open–71.30%––40.20%Gemma 2 9B xai Grok-1.5V128,000–––Proprietary–––––Grok-1.5V moonshotai Kimi-k1.5128,000–––Proprietary–87.40%–––Kimi-k1.5 nvidia Llama 3.1 Nemotron 70B Instruct128,00070––Open–80.20%–––Llama 3.1 Nemotron 70B Instruye Ministral Ministral 8B Instrucc128,0008 $ 0.10 $ 0.10 Abierto-65.00%–– 34.80%Ministral 8B Instruye Mistral Mistral Mistral 2128,000123 $ 2.00 $ 6.00 Open-84.00%–– 92.00%22.5%maltral Gran 2 maltrales Mistros Nemo Instruct12812 $ 0.15 $ 0.15 $ 0.1515%erróneos de 2 maltrales Distral Nemo Instruct128.00012 $ 0.15 $ 0.15 $ 0.15%erróneo. Open–68.00%–––Mistral NeMo Instruct mistral Mistral Small32,76822$0.20 $0.60 Open–––––Mistral Small microsoft Phi-3.5-vision-instruct128,0004.2––Open–––––Phi-3.5-vision-instruct mistral Pixtral-12B128,00012.4$0.15 $0.15 Abierto-69.20%–– 72.00%Pixtral-12b Mistral Pixtral Large128,000,000124 $ 2.00 $ 6.00 Abierto ––––– Instruye128,00032 $ 0.09 $ 0.09 abierto-75.10%50.40%–92.70%QWEN2.5-CODER 32B Instructa QWEN QWEN2.5-Coder 7B Instruct128,0007–-Abierto-67.60%40.10%–88.40%QWEN2.5-Coder 7B Instructo QWen QWEN QWEN2-VL-72B-INSTRUCT32,76873.4–-abierto ––––-QWEN2-VL-72B-INSTRUCT
Related Posts
Este artículo detalla cómo mostrar u ocultar el contenido reciente del dispositivo móvil en el menú Inicio en Windows 11 utilizando la aplicación de enlace del teléfono. La última actualización permite a los usuarios personalizar su estrella
La IA Manus de China se ha convertido en un nuevo líder en IA autónoma, superando a los competidores como OpenAi y Google en los puntos de referencia de Gaia, lo que plantea preocupaciones regulatorias. La nueva AU de la publicación de China
¿Desea ajustar su monitor o brillo de la pantalla automáticamente en función del tiempo? Siga estos simples pasos para programar el brillo del monitor en Windows 11 y 10. Como usuarios de computadora, nosotros R
