Ejecutivo de Google DeepMind: cada empresa de productos de IA debe crear puntos de referencia personalizados

Mensaje de Gate News, 27 de abril — Logan Kilpatrick, gerente de producto senior en Google DeepMind y responsable de producto de Google AI Studio, afirmó en X que cada empresa que construye productos basados en IA debe establecer sus propios puntos de referencia personalizados para medir el rendimiento de los modelos de IA. Lo describió como una forma para que las mejoras del modelo “beneficien de manera desproporcionada a tu empresa” y exhortó a los fundadores y líderes empresariales a “empezar mañana.”

La mayoría de las empresas actualmente dependen de rankings públicos para seleccionar modelos de IA, pero estos miden capacidades generales que a menudo no se alinean con escenarios empresariales específicos. Kilpatrick citó el ejemplo de una empresa de revisión de contratos que se centra principalmente en la precisión de la extracción de cláusulas, una capacidad ausente en los puntos de referencia públicos, lo que hace imposible evaluar el rendimiento del modelo en esa tarea. Los puntos de referencia personalizados ofrecen dos ventajas clave: primero, permiten a las empresas evaluar cada actualización de modelo frente a sus propias tareas de negocio y seleccionar el modelo que mejor se desempeña en su caso de uso real en lugar del modelo mejor clasificado en general; segundo, permiten a las empresas compartir estos conjuntos de prueba con los proveedores de modelos, impulsando la optimización continua en las áreas que importan para su negocio.

Kilpatrick señaló que empresas como Zapier y Sierra ya están implementando este enfoque, afirmando que “aquí se puede crear mucho alpha”.

Aviso legal: La información de esta página puede proceder de terceros y no representa los puntos de vista ni las opiniones de Gate. El contenido que aparece en esta página es solo para fines informativos y no constituye ningún tipo de asesoramiento financiero, de inversión o legal. Gate no garantiza la exactitud ni la integridad de la información y no se hace responsable de ninguna pérdida derivada del uso de esta información. Las inversiones en activos virtuales conllevan riesgos elevados y están sujetas a una volatilidad significativa de los precios. Podrías perder todo el capital invertido. Asegúrate de entender completamente los riesgos asociados y toma decisiones prudentes de acuerdo con tu situación financiera y tu tolerancia al riesgo. Para obtener más información, consulta el Aviso legal.

Artículos relacionados

Legisladores de Colorado proponen una sustitución legal de IA para abordar las preocupaciones de la industria

Los legisladores de Colorado se están moviendo para derogar y reemplazar la ley de inteligencia artificial de 2024 del estado, SB24-205, con nuevas normas que reducen el alcance de la regulación de la IA mientras abordan las preocupaciones de la industria sobre las cargas de cumplimiento. La nueva propuesta, SB26-189, regularía los sistemas de IA utilizados en

CryptoFrontierhace4h

R0AR avanza a la ronda final del PitchFest Consensus 2026, se queda por poco fuera del Top 20

Según MetaversePost, R0AR avanzó a la ronda final de selección del CoinDesk's Consensus 2026 PitchFest el 4 de mayo, quedándose por poco fuera del top 20 de las startups seleccionadas para presentaciones en vivo. El innovador de Web3 y IA fue evaluado junto con startups de alto potencial de todo el mundo en uno de los m

GateNewshace8h

Musk busca un acuerdo de 150 mil millones de dólares con OpenAI antes del juicio; fracasan las conversaciones de acuerdo

Según un escrito judicial, Elon Musk se puso en contacto con el presidente de OpenAI, Greg Brockman, el 26 de abril, dos días antes de que comenzara su juicio en el tribunal federal de Oakland, para explorar una solución amistosa. Cuando Brockman sugirió que ambas partes retiraran sus demandas, Musk respondió con amenazas, diciéndole a Brockman: “Para el final

GateNewshace8h

Cursor acepta la oferta de adquisición de SpaceX de 60 mil millones de dólares, pero no hará una alianza con xAI en modelos de codificación

Según The Information, Cursor ha aceptado una oferta condicional de adquisición por 60 mil millones de dólares de SpaceX, aunque el acuerdo aún no se ha finalizado. La empresa actualmente no tiene planes de colaborar con la unidad de IA de SpaceX, xAI, para desarrollar modelos de codificación. En cambio, Cursor se centra en optimizarlo

GateNewshace8h

Haun Ventures cierra un fondo de 1 billón el 4 de mayo, y divide el capital entre inversiones cripto en etapas tempranas y tardías

Según Bloomberg, Haun Ventures completó una ronda de recaudación de fondos de 1 billón de dólares el 4 de mayo, con 500 millones destinados a inversiones en etapa inicial y 500 millones a inversiones en etapa avanzada. El fondo desplegará capital durante los próximos dos a tres años, con foco en startups de criptomonedas y blockchain mientras se expande

GateNewshace9h

OpenAI recauda $4 mil millones para un emprendimiento conjunto de despliegue, valorado en $10 mil millones

Según BlockBeats, el 4 de mayo, OpenAI recaudó más de $4 mil millones de dólares para establecer una nueva empresa conjunta enfocada en ayudar a las empresas a adoptar su software de inteligencia artificial. La empresa, llamada The Deployment Company, está respaldada por 19 inversores, incluidos TPG Inc., Brookfield Asset Management,

GateNewshace10h
Comentar
0/400
Sin comentarios