La Inteligencia Artificial (IA) se está integrando cada vez más en el mundo laboral.

Microsoft, Google y hasta la conservadora red de negocios LinkedIn lanzan productos asistidos por IA. Pero, ¿cómo se reconoce la diferencia entre una buena y una mala IA?

La empresa estadounidense Datadog tiene una solución: su herramienta de monitoreo de IA llamada LLM Obs (LLM significa "Modelo de lenguaje grande") pretende ayudar a evaluar y comparar la calidad de los modelos de IA.

Das Handelsblatt visitó la sede de Datadog en Nueva York y reporta sobre una empresa que ya se valora en casi 30 mil millones de dólares. La empresa fue fundada por Oliver Pomel y Alexis Lê-Quôc en el año 2010.

Datadog ofrece a sus clientes paneles de control como una visión general virtual de todos los servicios en la nube en uso. De esta manera, los programadores pueden mantener un seguimiento de la utilización del servidor, los flujos de datos y los riesgos de seguridad. Sin embargo, ahora la empresa quiere ir un paso más allá y también supervisar la calidad de los modelos de IA.

La herramienta de supervisión de IA, LLM Obs, se encuentra actualmente en la fase beta y está siendo probada por clientes corporativos seleccionados. Analiza el rendimiento, calidad, costos y otras dimensiones de los modelos de IA para detectar y solucionar los problemas potenciales rápidamente.

Así pueden las empresas manejar de manera más eficiente el tiempo y los recursos. El jefe de producto de Datadog, Yrieix Garnier, destaca la importancia del control de costos en los modelos de IA. En un mundo donde cada día se lanzan nuevos modelos de IA al mercado, es crucial para las empresas seleccionar los modelos más óptimos y rentables. La empresa Datadog está abierta a colaboraciones y aún no ha establecido los precios para su programa.

El jefe de Datadog, Junaid Ahmed, compara el potencial de su herramienta de monitoreo de IA con un gran minorista de muebles. Este podría, por ejemplo, implementar diferentes modelos de IA en su sitio web y comparar su rendimiento en diferentes casos de uso con LLM Obs. De esta manera, las empresas podrían seleccionar de manera enfocada los modelos apropiados para sus necesidades individuales.

La oferta de IA de empresas como OpenAI, Anthropic, Cohere, Google y modelos de código abierto es solo el comienzo, según Ahmed. En el futuro, habrá todo un universo de diferentes modelos de IA que podrían complementarse entre sí.

Para mantener la perspectiva en este mundo, es importante saber cuán bien funcionan los modelos utilizados. Aquí es donde la herramienta de Datadog entra en juego y tiene como objetivo ayudar a las empresas a obtener respuestas más significativas de sus IA.

El proyecto aún está en sus inicios, pero Datadog ve un gran potencial en la supervisión de la IA. En el mejor de los casos, programas como LLM Obs podrían contribuir a que las IA se utilicen de manera más efectiva y eficiente. En el futuro, la supervisión de las IA podría incluso convertirse en un importante campo de negocio para empresas como Datadog.