La industria de la inteligencia artificial experimenta un fenómeno paradójico en 2025: mientras los modelos de lenguaje y sistemas de IA generativa proliferan en el mercado, las empresas emergentes dedicadas a la evaluación y validación de estos sistemas enfrentan dificultades estructurales que las llevan al fracaso de manera sistemática.
Las denominadas 'eval startups' —empresas especializadas en crear herramientas, marcos y plataformas para evaluar el desempeño, seguridad y confiabilidad de modelos de inteligencia artificial— representaban una oportunidad de negocio aparentemente clara hace apenas unos años. A medida que la IA se integraba en aplicaciones críticas, la demanda de métodos rigurosos para medir y validar estos sistemas parecía inevitable.
Sin embargo, la realidad ha demostrado ser más compleja. Estos emprendimientos enfrentan una confluencia de desafíos que erosionan su viabilidad comercial. En primer lugar, existe una asimetría fundamental en el mercado: las grandes corporaciones tecnológicas que desarrollan los modelos principales —como OpenAI, Google DeepMind y Anthropic— tienen capacidad de invertir recursos masivos en evaluar sus propios sistemas, eliminando la necesidad de soluciones externas.
Además, la evaluación de modelos de IA presenta características técnicas que la hacen particularmente desafiante como negocio. Los métodos de evaluación evolucionan con extraordinaria rapidez, invalidando rápidamente las soluciones anteriores. Las métricas de hoy se quedan obsoletas mañana cuando emerge una arquitectura novedosa o un paradigma diferente de desarrollo de modelos. Esta volatilidad técnica convierte la acumulación de valor empresarial en una empresa especialmente frágil.
Otro factor crucial es el problema de la diferenciación. La evaluación de IA, siendo una tarea fundamentalmente técnica y estandarizable, corre el riesgo de convertirse en una commodity. Una vez que los métodos de evaluación se codifican y se hacen públicos —como inevitablemente sucede en la comunidad científica de código abierto— cualquier organización puede implementarlos sin pagar por soluciones propietarias.
El factor económico también resulta decisivo. Las herramientas de evaluación, aunque técnicamente sofisticadas, tienen dificultades para justificar márgenes de ganancia sustanciales. Los clientes potenciales —desarrolladores de IA empresariales— esperan acceso a metodologías rigurosas a bajo costo, especialmente si provienen de instituciones académicas o comunidades de código abierto.
Desde una perspectiva más amplia, estos fracasos revelan una realidad incómoda sobre la arquitectura actual de la industria de la IA: la concentración de poder en manos de un pequeño número de grandes actores corporativos no solo domina el desarrollo de modelos, sino también las funciones de evaluación y validación. Esta concentración vertical dificulta que empresas más pequeñas y especializadas encuentren espacio rentable para operar.
Algunos analistas sugieren que las startups eval que sobreviven son aquellas que logran diferenciarse mediante especialización extrema —evaluación para sectores específicos como medicina, finanzas o defensa— o que se transforman en herramientas de infraestructura profunda integradas en plataformas más amplias.
La lección para emprendedores en el espacio de la IA es clara: la evaluación, siendo fundamental, no constituye automáticamente un modelo empresarial viable si se intenta abordar de manera genérica. El futuro probablemente pertenezca a soluciones profundamente especializadas y a plataformas integradas que combinen desarrollo, evaluación y despliegue en un ecosistema coherente.