Un agente de inteligencia artificial de código abierto supera los modelos oficiales de Google en pruebas de terminal

Un desarrollador independiente ha logrado un hito significativo en el campo de los agentes de IA al crear una herramienta de código abierto que superó a los modelos oficiales de Google en TerminalBench, un banco de pruebas diseñado para evaluar la capacidad de los agentes de inteligencia artificial para ejecutar tareas en terminal. El agente desarrollado alcanzó una puntuación del 65,2 por ciento, superando tanto el resultado oficial de Google con su modelo Gemini-3-flash-preview (47,8 por ciento) como el del modelo propietario líder anterior, Junie CLI, que había logrado un 64,3 por ciento. Este resultado representa un avance notable en la demostración de que los proyectos de código abierto pueden competir con soluciones desarrolladas por grandes corporaciones tecnológicas. La publicación del resultado ha generado especial interés en la comunidad tecnológica debido a los recientes informes sobre trampas deliberadas en las evaluaciones de TerminalBench 2.0. Ante esta situación, el desarrollador ha proporcionado múltiples garantías de transparencia sobre su metodología. Ha confirmado que no se utilizaron archivos ocultos de agentes o habilidades, que las pruebas se ejecutaron respetando los requisitos del banco de pruebas sin modificaciones de recursos o tiempos límite, y que la versión utilizada en las evaluaciones coincide exactamente con el código publicado en el repositorio de código abierto. El desarrollador señala que los resultados fueron obtenidos hace ocho días, pero aún no han sido incorporados oficialmente al ranking del banco de pruebas debido a un considerable retraso en la revisión de solicitudes de incorporación de datos por parte de los mantenedores del proyecto. Más allá de los números en sí, el logro subraya una conclusión técnica fundamental que ha emergido de múltiples experimentos en el campo: la importancia crítica del arnés o framework utilizado para ejecutar estos agentes. Un sistema mejor diseñado para orquestar las acciones del modelo de inteligencia artificial puede producir mejoras de rendimiento dramáticas, independientemente de la potencia bruta del modelo subyacente. Este resultado representa un momento importante para la comunidad de código abierto en inteligencia artificial, demostrando que la innovación en arquitecturas de agentes y en técnicas de ejecución puede permitir que proyectos descentralizados y colaborativos igualen o superen el rendimiento de soluciones desarrolladas por empresas con recursos masivos. El hallazgo también sugiere que futuras mejoras en sistemas de IA podrían enfocarse menos en ampliar modelos de lenguaje y más en mejorar cómo estos modelos interactúan con herramientas y ejecutan tareas complejas.