Evaluación y desarrollo de Agentes AI
Nubox tiene agentes conversacionales en producción, hablando directamente con clientes todos los días. Cada conversación es una oportunidad de hacerlo mejor, o de que algo salga mal sin que nadie se dé cuenta a tiempo.
Buscamos a alguien que se haga cargo de esa capa: no solo leer conversaciones y avisar cuando algo falla, sino diseñar el sistema que permite detectarlo, medirlo y corregirlo. Vas a definir criterios de calidad, diseñar cómo se evalúa cada conversación, encontrar los patrones de falla, y hacer ajustes para que el agente responda mejor la próxima vez.
No es solamente “revisar chats" sino que también diseñar cómo se mide la calidad de un sistema de IA que ya está en producción, hablando con cientos de personas.
Qué vas a hacer
- Analizar conversaciones reales de los bots (llamadas y chats) y construir criterios claros de qué es una buena y una mala respuesta.
- Diseñar rúbricas de evaluación y aplicarlas de forma sistemática y ad-hoc.
- Detectar patrones de falla recurrentes y proponer ajustes concretos a los prompts.
- Medir el impacto de esos ajustes: ¿mejoró de verdad o solo se sintió mejor?
- Documentar hallazgos y comunicarlos a un equipo técnico chico, donde tu criterio va a pesar.
- Con el tiempo, participar en el desarrollo de nuevas funcionalidades de IA sobre estos sistemas.
A quién buscamos
Buscamos rigor analítico y capacidad de construir un sistema de medición.
Encaja especialmente bien:
Encaja especialmente bien:
- Ingeniería Civil Industrial: por el entrenamiento en diseño de métricas, procesos y análisis cuantitativo — es el corazón del rol.
- Ingeniería en Informática / Computación: si además de programar te interesa entender por qué un sistema de IA falla y cómo corregirlo, no solo hacer que corra.
Más importante que la carrera: que te intereses genuinamente en cómo funciona la IA en producción, no solo en la teoría, sino en el trabajo de hacerla confiable. Esta es la puerta de entrada; quien hace bien este trabajo, se expande rápido a otros proyectos de IA del equipo.
Requisitos
- Cursando los últimos años de la carrera (o egresado reciente).
- Manejo de Google Sheets avanzado. Desarrollo con Claude Code/ Codex, etc.
- Comunicación clara, capacidad de sostener un criterio propio y defenderlo con evidencia.
- Curiosidad real por IA aplicada, y por entender cómo se construye y mejora un sistema de IA real.
- Autogestión y autonomía ante la ambigüedad.
Equipo
Trabajarás directamente con el área de Applied AI de Nubox:
