Como Senior Software Engineer - Evals Platform en Mercado Libre, diseñarás y escalarás sistemas innovadores y seguros que resuelven problemas reales y de alto impacto. Trabajarás en un ambiente dinámico con tecnología de vanguardia, aplicando buenas prácticas de ingeniería, modelos de IA propios y aprendizaje continuo, con el propósito de democratizar el comercio electrónico y los servicios financieros en América Latina.
Imagináte emprendiendo proyectos desafiantes, dinámicos e innovadores y siendo responsable de:
- Construir y mantener el pipeline de evaluación continua recolectando conversaciones de producción para evaluarlas de forma programada contra rúbricas configurables.
- Evolucionar la plataforma de evaluación continua permitiendo auditar agentes y sus assets en ciclo de vida completo.
- Integrar la plataforma en el proceso de mejora continua retroalimentando la selección de modelos y ajuste de prompts.
- Diseñar estrategias de evaluación y rúbricas para agentes conversacionales complejos en entornos de alta disponibilidad.
- Colaborar con equipos de productos para traducir casos de uso en criterios de evaluación medibles.
¿Qué buscamos en vos?
- Poseer conocimientos sólidos en lenguajes como Python o Go y en diseño de APIs RESTful.
- Contar con familiaridad en arquitecturas de microservicios, sistemas distribuidos y procesamiento asíncrono.
- Tener conocimientos de bases de datos relacionales como MySQL.
- Demostrar familiaridad con LLMs, sus APIs y frameworks de evaluación como LLM-as-judge.
- Demostrar curiosidad y autonomía para investigar, resolver problemas y trabajar en equipo.
¿Te animás a dejar huella en la tecnología de América Latina? ¡Postulate y sumate a nuestro propósito!
Modalidad de trabajo híbrida. Site Saavedra- CABA.
📌 Senior Software Engineer - AI Agents (Buenos Aires)
🏢 Mercado Libre
📍 Buenos Aires
Postulate a este anuncio
Muestra tus habilidades a la empresa, rellenar el formulario y deja un toque personal en la carta, ayudará el reclutador en la elección del candidato.