Senior Software Engineer - AI Agents
Mercado LibreResponsibilities
- Construir y mantener un pipeline de evaluación continua que recolecte conversaciones de producción y las evalúe programadamente contra rúbricas configurables.
- Evolucionar la plataforma para auditar agentes y sus assets durante todo su ciclo de vida.
- Integrar la plataforma en procesos de mejora continua para retroalimentar la selección de modelos y el ajuste de prompts.
- Diseñar estrategias de evaluación y rúbricas para agentes conversacionales complejos en entornos de alta disponibilidad.
- Colaborar con equipos de producto para convertir casos de uso en criterios de evaluación medibles.
Requirements
- Conocimientos sólidos de Python o Go y diseño de APIs RESTful.
- Familiaridad con arquitecturas de microservicios, sistemas distribuidos y procesamiento asíncrono.
- Conocimientos de bases de datos relacionales como MySQL.
- Familiaridad con LLMs, sus APIs y frameworks de evaluación como LLM-as-judge.
- Curiosidad, autonomía para investigar y resolver problemas, y capacidad de trabajo en equipo.
Benefits
- Modalidad de trabajo híbrida.
- Lugar de trabajo: Site Saavedra, CABA.
- Oportunidad de trabajar en proyectos de alto impacto relacionados con agentes conversacionales, modelos de IA y evaluación continua.
Categories
About Mercado Libre
At Mercado Libre, we are transforming the way people buy, sell, advertise, pay, finance, and ship across Latin America. We are the leading e-commerce and fintech company in the region, with a presence in 18 countries and a team of more than 130,000 people. We are one of the best places to work in Latin America. Being part of MELI means working with intensity and excellence because we are passionate about what we do and we believe in the value of meritocracy. We overcome our own limits and learn by tackling big challenges. We have an entrepreneurial mindset, we take risks, we reinvent ourselves, and we innovate. We compete as a team to win in a flexible and fun work environment. And so, every day, we create sustainable results that transform the lives of millions of people. We look for people who are passionate about big challenges, who are willing to step out of their comfort zone, give their maximum effort, and take risks as entrepreneurs. Join the team that makes the purpose of democratizing commerce and financial services a reality, transforming the lives of millions across Latin America. Be part of the MELI experience!