Senior GenAI Evaluation & LLMOps Engineer

Cada profesional de nuestra empresa es importante para nosotros, nos ayudan a crecer de manera diversa y gracias a ellos somos más de 11.000 personas trabajando con el mismo objetivo en 10 países.

Si eres una persona entusiasta y buscas un nuevo reto profesional, ¡Este es tu sitio!

Buscamos un perfil senior especializado en evaluación de soluciones GenAI y LLMOps, responsable de diseñar frameworks de evaluación, experimentación y gestión del ciclo de vida de prompts para entornos productivos.

¡Anímate a dar el salto! ¡Te estamos esperando!

Responsabilidades

• Diseñar frameworks de evaluación basados en Eval Driven Development .
• Definir estrategias de Golden Datasets , incluyendo gobierno, versionado y mejora continua.
• Construir sistemas de evaluación mediante Deterministic Graders, LLM-as-a-Judge y evaluadores híbridos .
• Diseñar procesos de benchmarking de modelos, prompts y agentes. ...