? Sr. QA Engineer IA | Testing, Automatización y Calidad de Modelos AI

? ¡Sé parte de Stefanini!

En Stefanini somos más de 30.000 genios conectados desde 41 países, haciendo lo que les apasiona y co-creando un futuro mejor. ?✨

Hoy buscamos incorporar un/a Sr. QA Engineer con experiencia en testing de software, automatización y validación de soluciones basadas en Inteligencia Artificial, capaz de garantizar la calidad, confiabilidad y desempeño de modelos de Machine Learning y Large Language Models (LLMs) en entornos productivos.

? Ubicación: Argentina

? Modalidad: Remoto

? Seniority: Senior

? ¿Cuál será tu desafío?

Serás responsable de definir y ejecutar estrategias de aseguramiento de calidad para soluciones de IA, colaborando con equipos de Data Science, Ingeniería y MLOps para garantizar resultados confiables, seguros y alineados con estándares regulatorios y de negocio.

Responsabilidades

✅ Diseñar y ejecutar estrategias de testing para modelos de Machine Learning y LLMs.

✅ Desarrollar y automatizar pruebas unitarias, de integración y regresión para modelos en entrenamiento y producción.

✅ Diseñar, ejecutar y automatizar pruebas de APIs (REST, GraphQL y gRPC), evaluando aspectos funcionales, de rendimiento, seguridad y usabilidad.

✅ Validar la calidad, consistencia y gobernanza de datasets utilizados para el entrenamiento y evaluación de modelos.

✅ Implementar pruebas específicas para LLMs, evaluando factualidad, consistencia, sesgos, toxicidad y privacidad.

✅ Integrar procesos de QA dentro de pipelines CI/CD y MLOps.

✅ Monitorear indicadores de calidad post-producción como accuracy, drift, fairness, latencia y costos operativos.





✅ Elaborar documentación técnica, reportes de auditoría y evidencias para compliance y áreas de control.

✅ Garantizar el cumplimiento de marcos regulatorios y principios de IA Responsable.

✅ Impulsar buenas prácticas de testing automatizado, validación de modelos y calidad de datos.

? ¿Qué buscamos?

✔ Experiencia sólida en QA Automation, Software Testing o Quality Engineering aplicada a proyectos de IA, Machine Learning, NLP o Data Science.

✔ Experiencia con herramientas de automatización y testing de APIs, especialmente Postman/Newman.

✔ Conocimiento de entornos MLOps como MLflow, Kubeflow, Airflow o Vertex AI.

✔ Experiencia en validación de datos utilizando herramientas como Great Expectations o Pandera.

✔ Conocimiento de frameworks de evaluación de modelos de lenguaje como LangChain Evaluation, OpenAI Evals o TruLens.

✔ Experiencia definiendo estándares de calidad, trazabilidad y reproducibilidad de modelos y datasets.

✔ Conocimiento de métricas de performance, fairness y explicabilidad (SHAP, LIME).

✔ Experiencia en pruebas de performance y confiabilidad utilizando herramientas como JMeter o k6.

✔ Conocimientos de Cloud Computing y prácticas CI/CD.

✔ Capacidad para comunicar resultados y hallazgos técnicos a diferentes audiencias.

✔ Perfil analítico, orientado al detalle y comprometido con la calidad, la ética y la transparencia en soluciones de IA.

? Formación universitaria en Ingeniería Informática, Ciencias de la Computación o carreras afines (deseable).

? ¿Te interesa?

Si te apasiona la calidad, la automatización y la Inteligencia Artificial, queremos conocerte.

📌 Sr QA Engineer (IA) - 100% remoto (Argentina)
🏢 Stefanini LATAM
📍 Argentina