We are seeking experienced AI Evaluation Specialists to assess and improve the quality of AI assistant outputs for an enterprise AI training project.

You’ll evaluate AI-generated responses using defined quality standards, identify issues, and provide clear feedback to help improve AI systems. No prior formal AI experience is required.

AI Evaluation Specialist

Role Type: Contractor
Location: Remote — US, Canada, UK, Ireland, Australia, New Zealand

Scope of Work

- Evaluate AI-generated outputs against detailed rubrics for accuracy, relevance, quality, and adherence to guidelines.
- Apply consistent and objective judgment across large volumes of examples.
- Identify reasoning gaps, tool-use issues, logical errors, and inconsistencies.
- Provide concise, actionable feedback highlighting strengths and areas for improvement.
- Participate in discussions around rubric interpretation and evolving quality standards.
- Contribute to process improvements and evaluation best practices.
- Maintain accurate documentation of evaluations and recommendations.

Preferred Qualifications

- Experience in grading, quality assurance, editorial review, assessment, annotation, or similar analytical work.
- Advanced, daily use of AI assistants such as ChatGPT, Claude, or similar tools .
- Strong ability to analyze complex information and communicate findings clearly in writing.
- Experience with process improvement, rubric development, or quality assessment.
- Strong critical-thinking skills with a focus on consistency, accuracy, and fairness.
- Comfortable working independently on high-volume evaluation tasks.
- Strong attention to detail and ability to identify subtle quality issues.




- Collaborative approach to resolving ambiguous cases and improving evaluation criteria.

Empresa

Superprof permite a miles de personas encontrar profesores particulares y progresar en más de 2000 disciplinas : matemáticas, inglés, dibujo, deportes.

En 10 años, Superprof se ha convertido en un líder mundial en clases particulares, con presencia en más de 70 países.

¿La clave del éxito? Ofrecer a los profesores máxima flexibilidad, libertad con un modelo de 0% comisiones.

Ventajas

- Gratuito, abierto y sin intermediarios, Superprof te ofrece la posibilidad de dar clases particulares y compartir tus conocimientos en el tema que elijas.
- Crear tu anuncio sólo te llevará unos minutos, es gratuito y completamente gratuito.
- Miles de estudiantes encuentran cada día a su profesor en Superprof.
- Puedes publicar tu anuncio de profesor gratis
- Los estudiantes se ponen en contacto contigo
- Das tus clases y te pagan (0% comisión)
- Tus tarifas: entre $8.000/h y $20.000/hora
- Los alumnos a quienes enseñas
- El pago lo arreglas directamente con el alumno.
- Tu horario 100% flexible
- Para impartir tus clases presenciales o online
- Servicio al cliente disponible 24/7 por correo electrónico para responder a tus preguntas.

Misión

Nous avons une demande urgente : accompagner l'un de nos élèves qui souhaite améliorer rapidement son niveau Química. La fréquence souhaitée est de 2x 2hs por semana. Nous savons qu'il y a de nombreux professeurs compétents en Santa Fe. Si vous êtes disponible pour cette mission, merci pour votre réponse

Requisitos

- Seriedad
- Profesionalismo
- Puntualidad
- Pedagogía
- Disponibilidad
- Proactividad
- Pasión
- Simpatía
- Estamos convencidos que estas son las cualidades fundamental para que los alumnos lleguen a los resultados deseados.

📌 Physician Ai Evaluation Specialist (La Pampa)
🏢 Mindrift
📍 La Pampa