We are seeking experienced AI Evaluation Specialists to assess and improve the quality of AI assistant outputs for an enterprise AI training project.

You’ll evaluate AI-generated responses using defined quality standards, identify issues, and provide clear feedback to help improve AI systems. No prior formal AI experience is required.

AI Evaluation Specialist

Role Type: Contractor

Location: Remote — US, Canada, UK, Ireland, Australia, New Zealand

Scope of Work

- Evaluate AI-generated outputs against detailed rubrics for accuracy, relevance, quality, and adherence to guidelines.
- Apply consistent and objective judgement across large volumes of examples.
- Identify reasoning gaps, tool-use issues, logical errors, and inconsistencies.
- Provide concise, actionable feedback highlighting strengths and areas for improvement.
- Participate in discussions around rubric interpretation and evolving quality standards.
- Contribute to process improvements and evaluation best practices.
- Maintain accurate documentation of evaluations and recommendations.

Preferred Qualifications

- Experience in grading, quality assurance, editorial review, assessment, annotation, or similar analytical work.
- Advanced, daily use of AI assistants such as ChatGPT, Claude, or similar tools.
- Strong ability to analyze complex information and communicate findings clearly in writing.
- Experience with process improvement, rubric development, or quality assessment.
- Strong critical‑thinking skills with a focus on consistency, accuracy, and fairness.
- Comfortable working independently on high-volume evaluation tasks.
- Strong attention to detail and ability to identify subtle quality issues.




- Collaborative approach to resolving ambiguous cases and improving evaluation criteria.

Empresa

Superprof permite a miles de personas encontrar profesores particulares y progresar en más de 2000 disciplinas: matemáticas, inglés, dibujo, deportes.

En 10 años, Superprof se ha convertido en un líder mundial en clases particulares, con presencia en más de 70 países.

¿La clave del éxito? Ofrecer a los profesores máxima flexibilidad, libertad con un modelo de 0% comisiones.

Ventajas

Gratuito, abierto y sin intermediarios, Superprof te ofrece la posibilidad de dar clases particulares y compartir tus conocimientos en el tema que elijas.

Crear tu anuncio solo te llevará unos minutos, es gratuito y completamente gratuito.

Miles de estudiantes encuentran cada día a su profesor en Superprof.

¿Cómo funciona?

- Puedes publicar tu anuncio de profesor gratis
- Los estudiantes se ponen en contacto contigo
- Das tus clases y te pagan (0% comisión)

Con Superprof tú eliges:

- Tus tarifas: entre $8.000/h y $20.000/hora
- Los alumnos a quienes enseñas
- El pago lo arreglás directamente con el alumno.
- Tu horario 100% adaptable
- Para impartir tus clases presenciales o online

¿Lo mejor? Servicio al cliente disponible 24/7 por correo electrónico para responder a tus preguntas.

Misión

Nous sommes à la recherche d’un prof Química pour donner des cours particuliers en Neuquén 2x 2hs por semana. Demande urgente

Requisitos

Cuando das clases en Superprof, esperamos que seas:

- Seriedad
- Profesionalismo
- Puntualidad
- Pedagogía
- Disponibilidad
- Proactividad
- Pasión
- Simpatía

Estamos convencidos que estas son las cualidades clave para que los alumnos lleguen a los resultados deseados.

📌 Physician Ai Evaluation Specialist (Rincón de los Sauces)
🏢 Mindrift
📍 Rincón de los Sauces