Líder de Control de Calidad de Historia

En este rol de contratista remoto y por horas, trabajarás como Líder de Control de Calidad de Historia (QAL) para supervisar la calidad, la consistencia y el desempeño de los capacitadores en proyectos de entrenamiento de IA centrados en la historia. Revisarás contenido histórico generado por IA y el trabajo de capacitadores/controladores de calidad, evaluarás la calidad de los resultados frente a las directrices del proyecto, proporcionarás comentarios escritos precisos y te asegurarás de que todos los colaboradores sigan los estándares de calidad esperados.

Evaluarás el trabajo en función de la precisión histórica, la cronología, el conocimiento de las fuentes, la causalidad, el contexto, los matices regionales y culturales, la calidad de la interpretación, la claridad, el formato, el seguimiento de instrucciones y la adherencia a rúbricas específicas del proyecto. Detectarás problemas recurrentes de calidad, comunicarás actualizaciones a los capacitadores y controladores de calidad, apoyarás la incorporación (onboarding), mantendrás la documentación y ayudarás a activar a los colaboradores que no estén trabajando de manera consistente. Este rol requiere una sólida experiencia en historia, excelentes habilidades de comunicación en inglés, gran atención al detalle, comunicación estructurada y la capacidad de gestionar flujos de trabajo de calidad en equipos de expertos remotos.

Este rol es en SME Careers, una empresa de servicios de datos de IA de rápido crecimiento y subsidiaria de SuperAnnotate, que ofrece datos de entrenamiento para muchas de las mayores empresas de IA del mundo y laboratorios de modelos base. Tu liderazgo en la calidad histórica ayudará directamente a mejorar los principales modelos de IA del mundo al garantizar que los datos de entrenamiento de historia sean precisos, contextualizados, equilibrados, bien explicados, bien documentados y estén alineados con las expectativas del cliente.

El proceso de selección incluye una entrevista con IA, una tarea específica de la materia y una entrevista con un reclutador.

Importante:
No hay un proyecto inmediato para este rol; sin embargo, si estás cualificado, estarás entre los primeros expertos a los que contactaremos cuando surjan oportunidades relevantes. Esto también te dará acceso a futuros proyectos disponibles a través de nuestra red de expertos.

Responsabilidades

• Monitoreo de calidad: Realizar controles puntuales de elementos históricos, identificar problemas de calidad, proporcionar comentarios continuos a través de mensajes directos y escalar problemas recurrentes o críticos.
• Revisión histórica: Evaluar explicaciones históricas generadas por IA, líneas de tiempo, comparaciones, resúmenes, respuestas basadas en fuentes y razonamientos en cuanto a precisión, contexto, equilibrio y claridad.
• Comunicación con capacitadores y control de calidad: Informar a los capacitadores y controladores de calidad en Discord sobre nuevas directrices de elementos, cambios en el proyecto, actualizaciones de flujos de trabajo, expectativas de calidad y estándares de revisión específicos de la historia.
• Gestión de preguntas: Responder a las preguntas de los capacitadores y controladores de calidad de manera clara y rápida, especialmente en torno a la cronología, el contexto histórico, la interpretación de fuentes, las interpretaciones disputadas, el sesgo, los matices regionales y la interpretación de rúbricas.
• Gestión de activación de capacitadores y control de calidad: Enviar mensajes directos a los colaboradores inactivos o que no estén trabajando, fomentar la activación, realizar un seguimiento y señalar problemas de disponibilidad cuando sea necesario.
• Documentación: Crear y mantener la documentación del proyecto de historia, incluidas guías de estilo, rastreadores, preguntas frecuentes (FAQ), notas de calidad, ejemplos, honeypots, tareas de calibración y materiales de incorporación.
• Incorporación y capacitación: Programar y dirigir llamadas de incorporación y capacitación con capacitadores y controladores de calidad para explicar las expectativas del proyecto, flujos de trabajo, rúbricas, estándares de calidad y requisitos de revisión específicos de la historia.
• Alineación de calidad: Asegurar que todos los capacitadores y controladores de calidad apliquen las directrices de revisión histórica de manera consistente અને entiendan las actualizaciones a medida que evolucionan los proyectos.
• Revisión de riesgos y sesgos: Señalar afirmaciones históricas engañosas, excesivamente confiadas, sesgadas, culturalmente insensibles, anacrónicas o mal documentadas.
• Mejora de procesos: Identificar brechas de calidad recurrentes, proponer mejoras en los flujos de trabajo y ayudar a construir procesos de control de calidad escalables para proyectos de entrenamiento de IA en historia.

Requisitos

• Título de grado, maestría o doctorado en Historia, Clásicos, Estudios de Área, Arqueología, Historia Política, Historia Cultural, Relaciones Internacionales, Humanidades o un campo estrechamente relacionado.
• Sólido dominio del idioma inglés para seguir las directrices del proyecto, comunicarse con los equipos y proporcionar comentarios escritos claros.
• Más de 3 años de experiencia en investigación histórica, enseñanza, redacción, edición, revisión académica, trabajo en museos/archivos, desarrollo curricular o flujos de trabajo de humanidades relacionados.
• Sólida comprensión de los métodos históricos, la cronología, las fuentes primarias frente a las secundarias, la historiografía, la causalidad, la continuidad/cambio, el contexto regional y la interpretación basada en evidencia.
• Capacidad para evaluar contenido histórico frente a rúbricas detalladas e identificar problemas como anacronismo, cronología incorrecta, afirmaciones sin fundamento, simplificación excesiva, marcos sesgados, citas fabricadas o explicaciones causales engañosas.
• Se prefiere la familiaridad con una o más especializaciones históricas como historia antigua, historia medieval, historia moderna, historia mundial, historia militar, historia intelectual, historia social, historia económica, historia colonial/poscolonial o historia regional.
• Se prefiere firmemente la experiencia en la dirección o el apoyo a equipos remotos de investigadores, redactores, revisores, educadores, anotadores o controladores de calidad.
• Comodidad para trabajar en entornos remotos de ritmo rápido utilizando herramientas como Discord, Google Sheets, Google Docs, rastreadores, paneles y sistemas de gestión de proyectos.
• Altamente detallista y organizado, con la capacidad de mantener guías de estilo, preguntas frecuentes, rastreadores, materiales de incorporación, tareas de calibración y documentación.
• La experiencia con entrenamiento de IA, anotación de datos, evaluación de LLM, control de calidad académico, verificación de datos o revisión basada en rúbricas es una gran ventaja.