Líder de Garantía de Calidad en Matemáticas (QAL)

En este puesto de contratista remoto y por horas, trabajarás como Líder de Control de Calidad de Matemáticas (QAL) para supervisar la calidad, la consistencia y el rendimiento de los formadores en proyectos de entrenamiento de IA en matemáticas. Revisarás contenido matemático generado por IA y el trabajo de los formadores y el equipo de control de calidad, evaluarás la calidad de los resultados según las directrices del proyecto, proporcionarás comentarios escritos precisos y te asegurarás de que todos los colaboradores sigan los estándares de calidad esperados.

Evaluarás el trabajo en cuanto a precisión matemática, razonamiento lógico, corrección de cálculos, validez de las demostraciones, calidad de la notación, claridad, formato, cumplimiento de instrucciones y adhesión a rúbricas específicas del proyecto. Detectarás problemas recurrentes de calidad, comunicarás actualizaciones a los formadores y al equipo de control de calidad, apoyarás la incorporación, mantendrás la documentación y ayudarás a activar a los colaboradores que no estén trabajando de forma constante. Este puesto requiere sólidos conocimientos de matemáticas, excelentes habilidades de comunicación en inglés, gran atención al detalle, comunicación estructurada y la capacidad de gestionar flujos de trabajo de calidad en equipos técnicos remotos.

Este puesto es en SME Careers, una empresa de servicios de datos de IA de rápido crecimiento y filial de SuperAnnotate, que suministra datos de entrenamiento para muchas de las mayores empresas de IA y laboratorios de modelos base del mundo. Tu liderazgo en calidad matemática ayudará directamente a mejorar los principales modelos de IA del mundo, garantizando que los datos de entrenamiento matemático sean precisos, lógicamente sólidos, explicados con claridad, bien documentados y alineados con las expectativas del cliente.

El proceso de selección consta de una entrevista de IA, una tarea específica del dominio y una entrevista con un reclutador.

Responsabilidades

• Monitoreo de calidad: Verificar puntualmente los elementos de matemáticas, identificar problemas de calidad, proporcionar comentarios continuos a través de mensajes directos y escalar problemas recurrentes o críticos.
• Revisión matemática: Evaluar explicaciones matemáticas generadas por IA, demostraciones, derivaciones, cálculos, soluciones de problemas verbales, diagramas/descripciones y razonamiento paso a paso en busca de corrección y claridad.
• Comunicación con formadores y control de calidad: Actualizar a los formadores y al equipo de control de calidad en Discord sobre nuevas directrices de elementos, cambios en el proyecto, actualizaciones del flujo de trabajo, expectativas de calidad y estándares de revisión específicos de matemáticas.
• Gestión de preguntas: Responder a las preguntas de los formadores y del control de calidad de forma clara y rápida, especialmente en torno a la validez del razonamiento, la notación, las suposiciones, los métodos de solución, la estructura de las demostraciones, el formato y la interpretación de rúbricas.
• Gestión de activación de formadores y control de calidad: Enviar mensajes directos a los colaboradores que estén inactivos o no trabajen, fomentar su activación, realizar un seguimiento y señalar problemas de disponibilidad cuando sea necesario.
• Documentación: Crear y mantener la documentación del proyecto de matemáticas, incluidas guías de estilo, herramientas de seguimiento, preguntas frecuentes, notas de calidad, ejemplos, sistemas de señuelo (honeypots), tareas de calibración y materiales de incorporación.
• Incorporación y formación: Programar y dirigir llamadas de incorporación y formación con formadores y el equipo de control de calidad para explicar las expectativas del proyecto, los flujos de trabajo, las rúbricas, los estándares de calidad y los requisitos de revisión específicos de matemáticas.
• Alineación de calidad: Garantizar que todos los formadores y el equipo de control de calidad apliquen las directrices de matemáticas de manera consistente y comprendan las actualizaciones a medida que evolucionan los proyectos.
• Análisis de patrones de errores: Identificar problemas recurrentes como pasos de razonamiento omitidos, simplificaciones no válidas, fórmulas incorrectas, inconsistencias en la notación, errores aritméticos o respuestas que son correctas pero están mal justificadas.
• Mejora de procesos: Identificar brechas de calidad recurrentes, proponer mejoras en el flujo de trabajo y ayudar a construir procesos de control de calidad escalables para proyectos de entrenamiento de IA en matemáticas.

Requisitos

• Título de grado, maestría o doctorado en Matemáticas, Matemáticas Aplicadas, Estadística, Física, Ingeniería, Ciencias de la Computación, Educación Matemática o un campo cuantitativo estrechamente relacionado.
• Sólido dominio del idioma inglés para seguir las directrices del proyecto, comunicarse con los equipos y proporcionar comentarios matemáticos claros en inglés.
• Más de 3 años de experiencia profesional en matemáticas, enseñanza, tutoría, investigación, análisis cuantitativo, redacción técnica, desarrollo de planes de estudio, creación de problemas, diseño de evaluaciones o revisión de contenido matemático.
• Sólida comprensión de temas fundamentales de matemáticas como álgebra, geometría, trigonometría, cálculo, álgebra lineal, matemáticas discretas, probabilidad, estadística, teoría de números, combinatoria, ecuaciones diferenciales y demostraciones matemáticas.
• Capacidad para evaluar contenido matemático frente a rúbricas detalladas e identificar problemas como suposiciones incorrectas, razonamiento defectuoso, demostraciones no válidas, errores de cálculo, problemas de notación, pasos faltantes, datos alucinados o explicaciones incompletas.
• Comodidad para revisar tanto explicaciones conceptuales como soluciones paso a paso, incluido si cada paso se sigue lógicamente del anterior.
• Se prefiere la familiaridad con herramientas o flujos de trabajo matemáticos como LaTeX, Python, MATLAB, R, WolframAlpha/Mathematica, GeoGebra, Desmos, modelado en hojas de cálculo o herramientas de computación simbólica.
• Se valora muy positivamente la experiencia liderando o apoyando equipos remotos de formadores, anotadores, revisores, educadores, redactores técnicos o personal de control de calidad.
• Comodidad trabajando en entornos remotos de ritmo rápido utilizando herramientas como Discord, Google Sheets, Google Docs, rastreadores, paneles y sistemas de gestión de proyectos.
• Altamente detallista y organizado, con capacidad para mantener guías de estilo, preguntas frecuentes, herramientas de seguimiento, materiales de incorporación, sistemas de señuelo, tareas de calibración y otra documentación de calidad.
• La experiencia con entrenamiento de IA, anotación de datos, modelos de lenguaje grandes, evaluación de respuestas y mensajes, control de calidad de contenido matemático o evaluación de LLM basada en rúbricas es una gran ventaja.
• Fluidez nativa en penyabi