Programación Científica - Química y Python

Descripción del puesto:

Turing está creando uno de los conjuntos de datos de entrenamiento de IA en STEM más rigurosos de la industria. El proyecto SciCode implica la creación de tareas de programación científica de alta calidad que se utilizan para entrenar y evaluar modelos de IA de frontera. Como formador de SciCode, contribuirás directamente a la investigación de vanguardia en IA al redactar, implementar y revisar problemas científicos complejos en disciplinas fundamentales de STEM.

Responsabilidades:

• Escribir especificaciones de problemas científicos que consten de un problema principal y un mínimo de 3 subproblemas, todos conectados lógicamente y avanzando progresivamente hacia la solución del problema principal. Implementar soluciones ideales y verificadas en Python con cobertura completa de pruebas unitarias.
• Diseñar casos de prueba discriminativos que diferencien claramente las salidas de los modelos correctas de las incorrectas. Ejecutar controles de validación de control de calidad en la plataforma Turing Central Task Platform (CTP), incluidos controles de estructura de Nivel 1 y rúbricas de calidad de Nivel 2. Iterar en las tareas basándote en los comentarios de control de calidad para cumplir con los criterios de evaluación Pass@K en múltiples jueces de LLM (GPT, Gemini, Nemotron).
• Mantener una alta calidad de producción con una baja tasa de reelaboración, apuntando a una aprobación constante de L1 en la primera presentación.
• Participar en llamadas sincronizadas para revisiones, sesiones de retroalimentación y reuniones de seguimiento del proyecto durante las horas de solapamiento.

Requisitos:

• Maestría o doctorado en Química o campos afines.
• Sólidas habilidades de programación en Python con experiencia en computación científica.
• Capacidad para escribir problemas científicos rigurosos y bien planteados con restricciones claras y resultados esperados.
• Atención al detalle: las tareas deben cumplir con estrictas rúbricas de planteamiento correcto, discriminación de casos de prueba, corrección científica y determinismo.
• Experiencia previa en anotación de datos de IA, investigación o redacción científica.
• Familiaridad con marcos de evaluación de LLM o benchmarks de programación.
• Experiencia con bibliotecas como NumPy, SciPy, SymPy o herramientas científicas específicas del dominio.
• Investigación publicada o experiencia en proyectos académicos en un dominio STEM con estándares de calidad.

Detalles de la oferta:

• Compromisos requeridos: Solapamiento de 4 horas con la hora PST y 40 horas/semana.
• Tipo de contratación: Asignación como contratista/freelancer (sin seguro médico ni permisos pagados).
• Duración del contrato: 8 semanas.
• Ubicación: Bangladés, Brasil, Colombia, Egipto, Ghana, India, Pakistán, Indonesia, Kenia, Nigeria, Turquía, Vietnam.