Programación científica - Física y Python

Resumen del rol:

Turing está construyendo uno de los conjuntos de datos de entrenamiento de IA en STEM más rigurosos de la industria. El proyecto SciCode implica crear tareas de programación científica de alta calidad que se utilizan para entrenar y evaluar modelos de IA de frontera. Como formador de SciCode, contribuirás directamente a la investigación de vanguardia en IA al redactar, implementar y revisar problemas científicos complejos en disciplinas fundamentales de STEM.

Responsabilidades:

• Escribir especificaciones de problemas científicos que consten de un problema principal y un mínimo de 3 subproblemas, todos lógicamente conectados y que progresivamente conduzcan a la solución del problema principal. Implementar soluciones doradas verificadas en Python con cobertura completa de pruebas unitarias.
• Diseñar casos de prueba discriminativos que diferencien claramente las salidas de modelos correctas de las incorrectas. Ejecutar controles de validación de control de calidad en Turing Central Task Platform (CTP), incluidos controles de estructura de Nivel 1 y rúbricas de calidad de Nivel 2. Iterar en las tareas según los comentarios de control de calidad para cumplir con los criterios de evaluación de Pass@K en múltiples jueces LLM (GPT, Gemini, Nemotron).
• Mantener una alta calidad de producción con una baja tasa de reanudación, apuntando a una aprobación L1 consistente en la primera presentación.
• Participar en llamadas sincronizadas para revisiones, sesiones de retroalimentación y reuniones de pie de proyecto durante las horas de solapamiento.

Requisitos:

• Maestría o doctorado en Física. Fuertes habilidades de programación en Python con experiencia en computación científica.
• Capacidad para escribir problemas científicos rigurosos y bien planteados con restricciones claras y resultados esperados.
• Atención al detalle: las tareas deben cumplir con estrictas rúbricas de planteamiento correcto, discriminación de casos de prueba, corrección científica y determinismo.
• Experiencia previa en anotación de datos de IA, investigación o redacción científica.
• Familiaridad con marcos de evaluación de LLM o benchmarks de programación.
• Experiencia con bibliotecas como NumPy, SciPy, SymPy o herramientas científicas específicas de un dominio.
• Investigación publicada o experiencia en proyectos académicos en un dominio STEM. Estándares de calidad.

Detalles de la oferta:

• Compromisos requeridos: Solapamiento de 4 horas con PST y 40 horas/semana.
• Tipo de contratación: Asignación como contratista/freelancer (sin seguro médico/permiso pagado).
• Duración del contrato: 8 semanas.
• Ubicación: Bangladés, Brasil, Colombia, Egipto, Ghana, India, Pakistán, Indonesia, Kenia, Nigeria, Turquía, Vietnam.