Auditor de tareas de SWE-Bench

Mercor
Ingeniería de software
Remoto
Solo Estados Unidos
Freelance

70 US$ a 90 US$/hRango orientativo indicado por Mercor

Publicado el 28 de agosto de 2026 · Candidaturas hasta el 15 de noviembre de 2026

Postular en Mercor

Solo: Estados Unidos

Te envío a la página oficial de Mercor. La candidatura es gratuita y en inglés.

Cobro una comisión de la plataforma cuando contratan a un candidato que recomendé. Para ti no cambia nada.

Tailor my resume to this job
Comparte este puesto

Este puesto remoto consiste en evaluar y auditar tareas de referencia de ingeniería de software, parches de referencia y entornos de prueba para modelos de IA. Los candidatos necesitan al menos tres años de experiencia en ingeniería de software profesional, historial de contribuciones de código abierto y sólidas habilidades de revisión de código.

Traducción de la oferta original publicada por Mercor.

Evalúa la calidad, la corrección y la reproducibilidad de las tareas de evaluación comparativa de ingeniería de software utilizadas para entrenar y evaluar los modelos de un laboratorio de IA de vanguardia. Analizarás tareas a nivel de repositorio, parches de referencia, entornos de prueba y la integridad de la calificación, y proporcionarás comentarios escritos claros basados en rúbricas.

Requisitos básicos • 3+ años de ingeniería de software profesional • Experiencia real en contribuciones de código abierto o como mantenedor (PR fusionadas, roles de committer / mantenedor) • Gran capacidad para auditar parches de referencia, ejecutores de pruebas y aislamiento en Docker, y para detectar fugas de respuestas / manipulación de recompensas • Fluidez en ecosistemas comunes (Python y al menos uno entre Java / Go / TypeScript / C++)

Requisitos preferidos • Familiaridad con SWE-Bench (Verified) o benchmarks de repositorios similares • Historial como mantenedor en proyectos OSS de Python importantes (Django, Flask, scikit-learn, sympy, pytest, etc.) • Experiencia previa en revisión de código o calificación de tareas

3 vacantes

Solo: Estados Unidos

Sobre Mercor

Mercor es un marketplace estadounidense que contrata expertos en remoto para proyectos de IA y consultoría, del derecho a la ingeniería. La oferta original está en su sitio.

Ver este puesto en Mercor

Puestos similares

Auditor de tareas de seguimiento de desarrollo de IA

Mercor
Ingeniería de software
Remoto
Solo Estados Unidos
Freelance

Este puesto remoto consiste en evaluar y calificar rastros de desarrollo de software asistido por IA para verificar su corrección y la calidad del flujo de trabajo, proporcionando comentarios claros por escrito. Los requisitos clave incluyen tres años de experiencia en desarrollo de software profesional y trabajo práctico con herramientas de codificación de IA.

Publicado hace 48 días70 US$ a 90 US$/h

Auditor de tareas de AWS Serverless e infraestructura como código

Mercor
Ingeniería de software
Remoto
Solo Estados Unidos
Freelance

Este puesto remoto implica evaluar tareas de AWS serverless e infraestructura como código para entrenar modelos de IA de frontera, requiriendo más de tres años de experiencia práctica en la construcción de aplicaciones serverless de AWS de múltiples servicios y una sólida competencia en infraestructura como código.

Publicado hace 48 días70 US$ a 90 US$/h

Auditor de tareas de desafíos de ML

Mercor
Análisis de datos
Remoto
Solo Estados Unidos
Freelance

Este puesto remoto implica evaluar la calidad, corrección y rigor metodológico de tareas de aprendizaje automático aplicado para proporcionar comentarios claros por escrito. Los candidatos necesitan al menos tres años de experiencia práctica en aprendizaje automático aplicado y dominio de marcos estándar como PyTorch y TensorFlow.

Publicado hace 48 días70 US$ a 90 US$/h

Auditor de tareas de Kubernetes

Mercor
Ingeniería de software
Remoto
Solo Estados Unidos
Freelance

Este puesto remoto implica evaluar y calificar tareas de Kubernetes para el entrenamiento de modelos de IA mediante la evaluación de operaciones de clúster y la resolución de problemas en escenarios de producción. El candidato ideal aporta al menos tres años de experiencia práctica en Kubernetes en producción y un profundo conocimiento de los componentes internos de los clústeres y los modos de fallo.

Publicado hace 48 días70 US$ a 90 US$/h