Auditeur de tâches SWE-Bench
70 $US à 90 $US/hFourchette indicative communiquée par Mercor
Publié le 28 août 2026 · Candidatures jusqu'au 3 décembre 2026
Uniquement : États-Unis
Je vous redirige vers la page officielle de Mercor. La candidature est gratuite et se fait en anglais.
Je touche une commission de la plateforme si un candidat que j'ai orienté est recruté. Cela ne change rien pour vous.
Ce poste à distance consiste à évaluer et à auditer des tâches de référence en génie logiciel, des correctifs de référence et des suites de tests pour des modèles d'IA. Les candidats ont besoin d'au moins trois ans d'expérience professionnelle en génie logiciel, d'un historique de contributions open-source et de solides compétences en révision de code.
Traduction de l'annonce originale publiée par Mercor.
Évaluez la qualité, l'exactitude et la reproductibilité des tâches de benchmark en génie logiciel utilisées pour entraîner et évaluer les modèles d'un laboratoire d'IA de pointe. Vous évaluerez des tâches au niveau du dépôt, des correctifs de référence, des harnais de test et l'intégrité de la notation, et fournirez des commentaires écrits clairs et basés sur des critères.
Qualifications de base • 3+ ans d'expérience professionnelle en génie logiciel • Expérience réelle de contribution ou de maintenance open-source (PR fusionnées, rôles de committer / mainteneur) • Forte capacité à auditer les correctifs de référence, les exécuteurs de tests et l'isolation Docker, et à détecter les fuites de réponses / le piratage de récompenses • Maîtrise des écosystèmes courants (Python et au moins un parmi Java / Go / TypeScript / C++)
Qualifications souhaitées • Familiarité avec SWE-Bench (Verified) ou des benchmarks de dépôts similaires • Historique de maintenance sur des projets OSS Python majeurs (Django, Flask, scikit-learn, sympy, pytest, etc.) • Expérience préalable en révision de code ou en notation de tâches
3 postes
Uniquement : États-Unis
À propos de Mercor
Mercor est une place de marché américaine qui recrute des experts à distance pour des projets d'IA et de conseil, du droit à l'ingénierie. L'offre originale est consultable sur leur site.
Voir l'offre sur MercorOffres similaires
Auditeur de tâches de suivi pour développeur IA
Ce poste à distance consiste à évaluer et noter des traces de développement logiciel assisté par IA pour vérifier leur exactitude et la qualité du flux de travail, tout en fournissant des commentaires écrits clairs. Les principales exigences comprennent trois années d'expérience professionnelle en développement logiciel et une pratique concrète des outils de codage par IA.
Publié il y a 66 j70 $US à 90 $US/h
Auditeur de tâches AWS Serverless et Infrastructure-as-Code
Ce poste à distance consiste à évaluer des tâches AWS serverless et d'infrastructure-as-code pour entraîner des modèles d'IA de pointe, ce qui nécessite plus de trois ans d'expérience pratique dans la création d'applications AWS serverless multiservices et une solide maîtrise de l'infrastructure-as-code.
Publié il y a 66 j70 $US à 90 $US/h
Auditeur de tâches de défi ML
Ce poste à distance consiste à évaluer la qualité, l'exactitude et la rigueur méthodologique de tâches d'apprentissage automatique appliqué afin de fournir des commentaires écrits clairs. Les candidats ont besoin d'au moins trois ans d'expérience pratique en apprentissage automatique appliqué et d'une maîtrise des frameworks standard comme PyTorch et TensorFlow.
Publié il y a 66 j70 $US à 90 $US/h
Auditeur de tâches Kubernetes
Ce poste à distance consiste à évaluer et à noter des tâches Kubernetes pour l'entraînement de modèles d'IA en évaluant les opérations de clusters et en résolvant des scénarios de production. Le candidat idéal apporte au moins trois ans d'expérience pratique de Kubernetes en production et une connaissance approfondie des mécanismes internes des clusters et des modes de défaillance.
Publié il y a 66 j70 $US à 90 $US/h