ML Challenge Task Auditor
70 $ bis 90 $/Std.Richtwert laut Mercor
Veröffentlicht am 28. August 2026 · Bewerbung bis 15. November 2026
Nur: Vereinigte Staaten
Ich leite Sie zur offiziellen Seite von Mercor weiter. Die Bewerbung ist kostenlos und auf Englisch.
Ich erhalte von der Plattform eine Provision, wenn ein von mir empfohlener Kandidat eingestellt wird. Für Sie ändert sich nichts.
This remote role involves evaluating the quality, correctness, and methodological rigor of applied machine learning tasks to provide clear written feedback. Candidates need at least three years of hands-on applied machine learning experience and proficiency with standard frameworks like PyTorch and TensorFlow.
Beschreibung auf Englisch, wie von Mercor veröffentlicht.
Evaluate the quality, correctness, and methodological rigor of applied machine-learning tasks used to train and evaluate a frontier AI lab's models. You'll assess experiment design, model-selection reasoning, and evaluation methodology, and provide clear, rubric-based written feedback.
Basic Qualifications • 3+ years hands-on applied/experimental ML (experiment design, model selection, hyperparameter tuning, evaluation methodology) • Strong grasp of data-quality rigor: leakage detection, metric gaming, and train/test/CV hygiene • Proficiency with standard ML frameworks (PyTorch, TensorFlow, scikit-learn, XGBoost) • Ability to critique ML claims against evidence and reproduce results
Preferred Qualifications • Competition / benchmark experience (e.g., Kaggle) • Graduate research or publication record in applied ML • Prior task-grading or peer-review experience
Note: this role evaluates applied/experimental ML rigor, it is not an LLM-application-building or MLOps role.
3 offene Stellen
Nur: Vereinigte Staaten
Über Mercor
Mercor ist ein US-Marktplatz, der Remote-Experten für KI- und Beratungsprojekte einstellt, vom Recht bis zum Ingenieurwesen. Die Originalanzeige steht auf deren Website.
Diese Stelle auf Mercor ansehenÄhnliche Stellen
SWE-Bench Task Auditor
This remote role involves evaluating and auditing software-engineering benchmark tasks, reference patches, and test harnesses for AI models. Candidates need at least three years of professional software engineering experience, open-source contribution history, and strong code-review skills.
Vor 48 Tagen veröffentlicht70 $ bis 90 $/Std.
AI Developer Trace Task Auditor
This remote role involves evaluating and grading AI-assisted software development traces for correctness and workflow quality, providing clear written feedback. Key requirements include three years of professional software development experience and hands-on work with AI coding tools.
Vor 48 Tagen veröffentlicht70 $ bis 90 $/Std.
Experte für maschinelles Lernen
Diese Remote-Rolle umfasst das Schreiben von Modellierungsproblemen, die Bewertung von modellgeneriertem Code und die Beurteilung von Ansätzen des maschinellen Lernens für KI-Forschungsteams. Bewerber benötigen professionelle Erfahrung im Training, bei der Evaluierung oder Bereitstellung von Systemen für maschinelles Lernen sowie klare schriftliche Kommunikationsfähigkeiten.
Vor 31 Tagen veröffentlicht70 $ bis 120 $/Std.
Kubernetes Task Auditor
This remote role involves evaluating and grading Kubernetes tasks for AI model training by assessing cluster operations and troubleshooting production scenarios. The ideal candidate brings at least three years of hands-on production Kubernetes experience and deep knowledge of cluster internals and failure modes.
Vor 48 Tagen veröffentlicht70 $ bis 90 $/Std.