AI Developer Trace Task Auditor
70 $ bis 90 $/Std.Richtwert laut Mercor
Veröffentlicht am 28. August 2026 · Bewerbung bis 15. November 2026
Nur: Vereinigte Staaten
Ich leite Sie zur offiziellen Seite von Mercor weiter. Die Bewerbung ist kostenlos und auf Englisch.
Ich erhalte von der Plattform eine Provision, wenn ein von mir empfohlener Kandidat eingestellt wird. Für Sie ändert sich nichts.
This remote role involves evaluating and grading AI-assisted software development traces for correctness and workflow quality, providing clear written feedback. Key requirements include three years of professional software development experience and hands-on work with AI coding tools.
Beschreibung auf Englisch, wie von Mercor veröffentlicht.
Evaluate the quality and correctness of AI-assisted software-development traces used to train and evaluate a frontier AI lab's models. You'll assess end-to-end coding sessions produced with AI-assisted developer tools, judging correctness, workflow soundness, and reasoning, and provide clear, rubric-based written feedback.
Basic Qualifications • 3+ years professional software development • Hands-on experience with AI-assisted coding tools and agentic / spec-driven workflows (Cursor, GitHub Copilot, Claude Code, or similar) • Strong code-reading and debugging skills across full-stack or backend systems • Ability to evaluate multi-step coding trajectories for correctness and best practice
Preferred Qualifications • Experience with Kiro or Amazon CodeCatalyst • Prior work evaluating or grading AI-generated code • Contributions to developer tooling
3 offene Stellen
Nur: Vereinigte Staaten
Über Mercor
Mercor ist ein US-Marktplatz, der Remote-Experten für KI- und Beratungsprojekte einstellt, vom Recht bis zum Ingenieurwesen. Die Originalanzeige steht auf deren Website.
Diese Stelle auf Mercor ansehenÄhnliche Stellen
SWE-Bench Task Auditor
This remote role involves evaluating and auditing software-engineering benchmark tasks, reference patches, and test harnesses for AI models. Candidates need at least three years of professional software engineering experience, open-source contribution history, and strong code-review skills.
Vor 48 Tagen veröffentlicht70 $ bis 90 $/Std.
AWS Serverless & Infrastructure-as-Code Task Auditor
This remote role involves evaluating AWS serverless and infrastructure-as-code tasks to train frontier AI models, requiring over three years of hands-on experience building multi-service AWS serverless applications and strong proficiency with infrastructure-as-code.
Vor 48 Tagen veröffentlicht70 $ bis 90 $/Std.
ML Challenge Task Auditor
This remote role involves evaluating the quality, correctness, and methodological rigor of applied machine learning tasks to provide clear written feedback. Candidates need at least three years of hands-on applied machine learning experience and proficiency with standard frameworks like PyTorch and TensorFlow.
Vor 48 Tagen veröffentlicht70 $ bis 90 $/Std.
Kubernetes Task Auditor
This remote role involves evaluating and grading Kubernetes tasks for AI model training by assessing cluster operations and troubleshooting production scenarios. The ideal candidate brings at least three years of hands-on production Kubernetes experience and deep knowledge of cluster internals and failure modes.
Vor 48 Tagen veröffentlicht70 $ bis 90 $/Std.