Brettspiel-Reasoning-Experte (AI-Training & Evaluierung)

Über Turing

Turing ist eines der weltweit am schnellsten wachsenden KI-Unternehmen und beschleunigt die Entwicklung und den Einsatz leistungsstarker KI-Systeme. Turing hilft führenden KI-Laboren dabei, die Fähigkeiten von Large Language Models (LLMs) im Bereich des logischen Denkens, der Problemlösung und der Entscheidungsfindung durch hochwertiges menschliches Feedback, Evaluierung und Trainingsdaten zu verbessern.

Rollenübersicht

Wir suchen Expertinnen und Experten für das logische Denken bei Brettspielen, die uns beim Training und der Evaluierung von KI-Modellen der nächsten Generation unterstützen. In dieser Rolle nutzen Sie Ihre Expertise in den Bereichen Brettspiele, Spielmechaniken, strategisches Denken, Wahrscheinlichkeitsrechnung und komplexe Regelsysteme, um hochwertige Datensätze zu erstellen, zu überprüfen und zu bewerten, die die KI-Leistung verbessern.

Sie arbeiten an anspruchsvollen Aufgaben zu Spielosmatik, Entscheidungsfindung, strategischer Planung, Regelinterpretation und Szenarioanalyse und helfen so fortschrittlichen KI-Systemen dabei, stärkere Argumentationsfähigkeiten zu entwickeln.

Wie sieht der Arbeitsalltag aus?

• Erstellung und Überprüfung spielbasierter Aufgaben zum logischen Denken, die zur Evaluierung von KI-Systemen entwickelt wurden.
• Analyse von Brettspielszenarien, strategischen Entscheidungsbäumen und regelbasierten Systemen.
• Bewertung von KI-generierten Antworten im Hinblick auf Korrektheit, Konsistenz und Qualität der Argumentation.
• Entwicklung von Prompts, Bewertungsrastern und Evaluierungsrichtlinien für Brettspiel- und strategiebezogene Aufgaben.
• Identifizierung von logischen Fehlern, Regelverstößen und fehlerhaften Argumenten in KI-Ausgaben.
• Mitarbeit bei der Benchmark-Erstellung und Qualitätssicherungsprozessen für KI-Evaluierungsprojekte.
• Zusammenarbeit mit Projektteams zur Verbesserung der Datensatzqualität und der Evaluierungsmethoden.

Anforderungen

Erforderliche Qualifikationen

• Abgeschlossenes Bachelorstudium in Informatik, Mathematik, Kognitionswissenschaft, Spieldesign (Game Design), Philosophie, Wirtschaftswissenschaften oder einem verwandten analytischen Bereich.
• Mindestens 2 Jahre berufs- oder semiprofessionelle Erfahrung in den Bereichen Brettspieldesign, Playtesting, Tabletop-Spiel-Communitys oder verwandten strategieorientierten Umfeldern.
• Fundiertes Verständnis von Logik, wahrscheinlichkeitstheoretischem Denken, Spielmechaniken und komplexen Regelsystemen.
• Hintergrund in Spieltheorie, Verhaltensökonomie, Entscheidungswissenschaft oder formaler Logik.
• Vertrautheit mit modernen Brettspielen, Sammelkartenspielen (TCGs), Tabletop-Rollenspielen, Strategiespielen oder kompetitiven Spielsystemen.
• Ausgeprägte analytische und problemlösende Fähigkeiten.
• Exzellente schriftliche Kommunikationsfähigkeiten.

Bevorzugte Qualifikationen

• Vorerfahrung in der Datenannotation, im KI-Training, im Prompt Engineering, in der Qualitätssicherung, im Spieldesign, im Puzzle-Design oder in der Analyse regelbasierter Systeme.
• Erfahrung in der Erstellung von Bewertungsrastern, Benchmark-Datensätzen oder Qualitätssicherungs-Frameworks.
• Erfahrung mit Python, SQL oder Datenanalysetools.
• Erfahrung in der Arbeit an Projekten zu RLHF, Modellevaluierung, synthetischer Datengenerierung oder LLM-Benchmarking.
• Vertrautheit mit kürzlich veröffentlichten Strategie- oder Tabletop-Spielen und die Fähigkeit, sich schnell in neue Regelsysteme einzuarbeiten.

Vorteile der Freiberuflichkeit bei Turing

• Arbeiten in einer vollständig Remote-basierten Umgebung.
• Möglichkeit, an bahnbrechenden KI-Projekten mit führenden LLM-Unternehmen zu arbeiten.

Angebotsdetails

• Erforderliche Verfügbarkeit: Mindestens 4 Stunden pro Tag und mindestens 20 Stunden pro Woche mit einer Überschneidung von 4 Stunden mit PST.
• Beschäftigungsart: Auftragnehmer-Mandat (keine Kranken-/bezahlte Urlaubstage)
• Vertragslaufzeit: 2 Monate; [voraussichtlicher Starttermin ist nächste Woche]

Evaluierungsprozess

1. Arbeitsprobe als Heimaufgabe