Senior AI Trainer

Titolo del ruolo: Senior AI Trainer

Tipo di ruolo: Collaboratore esterno, Remoto

Luogo: Nord America e Germania.

micro1 sta assumendo Senior AI Trainer per collaborare a un progetto incentrato sul cliente, volto a migliorare la qualità dei sistemi di intelligenza artificiale attraverso l'addestramento e la valutazione di modelli a livello esperto. In questo ruolo, applicherai le tue competenze da generalista e la tua esperienza pratica con i prodotti basati su AI per contribuire ad addestrare i sistemi di intelligenza artificiale di nuova generazione. Il tuo lavoro definirà il modo in cui i modelli apprendono, ragionano e si comportano grazie a input reali di alta qualità.

Responsabilità principali:

• Valutare le prestazioni di strumenti di chat e ricerca basati su AI in condizioni standardizzate e ripetibili.
• Applicare linee guida di valutazione dettagliate per valutare, classificare e annotare con precisione le risposte dei modelli, fornendo feedback strutturati che ne migliorano le prestazioni.
• Scrivere, perfezionare e testare prompt che mettono alla prova le capacità dei modelli, garantendo la copertura di diversi scenari, casi limite e intolleranze o intenti degli utenti.
• Verificare la coerenza e l'accuratezza tra le valutazioni, correggendo le discrepanze tra i punteggi e la rubrica o le linee guida di riferimento.
• Utilizzare strumenti e piattaforme di addestramento AI per registrare i risultati e inviare set di dati di valutazione in linea con gli standard e le tappe fondamentali del progetto.
• Collaborare con i formatori e i contributori del progetto per risolvere le ambiguità, perfezionare le linee guida e garantire la coerenza delle valutazioni in tutto il team.
• Partecipare a revisioni periodiche della qualità, incorporando i feedback per mantenere rigorosi standard di addestramento e annotazione.

Competenze e requisiti richiesti:

• Eccezionale attenzione ai dettagli e accuratezza nella revisione e valutazione dei contenuti generati dall'AI.
• Forti capacità di comunicazione scritta e verbale per una collaborazione efficace, un reporting puntuale e aggiornamenti regolari su progressi e problemi.
• Dimostrate capacità di gestione del tempo e di auto-organizzazione per la partecipazione autonoma e da remoto al progetto.
• Mentalità analitica e di problem-solving, con un approccio proattivo alla risoluzione delle sfide di valutazione.

Requisiti preferenziali:

• Comprovata esperienza nell'addestramento di modelli AI, RLHF, etichettatura di dati o progetti di valutazione simili incentrati sui dati.
• Familiarità con prodotti e strumenti di AI, inclusa la progettazione di prompt e la comprensione dei comportamenti e dei limiti dei modelli.
• Esperienza nella scrittura di criteri di valutazione, nella classificazione degli output dei modelli o nella revisione delle risposte dell'AI per verificarne accuratezza, utilità e sicurezza.
• Esperienza precedente nell'addestramento di AI, preparazione di dati per il machine learning o progetti incentrati sugli LLM (fortemente preferita).