Evaluador de Asistentes de IA para Gmail y Google Calendar

Título del puesto: Evaluador de asistente de IA para Gmail y Google Calendar

Tipo de puesto: Contratista, remoto

Ubicación: Solo en Estados Unidos

micro1 está contratando evaluadores de asistentes de IA para Gmail y Google Calendar para colaborar en un proyecto impulsado por clientes que mejora la calidad de los asistentes de IA mediante la evaluación de tareas del mundo real. En este puesto, utilizarás tu experiencia diaria gestionando tu vida digital, correo electrónico, calendarios, reservas y coordinación para ayudar a entrenar y evaluar a la próxima generación de asistentes de IA. Tu trabajo dará forma a cómo los modelos de IA manejan las tareas reales que las personas delegan todos los días.

Responsabilidades clave:

• Completar tareas digitales cotidianas y realistas (enviar correos, programar, reservar, coordinar) utilizando herramientas de asistentes de IA bajo condiciones estandarizadas y repetibles.
• Dar al asistente de IA instrucciones claras para tareas del mundo real, y luego revisar y verificar cuidadosamente su trabajo para garantizar su precisión y exhaustividad.
• Aplicar pautas de calificación detalladas para evaluar, clasificar y anotar las respuestas del asistente, proporcionando comentarios estructurados que mejoran el rendimiento del modelo.
• Probar escenarios que involucren hilos de correo electrónico, invitaciones de calendario, reservas en línea y coordinación de múltiples personas, garantizando la cobertura de situaciones diversas y casos límite.
• Utilizar herramientas y plataformas de entrenamiento de IA para registrar los hallazgos y enviar datos de evaluación de acuerdo con los estándares y hitos del proyecto.
• Colaborar con los entrenadores y colaboradores del proyecto para resolver ambigüedades, refinar las pautas y garantizar la consistencia de la evaluación en todo el equipo.
• Participar en revisiones de calidad continuas, incorporando comentarios para mantener rigurosos estándares de evaluación.

Habilidades y cualificaciones requeridas:

• Residir en EE. UU., tener un iPhone con iMessage y una cuenta de Facebook o Instagram.
• Uso diario y práctico de Gmail y Google Calendar para gestionar tu propia vida: enviar correos, aceptar invitaciones, programar y reorganizar planes.
• Experiencia regular coordinándote con otros por correo electrónico o mensaje de texto, organizando reuniones, haciendo seguimiento de hilos o confirmando planes y pagos compartidos.
• Facilidad para reservar cosas en línea de manera independiente, como restaurantes, citas, viajes o entregas.
• Experiencia utilizando herramientas de IA para tareas reales y prácticas, con comodidad para dar instrucciones a un asistente de IA y revisar su trabajo.
• Excepcional atención al detalle y precisión al revisar los resultados generados por la IA.
• Sólidas habilidades de comunicación escrita para informes claros y actualizaciones oportunas sobre el progreso y los desafíos.
• Demostrada gestión del tiempo y autoorganización para la participación independiente y remota en proyectos.

Cualificaciones preferidas:

• Experiencia previa en evaluación de IA, etiquetado de datos, pruebas de usuario o proyectos similares basados en comentarios.
• Familiaridad con la redacción de peticiones (prompts) y comprensión práctica de los comportamientos y limitaciones de los asistentes de IA.
• Experiencia calificando o revisando resultados de IA en cuanto a precisión, utilidad y seguridad.