Analista de calidad de IA (Gemini) - Tailandés

Acerca de Turing:

Con sede en San Francisco, California, Turing es el acelerador de investigación líder a nivel mundial para laboratorios de vanguardia en IA y un socio de confianza para empresas internacionales que implementan sistemas avanzados de IA. Turing presta apoyo a sus clientes de dos maneras: en primer lugar, acelerando la investigación de vanguardia con datos de alta calidad, procesos de entrenamiento avanzados y los mejores investigadores en IA especializados en codificación, razonamiento, STEM, multilingüismo, multimodalidad y agentes; y, en segundo lugar, aplicando esa experiencia para ayudar a las empresas a transformar la IA de una prueba de concepto a una inteligencia propia con sistemas que funcionan de forma fiable, ofrecen un impacto medible y generan resultados duraderos en la cuenta de resultados.

Descripción del puesto:

Como analista de calidad de IA, evaluarás una nueva función de personalización para Gemini. Analizarás en qué medida el modelo utiliza la información de tus conversaciones anteriores en Gemini, Gmail, la Búsqueda de Google y la actividad en YouTube para que las respuestas sean más relevantes y útiles. Este puesto requiere una combinación única de creatividad y rigor analítico. Diseñarás activamente indicaciones desde la perspectiva de tus propias experiencias personales. A continuación, utilizarás tus habilidades analíticas para evaluar la calidad de las respuestas personalizadas del modelo, valorando aspectos como la coherencia, la integración y la utilidad.

Requisitos clave

• Dominio del tailandés: capacidad para leer y escribir en tailandés con un alto nivel de competencia, ya que el tailandés es el idioma principal de este proyecto.
• Uso de la cuenta personal: disposición
• En este puesto, formarás parte de un equipo dinámico dedicado a evaluar la calidad de las interacciones personalizadas con la IA. Tu trabajo diario consistirá en:
• Diseñar y poner en práctica interacciones conversacionales de varios turnos (normalmente de 1 a 5 turnos) en las que la IA deba utilizar tu información personal y tus experiencias.
• Evaluar las respuestas del modelo basándote en tu intención desde la pregunta inicial, comprobando si la personalización se ha aplicado correctamente.
• Analizar las respuestas en busca de problemas de fundamentación, asegurándote de que las afirmaciones sobre ti estén respaldadas por pruebas y no por inferencias erróneas o alucinaciones.
• Evaluar la calidad de la integración para garantizar que los datos personales se incorporen de forma natural en la respuesta, sin una «narración excesiva» robótica.
• Evaluar rigurosamente y clasificar por orden de preferencia dos respuestas del modelo una al lado de la otra (SxS) para determinar cuál es, en general, más útil, fácil de usar y agradable.
• Redactar justificaciones claras y defendibles para tus comparaciones, haciendo referencia explícita a dónde se produjeron los problemas o los aspectos positivos en la conversación.
• Extraer y verificar la «información de depuración» del modelo para confirmar que los resúmenes del chat y las fuentes de datos se utilizaron correctamente.
• Mantener una estricta higiene de datos eliminando las conversaciones de evaluación para evitar que contaminen tu historial de chat futuro.

Formación y experiencia

• Licenciatura o experiencia equivalente en un campo relevante (por ejemplo, política, derecho, ética, lingüística, periodismo, informática o un campo analítico relacionado).
• Experiencia en anotación de datos, IA q