Analyste qualité IA (Personnalisation) - Grec

À propos de Turing :

Basée à San Francisco, en Californie, Turing est le premier accélérateur de recherche mondial pour les laboratoires d'IA de pointe et un partenaire de confiance pour les entreprises internationales qui déploient des systèmes d'IA avancés. Turing accompagne ses clients de deux manières : d'une part, en accélérant la recherche de pointe grâce à des données de haute qualité, des pipelines de formation avancés et les meilleurs chercheurs en IA spécialisés dans le codage, le raisonnement, les STEM, le multilinguisme, la multimodalité et les agents ; d'autre part, en mettant cette expertise au service des entreprises pour les aider à faire passer l'IA du stade de la validation de concept à celui d'une intelligence propriétaire, grâce à des systèmes fiables, ayant un impact mesurable et générant des résultats durables sur le compte de résultat.

Présentation du poste :

En tant qu'analyste qualité IA, vous évaluerez une nouvelle fonctionnalité de personnalisation pour Gemini. Vous évaluerez dans quelle mesure le modèle utilise les informations issues de vos conversations Gemini passées, de Gmail, de Google Search et de votre activité sur YouTube pour rendre les réponses plus pertinentes et utiles. Ce poste requiert un mélange unique de créativité et de rigueur analytique. Vous concevrez activement des invites en vous appuyant sur vos propres expériences personnelles. Vous utiliserez ensuite vos compétences analytiques pour évaluer la qualité des réponses personnalisées du modèle, en tenant compte de critères tels que la pertinence, l'intégration et l'utilité.

Compétences clés

• Maîtrise du grec : capacité à lire et à écrire en grec avec un haut niveau de compréhension, car le grec est la langue principale de ce projet.
• Compte personnel U

• À ce poste, vous ferez partie d'une équipe dynamique chargée d'évaluer la qualité des interactions personnalisées avec l'IA. Vos tâches quotidiennes consisteront à :
• Concevoir et mettre en œuvre des scénarios de conversation à plusieurs échanges (généralement entre 1 et 5 échanges) qui exigent de l'IA qu'elle utilise vos informations personnelles et vos expériences.
• D'évaluer les réponses du modèle en fonction de votre intention telle qu'elle ressort de la demande initiale, en vérifiant si la personnalisation a été correctement appliquée.
• D'analyser les réponses pour détecter d'éventuels problèmes de fond, en vous assurant que les affirmations vous concernant sont étayées par des preuves et ne reposent pas sur des déductions erronées ou des hallucinations.
• D'évaluer la qualité de l'intégration afin de garantir que les données personnelles s'intègrent naturellement dans la réponse, sans « narration excessive » robotique.

• Évaluer rigoureusement et classer par ordre de priorité deux réponses du modèle côte à côte (SxS) afin de déterminer laquelle est globalement la plus utile, la plus facile à utiliser et la plus agréable.
• Rédiger des justifications claires et défendables pour vos comparaisons, en indiquant explicitement où les problèmes ou les aspects positifs sont apparus dans la conversation.
• Extraire et vérifier les « informations de débogage » du modèle pour confirmer que les résumés de chat et les sources de données ont été correctement utilisés.
• Maintenir une hygiène des données rigoureuse en supprimant les conversations d'évaluation afin d'éviter qu'elles ne polluent votre historique de chat futur.

Formation et expérience

• Licence ou expérience équivalente dans un domaine pertinent (par exemple, politique, droit, éthique, linguistique, journalisme, informatique ou un domaine analytique connexe).
• Expérience en annotation de données, IA