Expert en doctorat / post-doctorat / master

Présentation du poste :

• Nous menons une initiative visant à évaluer des rapports de recherche approfondis générés par des systèmes d'IA. Les évaluateurs devront lire et évaluer ces rapports selon plusieurs critères de qualité à l'aide d'une grille d'évaluation structurée, en attribuant à la fois des notes chiffrées et en fournissant des justifications écrites.
• Il s'agit d'une évaluation en une seule étape : chaque rapport est examiné par un seul évaluateur général. Le projet porte sur des centaines de rapports couvrant divers domaines, notamment la technologie, la santé, l'éducation, les sciences, l'économie, les sciences sociales, les arts, etc.

À quoi ressemble le quotidien :

• Lire la requête de recherche pour comprendre l'intention et la portée du rapport attribué.
• Lire et annoter le rapport à l'aide d'un lecteur PDF (Adobe Acrobat), en surlignant les éléments clés et en signalant les problèmes tels que les liens rompus, les sources peu fiables et les incohérences entre les affirmations et leurs sources.
• Noter le rapport selon 10 critères sur une échelle de 1 à 5 à l'aide de la grille d'évaluation fournie.
• Rédiger des justifications pour chaque note, en se référant à des éléments spécifiques du rapport.
• Soumettre les résultats via un questionnaire et renvoyer le PDF annoté.

Exigences :

• Étudiant de troisième cycle (master ou doctorat).
• Professionnels ayant 1 à 3 ans d'expérience dans un domaine pertinent ou connexe.
• Habitué à lire et à consulter régulièrement des rapports de recherche, des livres blancs ou des documents analytiques.
• Excellentes compétences en compréhension écrite et en communication écrite en anglais.
• Basé aux États-Unis ou au Canada.

• À l'aise avec les outils d'annotation de PDF (Ad