Ingénieur logiciel senior – Évaluation IA

Aperçu du poste

Ingénieur logiciel senior – Évaluation IA — À propos du rôle Et si vos compétences en ingénierie pouvaient directement déterminer si les systèmes d'IA les plus avancés au monde fonctionnent réellement ? Cette opportunité s'adresse aux ingénieurs logiciels seniors souhaitant concevoir, construire et mettre à l'échelle l'infrastructure d'évaluation qui mesure les performances de l'IA — la couche critique entre la sortie brute du modèle et la confiance dans le monde réel

Ce que vous ferez

• Concevoir et construire des pipelines et frameworks d'évaluation évolutifs pour mesurer les performances des modèles d'IA sur diverses tâches et domaines
• Développer des harnais de tests automatisés, des systèmes de notation et des outils de benchmarking pour les grands modèles de langage et autres systèmes d'IA
• Écrire du code propre et de qualité production pour traiter, analyser et visualiser des ensembles de données d'évaluation à grande échelle
• Créer et maintenir des API, des tableaux de bord et des outils internes permettant aux équipes de recherche d'exécuter, de suivre et de comparer des évaluations efficacement
• Collaborer avec des chercheurs en IA et des data scientists pour traduire les méthodologies d'évaluation en logiciels fiables et reproductibles
• Optimiser les performances du système, la vitesse de traitement des données et les coûts d'infrastructure
• Rédiger une documentation claire et participer aux revues de code pour maintenir des standards d'ingénierie élevés
• 5+ ans d'expérience professionnelle en génie logiciel, avec un historique de construction et de déploiement de systèmes en production

Exigences et conditions

• Lieu : Télétravail
• Engagement : 20 à 40 heures/semaine
• Collaborer avec des chercheurs en IA et des data scientists pour traduire les méthodologies d'évaluation en logiciels fiables et reproductibles
• 5+ ans d'expérience professionnelle en génie logiciel, avec un historique de construction et de déploiement de systèmes en production
• Maîtrise solide de Python — notamment des bibliothèques de traitement de données (pandas, NumPy) et des frameworks web (FastAPI, Flask ou Django)
• Expérience avec de grands ensembles de données et construction de pipelines de données
• Excellentes compétences en communication écrite — vous pouvez documenter votre travail clairement et collaborer de manière asynchrone
• Autonome et fiable dans un environnement de travail à distance indépendant

Détails complémentaires

• Identifier les cas limites, les modes de défaillance et les problèmes de fiabilité dans les sorties d'IA grâce à des approches d'ingénierie systématiques
• Contribuer à l'architecture et à la direction technique de la plateforme d'évaluation
• Solide compréhension de l'architecture logicielle, des patterns de conception et des bonnes pratiques d'ingénierie
• À l'aise avec l'infrastructure cloud (AWS, GCP ou Azure) et les déploiements conteneurisés