Ingeniero de Software Senior – Evaluación de IA

Descripción del puesto

Ingeniero de Software Senior – Evaluación de IA Acerca del puesto ¿Y si tus habilidades de ingeniería pudieran determinar directamente si los sistemas de IA más avanzados del mundo realmente funcionan? Esta oportunidad es para Ingenieros de Software Senior que deseen diseñar, construir y escalar la infraestructura de evaluación que mide el rendimiento de la IA — la capa crítica entre la salida bruta del modelo y la confianza en el mundo real

Lo que harás

• Diseñar y construir pipelines de evaluación escalables y marcos para evaluar el rendimiento del modelo de IA en diversas tareas y dominios
• Desarrollar arneses de pruebas automatizadas, sistemas de puntuación y herramientas de benchmarking para modelos de lenguaje grandes y otros sistemas de IA
• Escribir código limpio y de calidad para producción con el fin de procesar, analizar y visualizar conjuntos de datos de evaluación a escala
• Crear y mantener APIs, paneles de control y herramientas internas que permitan a los equipos de investigación ejecutar, rastrear y comparar evaluaciones de manera eficiente
• Colaborar con investigadores de IA y científicos de datos para traducir metodologías de evaluación en software confiable y reproducible
• Optimizar el rendimiento del sistema, la velocidad de procesamiento de datos y los costos de infraestructura
• Redactar documentación clara y participar en revisiones de código para mantener altos estándares de ingeniería
• 5+ años de experiencia profesional en ingeniería de software, con un historial de construcción y despliegue de sistemas en producción

Requisitos y condiciones

• Ubicación: Remoto
• Dedicación: 20–40 horas/semana
• Colaborar con investigadores de IA y científicos de datos para traducir metodologías de evaluación en software confiable y reproducible
• 5+ años de experiencia profesional en ingeniería de software, con un historial de construcción y despliegue de sistemas en producción
• Dominio sólido de Python — incluyendo experiencia con bibliotecas de procesamiento de datos (pandas, NumPy) y frameworks web (FastAPI, Flask o Django)
• Experiencia trabajando con grandes conjuntos de datos y construyendo pipelines de datos
• Excelentes habilidades de comunicación escrita — puedes documentar tu trabajo con claridad y colaborar de forma asíncrona
• Automotivado y confiable al trabajar de forma independiente en un entorno remoto

Detalles adicionales

• Identificar casos extremos, modos de fallo y problemas de confiabilidad en los resultados de IA mediante enfoques de ingeniería sistemáticos
• Contribuir a la arquitectura y dirección técnica de la plataforma de evaluación
• Sólida comprensión de la arquitectura de software, los patrones de diseño y las mejores prácticas de ingeniería
• Comodidad con infraestructura en la nube (AWS, GCP o Azure) y despliegues en contenedores