Engenheiro de Validação de Dados Dockerfile

Sobre a Turing:

Com sede em São Francisco, Califórnia, a Turing é a principal aceleradora de pesquisa do mundo para laboratórios de IA de ponta e uma parceira de confiança para empresas globais que implantam sistemas avançados de IA. A Turing apoia os clientes de duas maneiras: primeiro, acelerando a pesquisa de ponta com dados de alta qualidade, pipelines de treinamento avançados e os melhores pesquisadores de IA especializados em engenharia de software, raciocínio lógico, STEM, multilinguismo, multimodalidade e agentes; e, segundo, aplicando essa expertise para ajudar as empresas a transformar a IA de prova de conceito em inteligência proprietária com sistemas que funcionam de forma confiável, geram impacto mensurável e impulsionam resultados duradouros no P&L.

Sobre a função:

Estamos procurando um engenheiro responsável por projetar, implementar e manter fluxos de trabalho de validação de dados dentro de pipelines de construção baseados em Docker. Esta função envolve a criação e o gerenciamento de rótulos de Dockerfile, padrões de metadados e scripts de validação que garantam que conjuntos de dados, esquemas e artefatos de modelos atendam aos requisitos de qualidade e conformidade antes da implantação.

Você trabalhará em estreita colaboração com as equipes de engenharia de dados, aprendizado de máquina e DevOps para construir pipelines de dados em contêineres confiáveis, reproduzíveis e totalmente validados.

Como é o dia a dia:

• Desenvolver e otimizar Dockerfiles com etapas de validação de dados integradas.
• Implementar metadados LABEL para versões de conjuntos de dados, esquemas e linhagem.
• Criar scripts de validação (Python/Bash) para esquemas