Especialista em Rubricas

Cargo: Especialista em Rubricas Tipo de contrato: Contrato temporário Local: Remoto Resumo da vaga: Junte-se à equipe do nosso cliente como Especialista em Rubricas, onde você desempenhará um papel fundamental na concepção e validação de rubricas robustas para projetos de treinamento de IA. Utilize sua experiência em análise de desempenho, metodologia de pontuação e julgamento prático para garantir a mais alta qualidade nos resultados das avaliações. Esta oportunidade única permite que você combine sua experiência em desenvolvimento de rubricas com insights práticos sobre compras de supermercado para elevar a precisão e o realismo dos modelos de IA. Principais responsabilidades: Projetar, desenvolver e refinar rubricas abrangentes adaptadas às necessidades de treinamento e avaliação de IA. Analisar o desempenho das tarefas e fornecer feedback estruturado e prático para orientar melhorias e calibração. Estabelecer e documentar metodologias de pontuação eficazes que garantam consistência, imparcialidade e resultados de alta qualidade. Liderar sessões de calibração para alinhar os avaliadores e manter a integridade das rubricas em todos os projetos. Validar os resultados da avaliação quanto à precisão, confiabilidade e alinhamento com os objetivos do projeto. Supervisionar os processos de controle de qualidade, fazendo recomendações baseadas em dados para aprimoramentos nas rubricas. Colaborar com equipes multifuncionais para integrar princípios de design de prompts e cenários de compras de supermercado nas estruturas de avaliação. Habilidades e qualificações exigidas: Experiência comprovada em design de rubricas, análise de desempenho e estruturação de feedback para ambientes de avaliação complexos. Sólida experiência em