Avaliador de Prompts para Modelos de Pesquisa Operacional

Visão Geral da Função

Estamos buscando profissionais especializados em pesquisa operacional para elaborar e verificar prompts abertos de alta qualidade destinados à avaliação de modelos de IA. Você irá criar e revisar problemas desafiadores e inequívocos de otimização e ciência da decisão em subdomínios essenciais, avaliando a qualidade do raciocínio da IA e ajudando a estabelecer padrões de avaliação rigorosos para modelos de linguagem de ponta.

Você receberá uma das duas tarefas:

• Tarefa de Criação — Crie 5 prompts originais e abertos do subdomínio designado, em diferentes níveis de dificuldade (graduação, graduação avançada ou pós-graduação/profissional). Os prompts devem exigir julgamento humano para avaliar a qualidade da resposta da IA, como modelagem de otimização, análise algorítmica ou raciocínio estocástico.
• Tarefa de verificação — Revise 5 prompts criados quanto à clareza, alinhamento do escopo, precisão da dificuldade e originalidade. Edite os prompts e as classificações de dificuldade quando necessário.

Subdomínios de pesquisa operacional abrangidos

Programação linear e inteira, otimização de redes e teoria dos grafos, modelos estocásticos e teoria das filas, teoria dos jogos e análise de decisão, otimização da cadeia de suprimentos e logística, simulação e meta-heurística.

Principais responsabilidades

• Redigir prompts de pesquisa operacional claros, inequívocos e abertos que suscitem respostas de IA avaliáveis
• Verificar se os prompts estão dentro do escopo do subdomínio atribuído e se foram classificados corretamente quanto à dificuldade
• Garantir que todos os 5 prompts em um