Especialista em Grafana (Engenheiro de Software)

Visão geral

Procuramos utilizadores avançados e experientes do Grafana para conceber tarefas de avaliação de nível especializado que testem se os agentes de IA conseguem utilizar o Grafana tal como um verdadeiro profissional. A sua experiência na área é o que confere autenticidade a estas tarefas.

O que irá fazer

• Conceber fluxos de trabalho Grafana realistas e com várias etapas - painéis, regras de alerta, configuração de fontes de dados, configuração de painéis, operações entre módulos

• Executar cada fluxo de trabalho pessoalmente numa instância hospedada do Grafana

para produzir uma trajetória de referência

• Redigir instruções de tarefas claras e específicas com resultados mensuráveis que possam ser verificados programaticamente

• Implementar avaliadores programáticos que verifiquem se cada instrução foi concluída corretamente

• Analisar as tentativas do agente de IA nas suas tarefas, identificar onde e por que falham e identificar as causas principais

• Calibrar a dificuldade das tarefas para que sejam desafiantes, mas solucionáveis - iterando sobre instruções e restrições com base no desempenho do modelo

Requisitos

• Mais de 2 anos de experiência profissional diária com o Grafana (SRE, Engenharia de Plataformas, Observabilidade ou similar)

• Profundo conhecimento de PromQL, modelos de painéis, pipelines de alertas e configuração de fontes de dados (Prometheus, InfluxDB, etc.)

• Capacidade de articular fluxos de trabalho com clareza suficiente para verificação programática

• Conforto na escrita de scripts básicos de classificação (Python; suporte de engenharia fornecido conforme necessário)

Desejável

• Experiência com