コンピュータサイエンス評価スペシャリスト

職務概要

AI研究イニシアチブ向けに、質の高い学術評価コンテンツの作成およびレビューを行う、コンピュータサイエンスの専門家を募集しています。コンピュータサイエンスの中核分野にわたる厳密な多肢選択式問題の作成と検証、解答の質の評価、そしてAI能力の向上に活用されるゴールドスタンダードとなるベンチマークの確立を支援していただきます。

以下の2種類の業務のいずれかに従事していただきます：

• 問題作成 — ご自身の専門分野であるコンピュータサイエンスにおいて、独創的で難易度の高い多肢選択式問題を作成し、難易度を評価した上で、審査のために提出していただきます。
• 問題検証 — 事前に作成された問題の正確性、明瞭性、および厳密性を審査します。必要に応じて編集を行い、難易度を評価し、変更内容を記録していただきます。

対象となるコンピュータサイエンス分野

アルゴリズムとデータ構造、機械学習とAI、システム、ネットワークと理論、コンピュータセキュリティ、ソフトウェア工学、その他コンピュータサイエンス。

主な業務内容

• 表面的な記憶ではなく、深い概念的理解を問うオリジナルのコンピュータサイエンス問題を作成する

• 問題が曖昧さなく、完結しており、正確に定義されていることを確認する。必要な情報はすべて問題文に含まれている必要がある

• 各問題の難易度を評価する：中級（学部入門レベル）、上級（学部上級レベル）、エキスパート（大学院レベル以上）

• 正解1つと、一見妥当だが微妙に誤っている9つの選択肢を用意し、受験者の理解力を試す