日本語・英語バイリンガルのSTEM専門家

AIモデルを評価するための質の高い推論問題を開発・改良していただくため、生物学／物理学／化学の理論および問題解決の経験を持つ日本語・英語バイリンガルのSTEM専門家を募集しています。生物学／物理学／化学に関する知識が、これらのテスト項目の正確性、厳密性、および教育的な質を保証します。日本語／英語の提示文と回答を作成・評価し、科学的な正確性を確保しつつ、必要に応じて明確で自然な日本語の表現と英語との整合性を維持していただきます。

職務内容

• STEMベースの提示文の設計と最適化（バイリンガル）： 複数の制約や科学的指示を含む詳細な提示文を日本語および／または英語で作成します。- 評価基準の定義と文書化： STEMの文脈における正しい回答に対する高水準の期待値を確立し、科学的厳密性を考慮した包括的な評価基準を作成します。また、日本語の場合は、言語的な明瞭さと適切な学術的トーンも考慮に入れます。- モデルテストと採点（バイリンガル）： プロンプトをモデルに入力し、科学的正確性、推論の質、明瞭性という観点から初期出力を評価し、必要に応じて日本語と英語を比較検討する。- ベンチマークおよび品質保証の支援：QAレビュープロセスに協力し、プロンプト課題およびルーブリックが科学的厳密性を満たしていることを確認するとともに、日本語のベンチマーク全体で一貫性と信頼性を維持する。