Eコマースモデル用プロンプト評価者

役割の概要

AIモデル評価のための高品質な自由記述型プロンプトを作成・検証する、経験豊富なEコマースの専門家を募集しています。主要なサブドメインにわたる実用的かつ明確なEコマース上の課題を考案・レビューし、AIの推論品質を評価するとともに、最先端の言語モデルに対する厳格な評価基準の確立に貢献していただきます。

以下の2種類のタスクのいずれかが割り当てられます：

作成タスク

割り当てられたサブドメインから、難易度（学部生レベル、上級学部生レベル、大学院生／専門家レベル）の異なるオリジナルの自由回答型プロンプトを5つ作成してください。プロンプトは、戦略的分析、キャンペーン設計、データ駆動型の意思決定など、AIの応答の質を評価するために人間の判断を必要とするものである必要があります。

検証タスク

作成された5つのプロンプトについて、明確さ、範囲の整合性、難易度の正確性、および独自性を確認してください。必要に応じて、プロンプトや難易度評価を編集してください。

対象となるEコマースのサブドメイン

価格戦略、販売分析、マーケティング（デジタルマーケティング、顧客獲得、顧客維持、キャンペーン管理を含む）。

主な職務内容

\- 評価可能なAI応答を引き出せる、明確で曖昧さのない、自由回答形式のEコマース用プロンプトを作成する

\- プロンプトが割り当てられたサブドメインの範囲内であり、難易度が適切に評価されていることを確認する

\- 1つのタスクに含まれる5つのプロンプトすべてが、互いに十分に区別でき、難易度も

異なることを確保する

\- 専門的な判断を適用し、応答の深さと質を評価する