法律模型提示词评估员

职位概述

我们正在寻找专业的法律人士，负责编写和审核用于人工智能模型评估的高质量开放式提示词。您将针对核心子领域设计并审核具有挑战性且表述明确的法律问题，评估人工智能的推理质量，并协助为前沿语言模型建立严格的评估标准。

您将被分配以下两种任务类型之一：

• 撰写任务 — 根据分配的子领域，创作 5 个原创的开放式提示，难度级别需分层设置（本科生、高年级本科生或研究生/专业人士）。提示应需要人类判断来评估 AI 响应的质量，例如法律推理、法规解释或案例分析。
• 验证任务 — 审核5个已编写提示语，检查其清晰度、范围一致性、难度准确性及独特性。必要时对提示语及难度评级进行修改。

涵盖的法律子领域

实务法与成文法、法理学与法律理论、国际法、合同法、刑法、宪法、监管法与行政法。

主要职责

• 编写清晰、明确且开放式的法律提示语，以诱导出可评估的AI响应

• 核实提示语是否在指定子领域的范围内，并确保难度评级准确

• 确保任务中的5条提示语彼此充分区分，且难度等级各异

• 运用专业判断评估