评分标准专家

职位名称：评分标准专家 职位类型：合同制 工作地点：远程 职位概述：加入我们客户的团队，担任评分标准专家，在为人工智能培训项目设计和验证可靠的评分标准方面发挥关键作用。运用您在绩效分析、评分方法和实际判断方面的专业知识，确保评估结果达到最高质量。这一独特机遇将使您能够结合评分标准开发经验与实际的杂货采购洞察，从而提升AI模型的准确性和真实感。主要职责：设计、开发并优化针对AI训练和评估需求量身定制的综合评分标准。分析任务表现，并提供结构化、可操作的反馈以指导改进和校准。建立并记录有效的评分方法，确保一致性、公平性和高质量的评估结果。主持校准会议，统一评估员标准，并在各项目间保持评分标准的完整性。验证评估结果的准确性、可靠性及与项目目标的一致性。监督质量控制流程，并基于数据提出评分标准改进建议。与跨职能团队协作，将提示设计原则和日常购物场景融入评估框架。 所需技能与资质：在复杂评估环境中具备经实践验证的评分标准设计、表现分析及反馈结构化方面的专业能力。扎实的