职位解读
AI评测专家老师是重庆东灵融合企业管理咨询有限公司在成都青羊发布的通用岗位，薪资范围40-50K。该岗位要求5-10年经验、本科学历，工作地点位于成都青羊。重庆东灵融合企业管理咨询有限公司作为相关企业，其招聘节奏侧面反映该行业在成都的人才需求热度。关注企业的发展阶段与业务方向，有助于判断该岗位的长期成长空间与稳定性。岗位职责包括：1. 联合产品、教研及研发团队建立评测体系，将任务完成度、内容正确性、引用准确性、教学适切性、安全性、时延及成本要求转化为可执行的指标、评分量规与发布质量门槛；区分内容和任务质量指标与需要另行验证的学习效果指标。 2. 建设版本化评测集与自动化评测流水线，按学科、题型、用户角色和。任职要求为：1. 本科及以上学历或具备等价能力，3 年以上算法、评测、数据分析或测试开发经验；独立设计并落地过大模型、RAG 或 Agent 的完整评测项目，覆盖指标定义、数据建设、评测执行、结果分析及改进验证。。
AI评测专家老师
成都 · 青羊 5-10年 本科 4次浏览
40K-50K
企业实名认证
虚假岗位可一键举报
薪资真实分享
岗位职责
1. 联合产品、教研及研发团队建立评测体系，将任务完成度、内容正确性、引用准确性、教学适切性、安全性、时延及成本要求转化为可执行的指标、评分量规与发布质量门槛；区分内容和任务质量指标与需要另行验证的学习效果指标。
2. 建设版本化评测集与自动化评测流水线，按学科、题型、用户角色和业务场景覆盖常规、边界及失败样本；管理开发集与独立测试集的使用，控制数据污染与泄漏风险，保障数据、模型、提示词、工具及流程配置可追溯。
3. 组织人工评审、模型裁判校准和 Agent 执行轨迹分析，与教研或学科专家协作处理专业判断及评分分歧；评估版本变化的收益、退化与不确定性，区分流程执行成功与业务任务实际完成，形成独立质量结论。
4. 将回归评测接入研发与发布流程，结合线上反馈和代表性失败案例持续完善评测集；与研发共同维护评测环境和工具模拟能力，推动问题归因、整改与复测，并清晰说明尚未覆盖的风险及结论适用范围。
职位要求
1. 本科及以上学历或具备等价能力，3 年以上算法、评测、数据分析或测试开发经验；独立设计并落地过大模型、RAG 或 Agent 的完整评测项目，覆盖指标定义、数据建设、评测执行、结果分析及改进验证。
2. 熟练使用 Python、SQL，能独立完成评测代码、数据处理、指标计算、版本对比和结果报告，并将自动化回归评测接入研发流程。
3. 掌握抽样、置信区间、数据切分和评审一致性等方法，能够识别样本偏差、数据污染及总体指标掩盖的局部退化，根据样本量和业务风险合理解释结论。
4. 理解模型裁判的局限及 Agent 执行的非确定性，能够通过人工基准、重复运行和执行轨迹分析校准结论，识别模型、检索、工具、流程及评测环境带来的影响。
5. 具备失败归因、跨团队沟通和独立质量判断能力，能够与教研或学科专家协作制定量规，在交付压力下如实表达质量结论与发布风险，推动问题闭环。
还没有该企业的面试经验，快来补充第一份面经～
我来分享面试经验AI评测专家老师
40K-50K