岗位描述(节选)
1、搭建评测体系:设计 AI 应用的评估体系,搭建评测流程和功能,包括评测标准的制定、评测Agent建设、评测的数据集建设、评测结果标注,保证评估结论及时准确产出;
2、业务场景分析:了解主流 AI 应用产品的业务流程和场景,对如何构建一个有效的评测集有深刻的理解和应用;
3、评测结果分析:分析和解读评测结果,提出提升模型能力和应用体验的产品设计建议;
4、研究评测方案:跟进和调研行业最新评测研究和报告,结合实际应用场景,更新内部评测技术方案;
5、行业产品调研:及时了解和分析 AI 业界各类产品和技术发展动态,辅助判断未来发展趋势。
【任职要求】
1、熟悉产品评测和 benchmark 标准,能基于实验、日志、线上表现快速定位模型问题,并熟练制定合理的验证方案与评测集;
2、较强的分析和沟通能力,擅长从数据中发现有价值的产品改善建议,并能推动落地;
3、对大模型领域感兴趣,愿意投身于大……
完整岗位描述与官方投递入口,请登录后在岗位详情页查看。
本站当前在招 18762 个北京岗位(全城各职能合计),其中 2681 个公开标注了薪资。按这些标注统计:月薪(税前)主流区间 7K ~ 20K(25~75 分位),中位约 10K,最低 2K、最高 300K。
在招岗位较多的企业:字节跳动 3945 个小米集团 1146 个快手 1017 个阿里巴巴集团(含高德/阿里云) 780 个理想汽车 485 个
统计口径:求职者营地实时在招岗位的公开薪资标注,未标注者不计入;区间为 25~75 分位,非薪酬承诺。