职位描述
岗位职责:
负责大模型评测平台的产品规划与设计,包括需求调研、用户场景分析、产品方案设计与优化
设计评测任务全链路产品方案,涵盖 Benchmark 管理、评测数据集管理、评测任务编排与执行、评测结果分析与可视化展示
负责评测指标体系与 Evaluator 接入机制的产品化设计,支持自动评测与人工评测多种模式
与算法、研发团队紧密合作,深入理解用户需求和评测方法论,驱动平台能力持续迭代
负责评测相关运营工作,包括评测任务运营、资源调度、结果分析及用户沟通闭环
关注业界主流评测框架和评测方法,持续优化评测能力体系任职要求
本科及以上学历,3 年以上产品经理经验,有 AI 平台/数据平台/MLOps 相关经验优先
了解大模型评测基本概念(Benchmark、自动评测、人工评测、评测指标体系等)
熟悉任务编排、Pipeline 类产品的设计思路,能独立输出 PRD 和产品原型
具备良好的数据分析能力,能通过数据驱动产品决策
有较强的自驱力和学习能力,能在从 0 到 1 阶段独立推动产品建设
良好的跨团队协作与沟通能力
立即投递