字节跳动｜豆包AI大模型产品（效果评测方向）实习生-火山方舟

ByteIntern：面向2027届毕业生（2026年9月-2027年8月期间毕业），为符合岗位要求的同学提供转正机会。 团队介绍：火山方舟是火山引擎推出的一站式大模型服务平台，是中国大模型市场产品和份额领跑者。平台提供模型推理、评测、精调等全流程服务。方舟搭载了豆包及业界主流大模型，提供丰富的插件生态和AI应用开发服务，并通过稳定可靠的安全互信方案、专业的算法技术服务，全方位保障企业级AI应用落地。 1、跟踪测试产品新能力，输出结构化的产品效果分析报告，为产品决策提供依据； 2、负责重点客户反馈的负面案例有效跟进，配合QA完成效果评测，并将具体问题抽象归纳、对应到Benchmark体系中； 3、针对每次算法在Benchmark上的迭代结果进行系统性案例研究，深入分析效果变化原因，输出可落地的优化建议； 4、持续构建高质量评测案例，分析来自线上及知识库关于Embedding排序的负面案例特征，熟练运用多种Agent工具构造评测数据，并通过与研发的持续沟通确保评测集质量与覆盖度。

1、2027届本科及以上学历在读，计算机、信息工程、统计学、数据科学等相关专业优先； 2、对AI产品（大模型、向量检索、RAG等方向）有浓厚兴趣，了解主流AI产品的基本能力和使用方式； 3、具备良好的逻辑思维和数据分析能力，能够对复杂问题进行拆解、归纳与总结； 4、有较强的自驱力和责任心，善于沟通协作，能够主动推动跨角色（算法、QA、研发）的协同工作； 5、细致耐心，关注细节，能够在大量案例中识别共性特征并抽象为系统性结论； 6、有AI产品相关实习经历、产品分析经验或评测体系搭建经验者优先。 加分项 1、熟悉向量数据库、Embedding模型或信息检索相关技术原理； 2、有使用AI Agent工具（如GPT、扣子等）进行数据构造或分析的经验； 3、了解Benchmark设计方法论，有参与评测集建设的实际经验。