字节跳动
实习Agent评测实习生 - AI数据与安全
北京 · 实习 · 本科
长期有效
任职要求
- 本科及以上学历在读,专业背景不限
- 具备跨学科知识储备与多元视角者优先;具备AI产品、大模型或Agent相关评测/运营/产品经验,熟悉Agent工作原理与Skill/工具调用逻辑,对检索质量、多模态内容有较好的判断力,具备从评测设计到报告输出的完整经验者优先
- 具备较强的逻辑推理与问题拆解能力,能搭建适配Agent能力维度的评估体系,擅长从评测结果中挖掘产品改善建议并推动落地。
岗位描述
团队介绍:AI 数据与安全团队为 Seed 基座模型及 AI 原生应用提供跨模态数据服务,覆盖数据生产全流程,包含模型评估标准的制定、数据规模化生产、数据飞轮搭建,不断提升数据质量,支持模型快速迭代。
团队由产品经理、数据工程、数据运营等跨职能人才组成,并通过与 Seed 研究员、行业专家、全球顶尖数据供应商紧密合作,从真实场景中收集反馈并分析模型表现数据,解决 AI 前沿突破过程中的复杂数据问题,推动模型性能与用户体验的双重提升。我们既是帮助模型技术迭代的一线贡献者,也是模型和 AI 产品的一手用户。
日常实习:面向全体在校生,为符合岗位要求的同学提供为期3个月及以上的项目实践机会。
- 1、负责Agent系统的全维度评测工作,覆盖文本生成、信息检索、多模态等多个能力方向,结合业务场景设计评测方案,统筹管理评测任务与外包资源,持续提升评测效率与质量标准;
- 2、重点负责Agent效果评估,聚焦工具调用(Skill)准确性、检索结果相关性、多模态内容理解质量、任务规划合理性、推理链完整性等核心评测维度搭建;
- 3、建立科学、多元的Agent评测方法论与指标体系,推进自动化评测框架落地,确保对Agent核心能力进行高效、精准评估,助力Agent模型核心能力持续提升;
- 4、深入理解业务场景、市场动态及Agent技术趋势,牵引数据团队与算法、产品团队深度融合,推动评测体系与业务需求、技术迭代同频;
- 5、输出高质量评测报告,沉淀评测方法论与最佳实践,为产品决策和技术优化提供数据支撑。
你的简历匹配这个岗位吗?
上传简历,AI 会对照这份 JD 指出你的差距和需要补强的地方
该岗位可能会问的问题
基于 运营 岗位的常见面试问题整理
我提到了电竞方面,另一个面试官就问我对于ig战队(lol)的看法,然后一道情景题:公司和ig方面有合作,怎样运营才能吸引ig粉丝使用我们产品
查看答题思路
1. 电竞营销=粉丝经济,核心是社区运营而非传统广告 2. 跨界合作:战队/选手/IP 联名,借粉丝流量 3. 内容策略:比赛直播/选手日常/粉丝二创/社区活动 4. 案例:用 STAR 讲一个电竞相关的运营策划
另一个面试官看我的专业(偏设计)就问我愿不愿意做产品设计方向,让我发作品集 大概就这些 #咪咕#<a href="/creation/subject/928d551be73f40db82c0ed83286c8783" target="_blank" class="s
查看答题思路
1. 核心概念:一句话说清这个问题的底层逻辑 2. 方法论/框架:用 STAR 原则或专业框架结构化回答 3. 实际案例:结合一个具体场景说明 4. 量化结果:用数据佐证你的观点
你认为内容运营需要具备哪些能力
查看答题思路
1. 内容运营=创作有价值的内容→分发到正确渠道→吸引目标用户→促成转化 2. 核心能力:选题能力(知道用户想看什么)、写作能力、数据分析能力(用数据迭代内容策略) 3. 生命周期:选题→创作→审核→发布→分发→数据回收→优化→二次传播 4. 优质内容标准:原创/有用/有趣/有共鸣/有行动引导
谈谈你理解的内容生命周期
查看答题思路
1. 真诚:为什么对这个方向感兴趣(具体经历/瞬间) 2. 匹配:你的能力和这个岗位的契合点 3. 成长:你希望从这个岗位学到什么 4. 贡献:你能为团队带来什么
自我介绍
查看答题思路
1. 我是谁(姓名+学校+专业,15秒) 2. 我做过什么(最相关的 1-2 个经历,30秒) 3. 为什么适合这个岗位(能力匹配,15秒) 4. 总时长控制在 1 分钟以内 5. 避免:念简历、说「我学习能力强」这种空话
更多面试题库功能即将上线
信息来源:企业官方招聘页。投递前请以官网信息为准。