← 返回面经子恢增长酒馆
字节跳动

AI 产品运营面经

按实际面试轮次整理的问题清单

校招1 个轮次14 道题
01
面试轮次

二面

14 道
  1. 自我介绍怎么讲?

    我的回答:背景(AI相关经验)→代表项目(一句话说清做了什么)→结果指标(DAU、评分、营收、增长挑重点说)→你亲自负责的关键环节(MVP、Prompt、评估、迭代)。因为二面更看"可迁移能力",不是履历罗列。

  2. 介绍一下你之前做的产品,哪款最成功?为什 么?项目背景和你都做了什么?

    按三个维度讲:商业化—验证了可持续的变现路径;用户——核心体验与留存指标有稳定改善;运营——通过活动与策略迭代带动了阶段性增长。然后具体讲工作内容:市场调研→用户画像→MVP定义→模型选型→转化漏斗分析→搜索链路优化。重点是"为什么这么选",不是堆功能清单。

  3. Prompt工程主要落在哪些场景?;追问:怎么评估Prompt表现?

    按产品拆。简单场景主要是基础SystemPrompt和搜索链路,工程量不大。真正工程量大的在两个方向:一是强RAG场景,要同时控制人设一致性、任务完成度和检索匹配质量;二是社交辅助场景,AI帮用户回复消息,人设和语境控制要求很高。

  4. 自己写Prompt又自己评估,会不会有偏?

    会。我会做三件事去偏:让运营和市场团队用他们对用户的认知来校验标准;用另一个AI独立出一套方案做交叉对比;上线后拉真实用户input/output,尤其看差的case,反推标准是否太窄。

  5. Prompt工程期间遇到最难的题?

    两个。一是指令不遵循,prompt里写了规则它不照做。二是合规误杀——用模型做前置过滤,敏感内容全屏蔽,结果太严格了,海外用户对边界的理解和国内差很多,正常内容也被拦掉,很影响体验。解法是把"什么算违规、什么不算"拆得更细,补反例。本质是边界定义不清。

  6. 怎么评估Prompt表现?分三步:先人工初筛少量样本看明显对错;再批量跑,用关键词+embedding匹配做自动评估,看搜索召回准不准;最后针对人设方向用小模型打分,自己再人工过筛。先保准确率,再看召回和稳定性。
  7. 自己写Prompt又自己评估,会不会有偏?会。我会做三件事去偏:让运营和市场团队用他们对用户的认知来校验标准;用另一个AI独立出一套方案做交叉对比;上线后拉真实用户input/output,尤其看差的case,反推标准是否太窄。
  8. 在 Prompt 工程中,你遇到过最难的问题是什么?你是如何解决的?
  9. 除了已介绍的 Prompt 工程难题,你还遇到过哪些问题?请结合指令不遵循或多轮对话中约束遗忘等现象,说明排查和解决方法。

    核心都是指令不遵循,但更常见的是间歇性遗忘—上一秒还遵循下一秒就跑偏。解法:用代码格式写Prompt(XML标签),比纯自然语言遵循度高,因为模型底层本身是代码结构,它更认标签。多轮对话里关键约束要重复注入。

  10. 战争相关仇恨言论识别,Prompt框架怎么设计?

    先做动态话题挖掘,看哪个议题讨论量最大,先压大头;再设计识别规则,把各地政治宗教俚语放进去;然后step-by-step分析——先判断整体是不是对骂形式,再下钻关键词,再逐层细化。关键词库要跟动态话题实时变化。

  11. 交付了Prompt怎么验证有效?

    四步递进: 1. 人工初筛——先过筛少量样本,把明显对错的搞清楚,基础盘先跑通; 2.跑已有标注集—用已知违规/不违规的数据去验证准确率和召回率,确认PE在已有标准下没问题;

  12. 还有其他难的问题吗?核心都是指令不遵循,但更常见的是间歇性遗忘—上一秒还遵循下一秒就跑偏。解法:用代码格式写Prompt(XML标签),比纯自然语言遵循度高,因为模型底层本身是代码结构,它更认标签。多轮对话里关键约束要重复注入。
  13. 战争相关仇恨言论识别,Prompt框架怎么设计?先做动态话题挖掘,看哪个议题讨论量最大,先压大头;再设计识别规则,把各地政治宗教俚语放进去;然后step-by-step分析——先判断整体是不是对骂形式,再下钻关键词,再逐层细化。关键词库要跟动态话题实时变化。
  14. 扩大到未知样本——不局限已知标签,让模型自己去判断 违规并给原因,然后跟线上人工审核的结果对比。新东西出 来人工也不能100%保证对,刚好互相校验。差的case重点分 析:是Prompt写的问题还是人工标准的问题;

本页由用户经历或公开材料匿名整理,仅供求职准备参考,不代表相关公司的官方题库或招聘承诺。如内容涉及个人信息、保密材料或权利争议,请联系网站备案主体申请更正或删除。