如何把用户洞察变成 AI 的判断能力

0 评论 74 浏览 0 收藏 9 分钟

AI内容治理的核心挑战并非技术实现,而是厘清人类判断好内容的标准。本文通过一个真实案例,揭示如何将用户洞察转化为可执行的四大维度规则体系,并构建多Agent协同的内容评审机制。关键在于:AI不是解决方案本身,而是将清晰的产品思维规模化的工具。

这个篇是一个书接上回,之前写了如何做用户调研,当时用户调研的目标就是想把抽象的用户感受变成的具体的判断规则。我们找了五个外包大佬,他们其中有行业专家,有超级的用研高手,有资深的产品经理等等,组成了内容评审委员会。最终他们合成了一个给文章达标的超级agent!然后又是一轮一轮的调试,下面就是把之前调研形成的用户洞察落地的全过程,请多多指教!

很多团队在做 AI 内容治理时,第一反应往往是:训练一个模型,去判断内容质量。

但在实际产品工作中,我逐渐意识到一件事:AI 判断内容质量,其实并不难。真正困难的,是另一件事:人类到底是怎么判断“好内容”的?

如果这件事本身没有想清楚,AI 只会把混乱放大。

而如果这件事想清楚了,AI 只是执行规则的工具。

过去一段时间,我参与了一次完整的内容治理实践:

从用户访谈开始,一步步把用户洞察转化为内容规则,再让 AI 执行这套判断逻辑。

回头看,这件事本质上并不是在做 AI,而是在构建一种 产品能力

一、所有 AI 产品,最终都要回到用户问题

这个项目最开始,并不是从 AI 出发。

而是一个很简单的问题:为什么新用户刷首页几分钟就离开?

为了理解这个问题,我们做了一件很朴素的事情:团队内部每天刷首页 5 分钟,连续一周,然后做内部分享。

很快,一些问题变得非常明显:

  • 很多内容像广告
  • 信息密度很低
  • 很难判断真假
  • 很多推荐没有实际帮助

这些直观感受,成为后续用户研究的起点。

接下来,我们做了两件事:定性访谈 + 定量问卷。

在深度访谈中,我们让用户复盘真实消费决策,例如:

  • 最近一次大额消费是怎么决定的
  • 在哪些平台查信息
  • 哪一篇内容真正影响了他们

慢慢地,一些规律开始反复出现。

用户更信任的内容往往具备三个特征:真实体验、信息深度、可验证信息。

而用户最反感的内容也非常一致:

  • 看起来像广告
  • 没有实质信息
  • 推荐过于完美

这些用户原声,最终成为内容治理的起点。

二、把用户洞察变成内容“金标准”

洞察本身还不能解决问题。

真正困难的,是把这些用户表达转化成 可执行规则

我们反复拆解用户访谈内容,最终提炼出四个核心维度:

真实、硬核、高效、可验证。

这四个维度分别对应用户的四种核心需求:

这四个维度,构成了整个内容评估体系的核心。

例如:

真实性关注的是:

  • 是否有真实体验
  • 是否存在营销表达

硬核度关注的是:

  • 是否有对比或分析
  • 是否提供新的认知

高效率关注的是:

  • 内容结构是否清晰
  • 信息是否容易获取

可验证性关注的是:

  • 信息是否有证据
  • 数据是否可追溯

在完整规则中,这四个维度构成了内容质量评估体系的基础。

三、用户为什么讨厌“伪真实”

在实践中,我们发现一个很有意思的现象。

有些内容看起来像真实体验,但用户仍然不信。

原因很简单:它太像广告了。

于是我们尝试总结“软性推广”的典型特征。

当一篇内容同时满足以下特征时,往往很容易被用户识别为广告:

  1. 整篇文章只围绕一个商品
  2. 几乎没有任何缺点描述
  3. 出现明显推荐话术
  4. 对读者没有实际帮助

但如果内容包含:

  • 实测数据
  • 技术分析
  • 使用场景

用户往往会更容易接受。

这件事给我们一个非常重要的启发:用户不是反感推荐,而是反感“伪真实”。

四、让 AI 按“新用户视角”理解内容

当内容规则逐渐清晰后,我们开始思考:

AI 应该如何执行这些规则?

很多内容评估系统的思路是:计算一篇内容的综合评分。

但在实际测试中,我们发现一个问题:有些内容虽然整体分数不高,但某一个维度非常突出。

例如:

  • 一篇真实体验文章
  • 一篇深度技术分析
  • 一篇完整选购指南

这些内容可能并不完美,但仍然对用户有价值。

于是我们采用了一种更简单的策略:

只要某个维度特别突出,就允许内容进入新用户内容池。

这种策略,本质上是在模拟一种真实用户行为:

用户并不会给内容打分。

他们只会判断:这篇内容有没有价值。

五、我们没有训练一个 AI,而是构建了一套判断体系

当内容规则逐渐稳定之后,我们做了一件事情:

把整个判断过程拆成多个角色。

现实世界里,一篇内容的评审通常涉及不同角色:

  • 编辑
  • 用户研究员
  • 产品经理
  • 内容策略

于是我们把这些角色交给不同的 AI Agent。

例如:

  • 人工标注解读 Agent:学习人工筛选的内容样本,理解人类判断逻辑。
  • 用户洞察 Agent:吸收用户访谈结论,确保判断符合用户视角。
  • 评分规则 Agent:根据四个维度生成评估体系。
  • 规则执行 Agent:直接阅读文章并给出评分。
  • 产品策略 Agent:从平台定位角度校验内容价值。

最终,这些 Agent 会共同完成一件事:

像一个内容评审委员会一样判断内容质量。

六、从经验判断到产品能力

回头看整个过程,其实非常像一次典型的产品能力建设。

最开始是一个模糊的问题:

用户为什么不信任内容?

然后逐渐经历几个阶段:

用户问题

用户洞察

判断原则

规则体系

系统能力

AI 只是这个链路中的 最后一环

真正决定产品价值的,依然是:

对用户和业务的理解。

结语

很多人把 AI 产品理解为一种技术能力。

但在产品实践中,我越来越觉得:

AI 更像一种“能力放大器”。

如果规则混乱,AI 只会把混乱放大。

如果逻辑清晰,AI 就能把能力规模化。

所以,与其问:

AI 能不能判断内容质量?

不如先问:

我们是否真正理解什么是好内容。

当这个问题想清楚之后,AI 其实只是顺理成章的一步。

本文由 @是个游子 原创发布于人人都是产品经理。未经作者许可,禁止转载

题图来自Unsplash,基于CC0协议

更多精彩内容,请关注人人都是产品经理微信公众号或下载App
评论
评论请登录
  1. 目前还没评论,等你发挥!