针对“小度”体验问题,聊聊语音交互解决方案

6 评论 9565 浏览 42 收藏 11 分钟

近几年来,智能音箱的普及度非常高,不少人都会选择购置智能音箱并通过语音进行简单的交互。然而,也有很多人在使用过程中,发现智能音箱存在着一些“听不懂人话”的缺点……

作为小度音箱(无屏基础版)的用户,本文针对使用中的一个体验细节进行分析,并尝试给出语音交互的解决方案。

一、CASE示例

场景1

用户:小度小度,播放金玟岐的《十三》/播放SHE的《十七》

小度:好的,播放金玟岐的《岁月神偷》/好的,播放SHE的《super star》

用户:小度小度,播放金玟岐的《十三》/播放SHE的《十七》

小度:好的,播放金玟岐的《岁月神偷》/好的,播放刘德华的《十七岁》

……

无限循环

场景2

用户:小度小度,播放邓紫棋、艾热的《光年之外》/播放邓紫棋的《光年之外》热爱版

小度:好的,播放邓紫棋的的《光年之外》

用户:小度小度,播放艾热的《光年之外》/播放邓紫棋的《光年之外》热爱版

小度:好的,播放邓紫棋的的《光年之外》

……

无限循环

二、问题抽象

  • 问题1:当播放音乐的语音指令有2到3个甚至多个约束条件的时候,DuerOS有时会回应错误
  • 问题2:即使用户”字正腔圆、咬牙切齿“的反复重复同一条指令,DuerOS仍会在多个错误回应之间循环切换,反复给出错误的回应

三、问题可能原因分析

1. ASR(自动语音识别)识别错误或NLU(自然语言处理)分词、忽略关键条件等错误

也就是说,在系统看来,它所收到的指令,前者可能类似于”播放SHE的’时期‘“,后者则类似于”播放SHE的十/七“或者“播放SHE”(忽略了“《十七》”之类,理解的错误造成了小度无法正确播放。

2. 版权问题

经验证小度的音乐版权服务方,百度音乐和QQ音乐都没有金玟岐的《十三》的版权,但有其他几首歌的版权,因此版权理应也不是这个体验洼地的主要原因。

3. 策略问题:小度的语音交互什么时候应该进入“对话模式”?

相比问题1,问题2才是造成这个体验洼地的关键。这是因为,在小度已经无法正确识别用户意图的同时,没有通过进入对话模式给用户提供更多解决问题的方案,而是机械的重复系统里置信度最高的操作,这无疑会使得用户火冒三丈。

所谓“对话模式”通常有多轮的语音交互,并且AI能够理解用户的上下文含义,从而更“聪明”地做出回应,举个经典的例子:

  • 用户:谁是美国的第16任总统
  • AI:林肯
  • 用户:他去世时多大?
  • AI:林肯享年65岁

对话模式中,AI承接了上文的“他”指的是“林肯”;而如果是非对话模式,AI则会对用户的第二句“他”不知所措。

目前的策略,一般情况下小度与用户之间的交互是单轮命令式的,即用户“小度小度”唤醒后给予小度指令,小度会做出单次回应。

但有以下两种情况(记忆中观察到的,因为疫情影响手边没有产品,应该会有情况遗漏)小度会切换到对话模式:

  1. 当用户主动说出“进入极客模式”或者“来聊聊天吧”之类的指令
  2. 当小度“不自信”的时候。比如给予的指令小度理解不清楚、小度为了消除指令的歧义、或者出现打断对话等异常情况时,小度会采用各种确认策略,反复确认用户的指令,这样也就进入了多轮对话

所以在现有常规的交互策略下,当小度“自信”的时候,比如他自信地忽略掉了一些限定词(例如艾热、热爱版),从而自信地认为用户就是想听邓紫棋原版的《光年之外》,这时它一般不会进入对话模式。

尽管用户火冒三丈地多次重复同样的“播放《光年之外》艾热版”的指令,小度依然会我行我素地播放邓紫棋原版的《光年之外》。

我不清楚这种策略设置的决策依据是什么,可能是这种case比较极端没有被注意到,可能是技术限制,也可能是出于成本考虑,在此不做判断,但不影响从体验优化的角度给出建议。

四、尝试给出解决方案

问题1的解决

结论:出于可能的成本考虑,“版权问题”的情况自动进入对话模式,其他由于AI能力问题造成的错误,交由问题2的解决方案一并解决。

示例对话:

用户:小度小度,播放金玟岐的《十三》

小度:对不起,暂时没有相关歌曲的播放版权,是否为您播放金玟岐的《岁月神偷》

用户:好的

GUI原型:无

VUI交互流程:

问题2的解决

  • 结论:当用户反复唤醒小度重复相同指令时(先为“播放下一曲”之类的命令加白,不在此讨论之列),自动进入对话模式。
  • 功能逻辑:

这里有几个概念需要解释:

1)确认策略

AI在回应用户指令时,会有一系列备选答案,按置信度高到低排列,形成N-Best列表。在使用列表中不同置信度的答案回应用户时,AI需要使用不同的确认策略。高置信度的答案采用隐性确认,低置信度的答案采用显性确认(举例见下方示例对话)。

2)消除歧义策略

当用户给出模糊不清的指令或冗余的指令时,AI向用户反复确认、拆解或补充,以形成确定的指令。

示例对话:

//进入对话模式//

  • 用户:小度小度,播放邓紫棋和艾热的《光年之外》
  • 小度:(置信度大于80%,隐性确认)好的,为您播放邓紫棋的《光年之外》
  • ……(若循环上述对话,则进入对话模式,触发确认策略) 

 //进入确认策略//

  • 小度:(置信度大于65%小于80%,显性确认)您是希望播放邓紫棋的歌曲《光年之外》现场版吗?
  • 用户:不是
  • 小度:(置信度大于50%小于65%,显性确认)您是希望播放邓紫棋、华晨宇的歌曲《光年之外》吗?

……(置信度递减)//进入消除歧义策略//

  • 小度:(置信度小于45%)对不起,请问您想听哪谁的歌?
  • 用户:邓紫棋和艾热
  • 小度:能说一下主要是哪位歌手吗?
  • 用户:艾热
  • 小度:好的,在艾热的歌曲中找到了23首歌曲,请问歌曲的名字是?
  • 用户:《光年之外》
  • 小度:好的,为您播放,邓紫棋、艾热《光年之外》

GUI原型:无

VUI交互流程:略

五、结论

新的问题:

短期来看,这个解决方案有肉眼可见的需要改变的代码量,因为第一步执行判断“是否用户重复了m次相同指令”应该是要在整个代码架构上加一次判断,有一定的工程量。

但是长期来看,对用户体验的提升是值得的。站在用户的角度,无疑希望体验能够优化的更好。是否要为了优化这个体验细节而付出这个开发成本(用户有其他临时替代方案,比如打开小度app手动搜寻歌曲,比如有屏音箱),需要更多的数据论证相关收益和优先级,作为非内部人士,缺乏相应的决策依据,这里不做判断。

在重新看这个体验问题中,由于场景的复杂和AI能力的不足,用户扮演了一个“帮助系统修正错误”的反馈角色。

因为我的水平有限,相关思考多来自于工作的语音项目和学术论文设计,但没有完整实操过复杂的语音助手项目落地,理解有误的地方请不吝指正和批评。

 

本文由 @eason 原创发布于人人都是产品经理。未经许可,禁止转载

题图来自Unsplash,基于CC0协议

更多精彩内容,请关注人人都是产品经理微信公众号或下载App
评论
评论请登录
  1. 请问作者是度秘事业部的PM吗 :)

    来自上海 回复
  2. 智能AI都出现一个共同的问题:智能设备的自主学习能力为零。
    自主学习能力为不懂的问题收藏功能,把用户涉及到的不会问题做收藏,在大数据中检索答案,把知识库中的内容添补。
    个人见解

    来自广东 回复
  3. 极客模式,可以连续对话

    回复
  4. 说小度,你放个homepod干嘛

    来自上海 回复
  5. 不错的想法,交互性细节需要提升

    回复
  6. 百度人工智能一直在自己打脸

    回复