意外!谷歌通过图灵测试的AI实测:4次成功完成任务,3次靠的是人工

斑鸠 2019-05-24

本文经AI新媒体量子位(公众号ID:QbitAI)授权转载,转载请联系出处。 

 谷歌神操作,惊掉人下巴。

作为全球 AI 第一大厂,“人类希望”的寄托,谷歌,竟然干出用真人伪装 AI 的勾当。

所以刚一被《纽约时报》曝光,圈里立即炸开锅。

核心所指,就是去年亮相的那个真假难辨的打电话 AI:Duplex

意外!谷歌通过图灵测试的AI实测:4次成功完成任务,3次靠的是人工

实测成功 4 次,3 次背后是人工

去年I/O大会,打电话 AI Duplex 一经亮相就技惊四座、震动全球,那一声“嗯哼”更是令人印象深刻。

其后谷歌董事长、图灵奖得主 John Hennessy 也亲自上阵打 Call,说在电话预约领域,这个 AI 已经通过了图灵测试。

意外!谷歌通过图灵测试的AI实测:4次成功完成任务,3次靠的是人工

而今年I/O,谷歌 CEO 皮猜还专门披露,一年内已在全美 40 多州商用。

那意思就是静水流深,正在广泛深入基层服务人民群众。

然而《纽约时报》记者好奇一试,结果尴尬。

为了更好测试,他们还专门找了两部 Pixel 智能手机,内置了谷歌助理,而且在预订餐厅服务时,如果需要电话预订,就能启动 Duplex.

几天之内,《纽约时报》记者使用 10 多次。

但成功预订的 4 次中,有 3 次源于 Duplex 背后的人工。

更直白来说,75% 的成功电话预订背后,由“伪装”成 AI 的人类完成。

完全由 AI 实现预订的,只有一次。

意外!谷歌通过图灵测试的AI实测:4次成功完成任务,3次靠的是人工

《纽约时报》记者也说,就在这一次中,确实也能展现谷歌 AI 的实力,不仅交流流畅应对自如,而且还有一些小停顿和语气词,让交流显得更逼真。

在被餐厅经理问及“几个人吃饭”、“什么时候”、“姓名”,“手机号”等信息时,谷歌 AI 都应对自如,准确回答。

甚至餐厅经理冷不防问出“有孩子吗?”这样的问题,谷歌 AI 还能随机应变,回答说:“我帮客户预订,所以我不太确定。”

然而遗憾的是,测试中成功预订的 4 次,有且仅有这一次,是真 AI。

即便测试样本还不是足够多,但也能说明很大问题。

而且谷歌利用人类呼叫员“伪装”AI 被发现,最初也源自一则餐厅“举报”。

爱尔兰口音的谷歌“AI”

吉米·陈(Jimmy Tran),泰餐厅 Lao Thai Kitchen 的员工,之前接到一通来自“谷歌助理”(Google Assistant)的电话。

这是一个有明显爱尔兰口音的男声,希望预订周末两个人用餐的位置。

小陈原本挺激动,毕竟他也多少听闻。通过谷歌拨打而来的订座电话,不是普通的打 Call,背后是逆天的谷歌 AI——Duplex.

但小陈很惊讶——这个“AI”口音为何真得不像 AI?不仅是爱尔兰口音,而且说话的语气语调,“像个人”。

于是小陈单刀直入询问:你是爱尔兰人?

对方马上回答:哦,是。我不是机器人。然后还笑出声来。

意外!谷歌通过图灵测试的AI实测:4次成功完成任务,3次靠的是人工

最后留下一脸懵逼的小陈,他决定向《纽约时报》寻求答案。

然而不问不知道。

谷歌官方:1/4 电话由人类拨出

因为谷歌官方大大方方承认,打电话给泰餐小陈的,确实是谷歌呼叫中心的员工。

而且目前通过 Duplex 拨打的电话中,约有 25% 由人类完全操作,在其他非人工操作的情况下,有 15% 的呼叫受到了人为干预。

当然,打电话 AI Duplex 背后还有人类呼叫中心这件事,谷歌之前从未披露过。

甚至一直以来,谷歌展现的姿态,都是完全 AI,完全自动化,完全不需要人类。

意外!谷歌通过图灵测试的AI实测:4次成功完成任务,3次靠的是人工

只是之前官方博客里,有云淡风轻提到过,机器能够自主完成大部分任务,并识别自己无法处理的情况,然后让人类来处理。

听起来只是一种保障用户体验的冗余行为。

万万没想到,人类不仅直接参与,而且1/4 的电话都在“伪装” 成 AI。

而如果按照《纽约时报》的随手测试,实际上3/4 都是人类员工所为。

所以这就是谷歌如今的做事方式?

业务和产品沦为“方便面”——包装精美诱人,然后在旮旯角落留下一句“效果仅供参考”?

谷歌回应:出于对餐厅尊敬

而且谷歌的解释和回应,也让人困惑。

谷歌说,Duplex 之所以有时依赖人工,部分原因在于,是出于对餐厅的尊重。

负责谷歌助理业务的高管尼克·福克斯(Nick Fox)解释,为保证餐厅方面的体验,谷歌没有在 Duplex 中强力去人工化。

但谷歌也在不断随着时间推进改进产品,改进自动化系统,并逐渐减少人工干预的需要。

Duplex 的产品经理也表示,还有些餐厅不知道能不能电话预订,所以这类餐厅会优先选择人类打电话。

也就是说,只有那些明确接受电话订座的餐厅,谷歌系统才会让 AI 出马。

然而《纽约时报》马上用实例打脸。

因为就在一个之前成功用 Duplex 订座成功的餐厅,再次试图用谷歌 AI 预订时,谷歌派出的是人类。

《纽约时报》猜测,可能是 Duplex 系统的学习速度还没那么快。

因为之前 The Verge 的相关报道中,还提到了另一个原因:这项技术还很年轻、使用有限。目前谷歌仍在使用人工呼叫来帮助获取数据、训练 AI。

但无论如何,谷歌一手塑造的逆天 AI,这次算是破功了。

大家习惯了“多少人工就有多少智能”的说法,但谷歌在应用级人工智能产品中,玩起“人工”+“智能”的模式,依然令人震惊。

事情曝光后,也有人评论说:

难以置信,当他们在舞台上现场表演时,我很惊讶。他们完全撒谎了,我真的希望有人起诉他们。那天他们在舞台上欺骗了成千上万的人。

意外!谷歌通过图灵测试的AI实测:4次成功完成任务,3次靠的是人工

不过也有谷歌铁杆支持者认为,谷歌这样谨慎而不激进地引入 Duplex,是明智的。

不知道你是否还记得 Duplex 横空出世的样子。

这里可以帮你回顾一下:

只是 Demo 再炫酷,现在也被现实给了一记尴尬耳光。

意外!谷歌通过图灵测试的AI实测:4次成功完成任务,3次靠的是人工

你怎么看?

相关推荐