人群工作者 AI使會(huì)話代理變得更聰明

像Siri，Alexa和Cortana這樣的會(huì)話代理人非常善于為您提供天氣，但在被要求提供不尋常的信息或后續(xù)問(wèn)題時(shí)會(huì)感到沮喪。通過(guò)將人類(lèi)添加到循環(huán)中，卡內(nèi)基梅隆大學(xué)的研究人員創(chuàng)造了一種難以忍受的會(huì)話代理。

名為Evorus的聊天機(jī)器人系統(tǒng)不是第一個(gè)使用人類(lèi)智能來(lái)回答廣泛?jiǎn)栴}的系統(tǒng)。人機(jī)交互研究所副教授杰夫•比格姆(Jeff Bigham)表示，人類(lèi)正在同時(shí)訓(xùn)練系統(tǒng)的人工智能，使其逐漸減少對(duì)人的依賴(lài)。

就像早期的一個(gè)名為Chorus的CMU代理人一樣，Evorus根據(jù)亞馬遜機(jī)械土耳其人的要求招募人群工作人員來(lái)回答用戶(hù)提出的問(wèn)題，群眾工作人員就最佳答案進(jìn)行投票。Evorus還會(huì)跟蹤詢(xún)問(wèn)和回答的問(wèn)題，并隨著時(shí)間的推移，開(kāi)始為后續(xù)問(wèn)題提出這些答案。研究人員還開(kāi)發(fā)了一個(gè)流程，通過(guò)該流程，人工智能可以幫助批準(zhǔn)消息，減少工作人員的參與。

“由于設(shè)備的言論和主題有限，”公司已經(jīng)花了很多精力教人們?nèi)绾闻c會(huì)話代理人交談，“比格姆說(shuō)。“現(xiàn)在，我們讓人們更自由地說(shuō)話，而且必須學(xué)會(huì)容納他們。”

該系統(tǒng)不是最終形式，但可供任何愿意參與研究工作的人下載和使用：http：//talkingtothecrowd.org/。

今年晚些時(shí)候，Bigham的研究團(tuán)隊(duì)將在蒙特利爾舉行的計(jì)算機(jī)系統(tǒng)人類(lèi)因素會(huì)議CHI 2018年上發(fā)表關(guān)于Evorus的研究論文。

完全自動(dòng)化的會(huì)話代理可以很好地回答簡(jiǎn)單，常見(jiàn)的問(wèn)題和命令，并且當(dāng)主題相對(duì)較窄時(shí)可以深入交談，例如在公交時(shí)刻表上提供建議。Bigham說(shuō)，人們?cè)谘h(huán)中可以回答各種各樣的問(wèn)題，但除了用戶(hù)愿意支付的禮賓或旅行服務(wù)之外，依賴(lài)人類(lèi)的代理人太昂貴而無(wú)法擴(kuò)大規(guī)模以供廣泛使用。合唱會(huì)議費(fèi)用平均為2.48美元。

“憑借Evorus，我們?cè)跈C(jī)器和人群之間的合作中獲得了一席之地，”比格姆說(shuō)。希望隨著系統(tǒng)的發(fā)展，人工智能能夠處理越來(lái)越多的問(wèn)題，而響應(yīng)“長(zhǎng)尾”問(wèn)題所需的群眾工作者數(shù)量將保持相對(duì)穩(wěn)定。

保持人類(lèi)進(jìn)入循環(huán)還可以降低惡意用戶(hù)不恰當(dāng)?shù)夭倏v會(huì)話代理的風(fēng)險(xiǎn)，就像微軟在2016年短暫部署其Tay聊天機(jī)器人時(shí)所發(fā)生的那樣，Ting-Hao Huang博士說(shuō)。語(yǔ)言技術(shù)學(xué)院(LTI)的學(xué)生。Huang與Bigham和Joseph Chee Chang合作開(kāi)發(fā)了Evorus，同時(shí)也是博士。LTI的學(xué)生。

在Evorus的五個(gè)月部署期間，有80個(gè)用戶(hù)和181個(gè)對(duì)話，12%的時(shí)間選擇自動(dòng)回答問(wèn)題，人群投票減少了近14%，每個(gè)回復(fù)用戶(hù)消息的人群工作成本下降了33百分。

Evorus是一個(gè)文本聊天機(jī)器人，但是通過(guò)Google Hangouts部署，可以容納語(yǔ)音輸入，以及從計(jì)算機(jī)，手機(jī)和智能手表訪問(wèn)。為了增強(qiáng)其可擴(kuò)展性，Evorus使用的軟件架構(gòu)可以接受第三方開(kāi)發(fā)的自動(dòng)問(wèn)答組件。