近日，國際自然語言處理領(lǐng)域的權(quán)威學(xué)術(shù)會議“國際計算語言學(xué)協(xié)會年會”（ACL2020）公布了今年大會論文錄用結(jié)果，本屆大會共收到3429篇投稿論文，投稿數(shù)量創(chuàng)下新高。小i機器人聯(lián)合華東師范大學(xué)發(fā)表的論文《基于槽注意力機制和信息共享的對話狀態(tài)追蹤方法（Dialogue State Tracking via Slot Attention and Slot Information Sharing, SAS）》成功入選。
關(guān)于ACL
ACL年會是計算語言學(xué)和自然語言處理領(lǐng)域最重要的頂級國際會議，被CCF與清華均列為頂級A類會議，由計算語言學(xué)協(xié)會主辦，每年舉辦一次。其接收的論文覆蓋了對話交互系統(tǒng)、語義分析、摘要生成、信息抽取、問答系統(tǒng)、文本挖掘、機器翻譯、語篇語用學(xué)、情感分析和意見挖掘、社會計算等自然語言處理領(lǐng)域眾多研究方向。
關(guān)于入選論文
如何解決多輪復(fù)雜對話上的狀態(tài)追蹤問題，一直是自然語言處理領(lǐng)域研究的難點。本篇論文聚焦基于槽注意力機制和信息共享的對話狀態(tài)追蹤方法（Dialogue State Tracking via Slot Attention and Slot Information Sharing, SAS），進一步驗證了SAS在對話狀態(tài)追蹤任務(wù)上優(yōu)于其他方法，那么具體是如何做到的呢？
什么是對話狀態(tài)追蹤？
所謂對話狀態(tài)追蹤，就是指每回合從對話中捕捉用戶對話狀態(tài)的任務(wù)，而這些對話狀態(tài)往往以槽值對的形式表示，它們代表了用戶每回合的需求。由于用戶的需求往往分布在一場對話中的各個回合，而多輪回合間信息的保留一直是自然語言處理領(lǐng)域的難點，對話狀態(tài)追蹤任務(wù)目前還存在著不少挑戰(zhàn)。隨著任務(wù)式對話狀態(tài)系統(tǒng)應(yīng)用領(lǐng)域從單領(lǐng)域擴展為多領(lǐng)域，解決多輪復(fù)雜對話上的狀態(tài)追蹤問題越發(fā)重要。
對話狀態(tài)追蹤日漸成為研究熱點
目前，任務(wù)式對話系統(tǒng)以其廣泛的應(yīng)用性得到了各大科技公司的青睞，不少機構(gòu)紛紛展開了對其的研究。任務(wù)式對話系統(tǒng)與以娛樂為目標的聊天對話系統(tǒng)不同，它需要為用戶完成某種特定的任務(wù)，比如訂餐、旅游安排、天氣預(yù)報等。作為任務(wù)式對話系統(tǒng)的關(guān)鍵組件，對話狀態(tài)追蹤器的性能大大影響了對話系統(tǒng)的最終效果。因此，對話狀態(tài)追蹤任務(wù)已經(jīng)成為了一個研究熱點。
目前業(yè)內(nèi)針對任務(wù)式對話狀態(tài)追蹤已有一些方法。例如用表示學(xué)習(xí)技術(shù)進行對話狀態(tài)追蹤的NBT模型、用global-local編碼器捕捉槽和全局特征的GLAD模型、將對話狀態(tài)追蹤任務(wù)建模成文本生成任務(wù)，并引入pointer-generator結(jié)構(gòu)的TRADE等……這些方法雖然有效地改善任務(wù)式對話狀態(tài)追蹤的性能，但長對話、復(fù)雜多領(lǐng)域?qū)υ捝献粉櫺Ч蛔愕膯栴}仍存在，而這些問題正是此次論文要解決的問題。此外，由于不同槽間存在著一定關(guān)聯(lián)性，將這些信息利用起來也有助于幫助對話狀態(tài)追蹤。
SAS的優(yōu)勢
在本篇論文中提出的SAS（Slot Attention and Slot Information Sharing）由兩部分構(gòu)成。第一部分，用槽注意力從歷史記錄中抽取各個槽所需的關(guān)鍵信息；第二部分，將關(guān)鍵信息根據(jù)各個槽的關(guān)聯(lián)性進行信息重組與共享。其中，第二部分有兩種不同的實現(xiàn)方法，分別是基于超參數(shù)的信息共享和基于k-means的信息共享。SAS利用注意力機制為獨立的每個槽從多輪長對話中提取出最有價值的特征，從而避免不相干槽的冗余信息對目標槽的干擾。其次，為了改善模型在數(shù)據(jù)不足的槽上的追蹤效果，模型共享了關(guān)聯(lián)槽上的信息。在多領(lǐng)域和單領(lǐng)域數(shù)據(jù)集上的實驗結(jié)果驗證了SAS在對話狀態(tài)追蹤任務(wù)上優(yōu)于其他方法。
深耕認知智能19年，展示超強技術(shù)積累
小i機器人自2001年成立以來，就專注于以自然語言處理為基礎(chǔ)的認知智能相關(guān)技術(shù)的自主研發(fā)和商業(yè)落地。此次聯(lián)合論文入選ACL2020，是繼今年小i機器人與加州大學(xué)戴維斯分校聯(lián)合論文入選AAAI2020后，再次被國際頂級會議錄用，展示出了小i機器人超強的技術(shù)積累實力。除此之外，小i機器人“智能客服系統(tǒng)（iBot）”日前也被工信部納入“新一代人工智能工業(yè)創(chuàng)新重點任務(wù)入圍揭榜單位”，進一步印證了小i機器人在智能交互領(lǐng)域強大的研發(fā)和技術(shù)實力。
未來，小i機器人也會將先進的認知智能技術(shù)與產(chǎn)業(yè)應(yīng)用相融合，賦能產(chǎn)業(yè)發(fā)展，用認知智能技術(shù)探索人工智能的無限可能。
關(guān)于小i機器人的更多資料，請復(fù)制打開下方鏈接：
https://dlcenter.xiaoi.com/dlcenter/File_download.html?platform=scwx
