IBM在自然語言處理方面的創新幫助企業更好地理解業務語言

2020-12-18 donews

在 IBM,我們專注於開發和擴展企業自然語言處理 (Natural Language Processing,NLP) 功能,旨在幫助企業深入洞察、回答問題並做出更明智的決策,即使他們只有很小的數據集或者缺乏專業知識。

雖然人類語言對孩子來說很容易掌握,但即使是最先進的機器,這也極其複雜,教人工智慧理解人類意圖最具挑戰性的工作是它需要大量的數據、大量的時間和專業知識。

當您問問題時,您到底想說什麼?您想達到什麼目標?您到底想得到什麼信息?人類的語言充滿了細微的差別,導致有很多方式來表達特定的意圖。對於聊天機器人等大部分人工智慧而言,這的確是個問題,當遇到複雜的語法時,它們會出錯,因為它們只關注具體的單詞,而不會聯繫更廣泛的上下文語境。

了解Watson Assistant新的增強功能,看看我們自然語言理解新模型是怎樣脫穎而出的。

為了幫助企業應對這一挑戰,IBM在IBM Watson Assistant中推出了改進後的自然語言理解(Natural Language Understanding,NLU)新模型,用於意圖分類。在基準測試中,與商業方案相比,新的意圖檢測算法更為準確。(1)

IBM 研究院不斷改進自然語言處理功能,並融入到 IBM Watson 中。

此外,我們還在 IBM Watson Assistant 和 Watson Discovery 中引入了新的自然語言處理增強功能,目前已經提供 beta 版。這些新功能是在 IBM 研究院(IBM Research)的帶領下開發的,目的是提高人工智慧的自動化程度,以及自然語言處理的精度。

閱讀理解能力(Reading Comprehension)這一功能,它返回包含在較長段落中的具體事實或者簡短答案。目前,Watson Discovery 能夠確定與查詢相對應的最佳「段落」。閱讀理解從企業文檔集中檢索大量候選段落,搜索當前問題的答案並返回相應的答案。閱讀理解應用上下文情景理解功能來理解查詢,利用大量的語言模型從當前的文檔中提取出具體的答案,然後用戶會收到一個信心分數,該分數表示系統對每個答案的置信度。

這種功能非常適合金融行業的組織。例如,如果您正要做出放貸決定,可能需要從複雜的文檔中找出準確的事實,這些文檔通常是由人工進行閱讀和審查的。之前,Watson Discovery 會返回建議的段落。而採用閱讀理解,用戶將得到準確的答案(例如,「當前貸款的利率是多少?」「2.9%」),這節省了他們手動搜索大量文檔的時間。此功能現已在 beta 版中開放給部分 Watson Discovery 用戶。

FAQ 提取(FAQ Extraction)目前提供 beta 版,是一種新穎的答案檢索技術,它在網頁上爬行以檢測常見問題和問答,使用這些內容通過 Watson Assistant 提供簡潔、最新的答案。

FAQ 提取旨在與 Watson Assistant 的 Search Skill 協同工作,在文檔中尋找最終用戶問題的答案。這種功能使得最終用戶在與人工智慧虛擬坐席交互時更容易找到他們需要的答案。

例如,企業可能很難跟上不斷變化的公共指導,即允許重返工作場所或者實體店重開的規定。如果沒有 FAQ 提取這樣的機制,將需要大量的資源才能使人工智慧客服解決方案保持最新狀態。相反,Watson Assistant 只需知道官方 FAQ 內容的 URL 就能跟上最新信息。

探索Watson Discovery和Assistant中的自然語言處理新功能。

最後,Watson NLP 解決方案現在還支持 10種其他語言。IBM Watson Discovery 現在支持波士尼亞語 (Bosnian)、克羅埃西亞語 (Croatian)、丹麥語 (Danish)、芬蘭語 (Finnish)、希伯來語 (Hebrew)、印地語 (Hindi)、挪威語 (Bokmål)、挪威語 (Nynorsk)、塞爾維亞語 (Serbian) 和瑞典語 (Swedish)。而 Watson 自然語言理解 (NLU) 現在支持丹麥語 (Danish)、挪威語 (Bokmål)、挪威語 (Nynorsk)、芬蘭語 (Finnish)、捷克語 (Czech)、希伯來語 (Hebrew)、波蘭語 (Polish) 和斯洛伐克語 (Slovak) (關鍵字)。

這些進步基於 IBM 研究院的自然語言處理創新渠道。今年年初,我們宣布將採用一些為 IBM 研究院 Project Debater 提供支持的核心自然語言處理技術,包括高級情緒分析(習慣用語理解)、總結、主題聚類和關鍵點分析等,並在 Watson Discovery 等 IBM 的自然語言處理產品中實現了商業化。

這些創新可以幫助企業進一步理解並從其業務數據中獲取真正的價值,從而能夠做出更明智的決策,並為客戶和員工提供更高效的深度見解。

有關IBM未來方向和意圖的聲明僅為了說明目標和目的,如有更改或者撤回,恕不另行通知。

參考資料:(1) 2020年 11月,對話型人工智慧軟體公司 Jio Haptik 科技發表了一篇技術論文,將其產品的性能與谷歌、微軟和RASA的同類產品進行了比較。除了 IBM Watson Assistant 之外,其他商業解決方案的性能取自 Arora 等公司進行的 2020 基準測試研究。IBM 在 IBM Watson Assistant 上運行了與 Arora 等公司報告的相同的性能測試,目的是用於本分析。

聲明：本站轉載此文目的在於傳遞更多信息，並不代表贊同其觀點和對其真實性負責。如涉及作品內容、版權和其它問題，請在30日內與本網聯繫，我們將在第一時間刪除內容,本網站對此聲明具有最終解釋權。

相關焦點

  • IBM強化Watson對商業語言的理解能力
    IBM Watson 技術，旨在幫助組織機構更清晰地識別、理解和分析英語語言中某些最具挑戰性的方面，從而獲取更多洞察。正因如此，我們將Project Debater中獲取的技術集成到Watson，我們相信 NLP 將增強企業從人類語言中採集、分析和理解信息的能力，這將有助於企業更好地利用蘊含在數據中的智慧資產。」
  • IBM為Watson引入創新功能,旨在幫助企業擴展人工智慧的使用
    2020年12月9日，—IBM（NYSE：IBM）日前發布了IBM Watson的創新功能，旨在幫助企業擴展人工智慧的使用。　　這些新功能是在IBM研究院（IBM Research）引領下開發的，目的是提高人工智慧的自動化程度，以及自然語言處理的精確度，讓人工智慧的預測結果更加可信。
  • IBM提高沃森理解商業語言的能力
    IBM(NYSE:IBM)宣布了幾項新的IBM沃森(Watson)技術,旨在幫助企業更清晰地識別、理解和分析英語語言中最具挑戰性的方面,這些新技術意味著IBM Research人工智慧系統Project Debater首次將關鍵自然語言處理(NLP)技術商業化。例如,通過新的高級情感分析特性來識別和分析習語和口語。IBM宣布計劃全年將Project Debater技術集成到Watson中,重點是提高客戶利用自然語言的能力:A、 分析-高級情緒分析。
  • IBM發布IBM Watson創新功能,旨在幫助企業擴展AI使用
    ——IBM研究院在自然語言處理、自動化和建立信任等方面的創新在Watson產品中實現商業化 2020年12月9日,— IBM(NYSE:IBM)今天發布了IBM Watson的創新功能,旨在幫助企業擴展人工智慧的使用。
  • 自然語言處理的應用前景
    自然語言處理應用 機器翻譯是更好的自然語言處理(NLP)應用程式之一，但它並不是最常用的一種。人們每次在Google或Bing搜尋引擎中查找內容時，都將數據輸入到系統中。當單擊搜索結果時，搜索引索會將其視為對找到的結果正確的確認，並在以後使用這個信息更好地進行搜索。
  • 科普丨什麼是NLP(自然語言處理)
    自然語言處理（NLP）是一種專業分析人類語言的人工智慧。有沒有好奇過Siri是如何理解你說的（大部分的）話的？Siri的工作過程就是自然語言處理在實踐中應用的一個鮮活案例。NLP正在成為我們生活中不可或缺的一部分，其與機器學習、深度學習一起達成的高度遠遠優於幾年前取得的成就。在本文中我們將深入了解NLP是如何應用、如何工作的。
  • IBM發布IBM Watson創新功能 旨在幫助企業擴展人工智慧使用
    來源：新浪科技新浪科技訊 12月10日晚間消息，2020年12月9日， IBM發布了IBM Watson的創新功能，旨在幫助企業擴展人工智慧的使用。據悉，這些新功能是在IBM研究院（IBM Research）引領下開發的，目的是提高人工智慧的自動化程度，以及自然語言處理的精確度，讓人工智慧的預測結果更加可信。
  • 百度聯合發布全球最大中文自然語言處理數據共建計劃「千言」
    自然語言理解（NLP）素有「人工智慧皇冠上的明珠」盛譽，這也意味著語言與知識等認知層面的技術突破將進一步促進AI深入發展。語言與知識技術是人工智慧認知能力的核心。2010年，百度成立自然語言處理部，在前瞻技術與產業格局上實現引領和創新。
  • 自然語言處理之文本相似度計算
    文 | 光大科技大數據部 盧格潤在金融科技的業務場景下，我們不可避免地應用到自然語言處理（NLP）的技術去解決問題，比如智能問答系統、資訊輿情的分析等……在自然語言處理中，很多實際應用具有共性問題，本文就以文本相似度的計算為例介紹自然語言處理解決問題的思路。
  • IBM為Watson引入創新功能 包括安永和Regions銀行等全球領先品牌...
    ——IBM研究院在自然語言處理、自動化和建立信任等方面的創新在Watson產品中實現商業化2020年12月9日，— IBM（NYSE：IBM）今天發布了IBM Watson的創新功能
  • 自然語言處理中的9個不可不知的研究熱點
    IJCAI是人工智慧領域的頂級國際學術會議，在演講中，賈珈基於IJCAI 2020的錄用論文內容，按算法層面和任務層面兩個維度，從無監督預訓練、跨語言學習、元學習和少樣本學習、遷移學習、誤差、知識融合、問答、自然語言生成、多模態這九個方面介紹了關於自然語言處理的主要成果和研究趨勢。
  • BERT是否完美,語言模型又是否真正地「理解了語言」呢?
    機器之心發布 作者：追一科技 AI Lab 研究員 Tony 大家都知道，BERT等語言模型在自然語言處理中得到了廣泛的應用。但有時也會出現一個疑問，這些語言模型是否真正地理解了語言呢？專家學者對此也會有不同的見解。
  • IBM Watsons創新功能旨在提高人工智慧自動化程
    12月11日消息，據國外媒體報導，由IBM研究所開發的IBM Watsons創新功能旨在提高人工智慧的自動化程度，提供更高精度的自然語言處理（NLP） ，並加強人們對人工智慧預測結果的信任度。
  • BERT是否完美,語言模型又是否真正地「理解了語言」呢?
    機器之心發布作者：追一科技 AI Lab 研究員 Tony大家都知道，BERT等語言模型在自然語言處理中得到了廣泛的應用。但有時也會出現一個疑問，這些語言模型是否真正地理解了語言呢？專家學者對此也會有不同的見解。
  • 翻譯機器人可"領會"使用意圖 河南首個自然語言處理實驗室發布新成果
    在國內，自然語言處理技術研究也逐漸鋪開，各大自然語言處理研究機構也紛紛嶄露頭角。6月29日，河南省首個自然語言處理技術前沿實驗室—鄭州大學與中業科技自然語言處理聯合實驗室在河南省國家大學科技園成功舉行科技成果發布會。
  • Facebook 自然語言處理新突破:新模型能力趕超人類 & 超難 NLP 新...
    在整個自然語言處理領域，NLU 系統的發展速度如此之快，以至於它在許多現有的基準上已經達到了一個極限。為了繼續提高技術水平，Facebook 與 Deepmind Technologies、紐約大學及華盛頓大學合作開發了一套全新的基準、排行榜和 PyTorch 工具包（https://jiant.info/），Facebook 希望這些成果將進一步推動自然語言處理領域的研究進展。
  • IBM發布IBM Watson新功能 旨在提高人工智慧自動化程度
    據國外媒體報導，由IBM研究所開發的IBM Watsons創新功能旨在提高人工智慧的自動化程度，提供更高精度的自然語言處理(NLP) ，並加強人們對人工智慧預測結果的信任度。其中之一是一個創新型問答系統，目前，它在IBM Watson Discovery中仍處於beta測試階段，計劃作為一個新特性來幫助識別來自大量複雜企業文檔的自然語言查詢中更精確的答案。
  • 自然語言處理暢談之機器翻譯技術發展歷程
    目前各個國家和民族的不同種類信息不斷融會貫通，不同語言之間的翻譯已經成為當今社會基本需求之一。小到出國旅遊翻譯或者資料翻譯，大到基於網際網路的跨境電商、跨境旅遊、外貿、O2O、海外租車、金融服務等國際化業務實施，都面臨著一個無法避免的問題：多國語言的翻譯。
  • 阿爾伯塔大學博士畢業論文:基於圖結構的自然語言處理
    機器之心發布機器之心編輯部自然語言處理（Natural Language Processing）是人工智慧的核心問題之一，旨在讓計算機理解語言，實現人與計算機之間用自然語言進行通信。論文連結：https://sites.ualberta.ca/~bang3/files/PhD-Thesis.pdf引言自然語言處理（NLP）旨在讀取和理解未結構化的自然語言文本來完成不同的任務。「如何表示文本」以及「如何進行計算」是其中的兩個核心問題。
  • IBM推出Watson Works幫助企業應對復工挑戰
    提供數據驅動的洞察,幫助僱主作出明智的決定,確保企業安全、順利復工美國紐約州阿蒙克市,2020年6月18日,IBM (NYSE: IBM) 剛剛宣布推出「Watson Works」,這是一系列嵌入 Watson 人工智慧 (AI) 模型和應用的精選產品,幫助企業在新冠疫情造成的各種封鎖停擺之後能夠安全順利地復工