Skype開啟中英實時語音翻譯對話新時代

2020-12-11 IT168

  【IT168 資訊】2015年4月9日,Skype宣布在中國市場推出Skype Translator實時語音翻譯技術的中文預覽版,正式開啟中英實時語音翻譯對話新時代。Skype Translator預覽版適用於Windows 8.1或Windows 10技術預覽版的客戶端或平板電腦客戶端。除了英文和中文普通話的語音翻譯之外,還支持四十多種語言的即時文本翻譯。

  新的裡程碑

  在2014年12月,Skype Translator支持了英文和西班牙文之間的實時語音翻譯,這個記錄很快被刷新。

  微軟認為,這一新時代的開啟得益於深層神經網絡與微軟成熟的統計機器翻譯技術的結合,語音識別能力被進一步提高,隨之得到的更準確的翻譯結果,使得一對一的語音交談成為現實。

  中文是一門極具挑戰性的語言,大約一萬個常用漢字以及多種多樣的語音、語調,這對於母語為英語的學習者來說是最大的困難之一,有類似困難的語言還有阿拉伯語、日語和韓語。

  微軟是語音翻譯領域的先驅,在2012年首次演示了英文和中文普通話之間的實時語音翻譯技術原型。此後的數年中,微軟在北京的研究團隊與位於美國雷蒙德的同事們密切合作,經過多年的研究和專注投入,完成了普通話的語言模型,使Skype Translator的中文語音翻譯在終於變為現實。

  Skype Translator中文預覽版的推出無疑將微軟語音翻譯技術能力和Skype的未來應用前景推升到新的裡程碑。

  解讀Skype Translator工作原理

  機器學習是指軟體學習訓練數據的能力。Skype Translator構建於機器學習平臺之上。通過在預覽版階段獲取的訓練數據,加之其中的細微差別,軟體就能夠針對真實使用者的不同話題、口音與語言轉換進行學習,實現更好的識別和翻譯。


Skype Translator工作原理信息圖

  Skype Translator的機器學習協議訓練並優化語音識別和機器翻譯任務,就像黏住這些元素的膠水一樣,該協議促進對被識別的文本進行更好的翻譯。這個過程包括去除造成不流利的字詞(例如「啊」「嗯」以及重複措辭)、將文本分解成句子、添加標點符號和大小寫識別。

  語音識別和機器翻譯的訓練數據來源多種多樣,包括翻譯的網頁、配有字幕的視頻,以及預先翻譯且轉錄成文字的一對一談話。Skype Translator通過記錄這些對話來分析對話文本並訓練系統更好地「學習」各種語言。

  據悉,已經有很多人與Skype Translator分享了他們過去的對話記錄,Skype Translator對其進行了分析並為統計模型創造訓練數據,該統計模型教會語音識別和機器翻譯引擎如何將收集到的語音轉換為文本信息,然後將文本信息轉換為另一種語言。使用Skype Translator的用戶都會在對話開始前得到清晰的系統提示,即對話將被錄製並用於提高微軟翻譯和語音識別服務的質量。

  在準備好的數據被錄入機器學習系統後,機器學習軟體會在這些對話和環境涉及到的單詞中搭建一個統計模型。當用戶說話時,軟體會在該統計模型中尋找相似的內容,之後應用到預先「學到」的轉化程序中,使得音頻轉換為文本再從文本轉換成另一種語言。

  語音識別的發展一直受到錯誤率高、對麥克風敏感度差異、噪音環境等因素阻礙。為此,微軟研究院率先將深層神經網絡(DNNs)技術引入語音識別,從而極大程度地降低了錯誤率,提高了可靠性,最終使這項語音翻譯技術得以更廣泛地應用,包括Skype Translator。

  Skype Translator的機器翻譯部分負責將文本從一種語言翻譯成另一種語言。它採用了和必應在線翻譯同樣的技術:開創性地結合了句法和統計模型,此外更加有針對性地訓練對話性語言。這點非常有挑戰性,因為現在用來搭建文本翻譯系統的典型訓練數據都是優化過的清晰、結構嚴謹的書面語言。Skype Translator的系統在包含必應翻譯的豐富語言知識的同時,還額外加入了口語對話中出現的單詞及短語。

  另外,Skype Translator創造了一個定製化的機器人程序來協調整個產品體驗。如電話中的第三方一樣,它負責建立電話連接、發送音頻流至語音引擎獲取翻譯文本,並分別在雙方結束說話時翻譯其所說的內容。

  在技術實現上,Skype Translator主要克服了語氣詞、俚語翻譯、語言翻譯用戶挑戰(主要是用戶對Skype Translator的自動翻譯器的適應)等多方面的挑戰。

  Skype Translator主要功能

  1.語音讀取文字信息。用戶可以通過語音收聽到對話方發送給自己的即時消息,語音的語言可以自選。

  2.持續性識別。在對方發送語音信息期間可持續性的進行文字翻譯。

  3.自動聲量控制。您的對話方可以在實時語音翻譯期間不間斷地說話。同時,您可收聽到較高音量的語音翻譯,對話方本身的語音信息呈現出較低音量,所以您只要將注意力集中在語音翻譯上即可,這可以保證翻譯信息的收聽流暢。

  4.語言翻譯靜音功能。您可以任意開啟或關閉語音翻譯的聲音,並直接讀取文字翻譯。除了語音翻譯現有的四種語言(英語,西班牙語,中文普通話,義大利語), Skype Translator的即時通訊文本翻譯更是在原有40多種語言的基礎上加入了塞爾維亞語,波士尼亞語,克羅埃西亞語,瑪雅語和奧託米語。

  通過Skype Translator預覽版網頁註冊試用

相關焦點

  • 實時語音翻譯Skype Translator中文預覽版
    微軟正式宣布在中國市場推出實時語音翻譯工具Skype Translator中文預覽版,使英文和中文普通話之間的實時語音對話成為現實。除了英文和中文普通話的語音翻譯之外,還支持四十多種語言的即時文本翻譯。Windows 8.1用戶在Skype Translator註冊頁面(http://skype.gmw.cn/translator)完成中文版的註冊後,即可試用。微軟希望用戶在使用產品的同時所提供的有價值的反饋,幫助進行產品優化,不斷幫助該技術進行智能化的提升,支持更多種語言的應用。
  • Skype的實時語音翻譯如何做到同傳的精準?
    Skype前幾天推出了實時語音翻譯的預覽版,讓用戶可以跨越語言的障礙暢快交流。今天我們就來聊聊微軟是如何做到這一點的。Skype的翻譯系統主要分三步:首先,把你的實時語音轉換成文字;然後,再把文字翻譯成另一種語言的文字;最後,把文字轉換成語音。其中,識別實時語音並轉換成文字一直是最棘手的部分。圖像處理和語音識別是深度學習發展的兩個主要方向。近幾年來,由於深度學習的進步,語音識別依靠深度神經網絡(deep neural networks)也取得了不少進展。
  • Skype Translator實時語音翻譯技術原理
    微軟在2012年首次演示了英文和中文普通話之間的實時語音翻譯技術原型。經過多年的研究和投入,完成了普通話的語言模型,使Skype Translator的中文語音翻譯在今天變為現實。不僅如此,得益於深層神經網絡與微軟成熟的統計機器翻譯技術的結合,語音識別能力被進一步提高,翻譯結果將更加準確。
  • 免費同傳:新版Skype可實時翻譯語音聊天內容
    《免費同傳:新版Skype可實時翻譯語音聊天內容》文章已經歸檔,不再展示相關內容,編輯建議你查看最新於此相關的內容:女生上課時上網語音聊天 老師請她打電話(圖)近日,一段名為「90
  • 搜狗瀏覽器「智能翻譯」體驗 集語音對話翻譯、AR實時翻譯等於一體
    它集語音對話翻譯、AR實時翻譯、拍照翻譯和全文翻譯於一體,無需額外安裝插件,即可隨時隨地解決中英翻譯難題。   下面我們就一起來看看搜狗瀏覽器的「智能翻譯」究竟有多強大,能不能幫我們解決出國後的翻譯難題呢。
  • 新版Skype將實現語音聊天內容實時翻譯
    本周開始,微軟旗下即時通訊服務Skype將提供全新翻譯工具,可以同時提供語音和文本翻譯服務。此前,微軟CEO薩提亞·納德拉曾在Code大會上展示過這一功能。新版Skype將實現語音聊天內容實時翻譯(圖片來自tecnopasion)    據悉,預覽版Skype Translator可以為英語和西班牙語用戶提供實時翻譯服務,將用戶輸入的語音轉化成文本或翻譯成語音
  • Skype整合實時翻譯:支持中文 限Windows用戶
    北京時間1月14日上午消息,Skype今天宣布,該公司的Skype Translator翻譯工具將直接整合到所有的Windows主應用中。這意味著Windows版Skype用戶不必在單獨安裝額外的應用即可直接翻譯7種對話語言和50種消息語言。Skype Transolator於2014年12月發布了Windows預覽版,這家微軟旗下的公司隨後於2015年6月宣布將向Windows桌面版Skype中整合實時翻譯技術,並於2015年10月逐步落實該計劃。
  • 搜狗推出錄音翻譯筆,連接手機端可實時語音轉文字
    原標題:搜狗推出錄音翻譯筆,連接手機端可實時語音轉文字 >硬體——搜狗錄音翻譯筆,據了解,搜狗錄音翻譯筆集合了搜狗最新的語音識別技術,售價398元,是第一個實現同傳功能的消費級翻譯產品。產品兼具三項功能:錄音轉寫、實時同傳和對話翻譯。 其中,錄音轉寫功能採用高清數字雙麥克陣列和美國Synaptics遠場拾音晶片,支持6米遠場高清錄音。
  • 百度翻譯版本更新 新增日韓語音實時翻譯功能
    近日,百度翻譯發布安卓V4.5版本(iOSV5.4版已上傳審核),不僅新增希臘、荷蘭語種,將翻譯方向擴充至186個,更是進一步完善了語音實時翻譯和拍照翻譯的日、韓、葡等語種支持,宛如旅行中一個隨身攜帶的「小小翻譯家」,輕輕鬆鬆便幫助人們消除了「令人頭痛」的語言障礙。
  • 微軟Skype Translator用深層神經網絡提高機器語音翻譯質量
    2015年4月 9日,Skype正式宣布在中國市場推出Skype Translator實時語音翻譯技術的中文預覽版,英文和中文普通話之間的實時語音翻譯將有望成為現實。融入深層神經網絡微軟亞洲研究院副院長張益肇介紹說,Skype Translator凝聚了微軟在語音識別、自動翻譯和機器學習等科技領域幾十年的研究成果。微軟作為語音翻譯領域的先驅者,在2012年首次演示了英文和中文普通話之間的實時語音翻譯技術原型。
  • 谷歌翻譯推出實時語音轉錄功能
    IT之家3月18日消息 據XDA報導,谷歌於幾個月前開始測試一項名為「持續翻譯(Continuous Translation)」的新功能,該功能於今年1月面向公眾,目前該功能名為「轉錄(Transcribe)」,未來幾天將向所有安卓用戶推送。
  • Skype 實時翻譯上手視頻:不完美但足以改變世界
    IT之家訊 昨天IT之家報導了Skype Translator實時翻譯應用已面向全員開放,用戶可從Win10版或Win8.1版的Windows應用商店下載,不需要註冊即可使用。Skype Translator口語翻譯能力非常不錯,不過其文字翻譯能力要更強些。儘管還不夠完美,但對於義大利語一無所知的我來說,也能夠理解其大意。如果將Skype消息與Windows10中的消息相結合,我便能夠與更多國家的朋友交流,我們的消息會被實時翻譯為對方的語言。Skype Translator雖然還不夠完美,但潛力無限,特別是在實時語音翻譯方面。
  • 免費實時對話翻譯軟體「翻譯君」上線
    異國旅途中,語言溝通始終是困擾遊客的一大難題,找不到路、看不懂菜單、無法與當地人對話……很多外出遊玩的中國遊客都遇到過。針對出境遊中的語言溝通難題,騰訊近日推出了免費實時對話翻譯軟體「翻譯君」,它支持中、英、日、韓多種語言,既可以語音輸入,也可以鍵盤打字,即時、快速而準確,是人們出國旅遊和口語練習的好幫手。
  • 谷歌翻譯推出實時語音翻譯功能 支持翻譯口述內容
    據XDA報導,谷歌於幾個月前開始測試一項名為「持續翻譯(Continuous Translation)」的新功能,該功能於今年1月面向公眾,目前該功能名為「轉錄(Transcribe)」,未來幾天將向所有安卓用戶推送。
  • 靈雲AIIS智聲一體機:提供語音轉寫、實時字幕與翻譯服務
    靈雲智聲一體機是一款針對日常辦公、演講匯報、移動問訊(詢)、便攜會議室等多種語音場景設計的智能辦公產品。靈雲智聲以語音識別技術為核心,結合語義理解、機器翻譯等人工智慧技術,支持中/英多語種識別及互譯,擁有智能語音輸入法,Office語音筆錄插件、字幕、投屏、音視頻轉寫等多種特色功能,為用戶提供語音速錄與字幕展示的全方位解決方案。
  • 再也不用學外語 微軟實時語音翻譯工具Skype Translator預覽版開放
    Skype Translator由內測版進入公眾預覽版階段,向所有用戶開放,在Windows 8.1上可安裝運行,支持包括英語、西班牙語、義大利語、漢語普通話在內四種語言的之間進行實時自動翻譯以及50多種語言的即時通信文本實時翻譯,使用不同語言的人們可以通過該工具進行無障礙交流。
  • 語音翻譯軟體Skype Translator實測:Are you OK亮了
    微軟前不久開放了旗下即時翻譯軟體Skype Translator的試用,但凡是Win8.1或者Win10預覽版的用戶,都可以在商店裡下載到(下載地址)。按照介紹,Skype Translator的語音翻譯目前支持英語、西班牙語、義大利語和漢語普通話。那麼實際效果如何呢?
  • 揭秘:搜狗語音實時翻譯是怎麼煉成的
    今年的網際網路大會現場,搜狗 CEO 王小川將自己的演講內容用搜狗語音實時翻譯成中英對照的形式谷歌和訊飛對機器翻譯與語音翻譯新進展的披露也是如此。近日,搜狗語音交互中心開了一場媒體溝通會,向大家對搜狗語音翻譯技術進行了解析。據搜狗語音交互中心技術負責人陳偉介紹,搜狗實時翻譯技術是搜狗知音引擎技術框架的新能力,按照量化的指標,準確率可以達到90%。此外,搜狗語音識別請求規模現在達到了1.9 億次左右,語料達到了16萬小時,在使用場景方面,主要集中在車載、智能家居和可穿戴設備。
  • Skype 普通話英文實時翻譯資格註冊:教程 + 地址
    IT之家訊 今早,我們為大家報導了微軟Skype實時口譯增加普通話支持,而現在來自微軟亞洲研究院的一則消息正式即將帶我們進入全新時代,自此,英文和中文普通話之間的實時語音對話將成為現實。
  • Skype推出通話實時翻譯:讓所有老外對你說漢語
    在今天的Code Conference大會上,微軟Skype部門副總裁Gurdeep Singh Pall對外演示了Skype的新功能:通話實時翻譯。也就是說,這個實時功能不管是「英轉德」還是「德轉英」都是非常流暢的,而且翻譯準確(至少通話雙方彼此明白對方的意思)。Skype的通話實時翻譯功能來源於微軟研究院,其流程大概是這樣的:軟體通過語音識別接受對方用戶的信息,藉助機器學習來完成翻譯,最後使用文本發聲技術將通話內容「讀」出來。