在高通AI引擎這塊智能「白板」上,手機廠商該如何繪畫?

2020-12-10 深圳熱線

原標題:在高通AI引擎這塊智能「白板」上,手機廠商該如何繪畫?

驍龍865的第五代AIEngine,滿足了我對當下智慧型手機體驗的所有想像。

2020年上半年,5G商用的第二個年頭,手機OEM廠商們正在上演著一場別開生面的花式表演秀。

從三星S20系列打頭陣的1億像素+100倍變焦,到OPPOFindX2系列2K解析度與120Hz高刷新率可同開的屏幕升級;從黑鯊3Pro針對遊戲體驗升級拋出的「三板斧」(升降按鍵、壓感、以及語音控制),再到紅魔5G為增加遊戲樂趣推出的遊戲變聲功能,手機OEM廠商們正使出渾身解數打造著其2020年的專屬個性標籤,向友商「炫耀」其強悍的研發能力。

然而,殊不知,這波「秀肌肉」的操作卻在無形中為以高通為核心的手機SoC晶片廠商們做了一波強勢宣傳。無論是120Hz高刷新率屏幕的硬體支持,還是拍攝視頻超級防抖功能的軟體加成,都少不了手機SoC晶片背後的支持。手機SoC晶片仿佛一個默默無聞的守護者,為手機OEM廠商的各種創新嘗試保駕護航。

▲OPPOFindX2Pro

而隨著智慧型手機的智能化進程的不斷向前、手機攝影和遊戲等細分化市場的不斷發展、以及消費者對於體驗要求的不斷嚴苛,AI技術在晶片中的地位正在逐年攀升。高通等手機SoC晶片廠商正在與手機OEM廠商一道,為消費者搭建逐漸完善的AI生態,讓手機變得真正「智能」。

計算攝影

當下,手機攝影能力已經成為消費者選購手機的關鍵性參考因素。

手機攝影又可稱為計算攝影,即利用數字計算進行攝影。不同於依賴CMOS等器件性能取勝的單眼相機,計算攝影依靠的是SoC晶片廠商強大的算力支持、手機OEM廠商的結構設計和算法優化、以及CMOS廠商的硬體供應,其核心是計算而非攝影。

因此隨著計算攝影行業生態的不斷向前推進,手機攝影的核心支持已經逐漸從CMOS晶片轉移至了手機SoC晶片,2020年上半年旗艦手機帶來的各色攝影功能點便是最好的佐證。手機OEM廠商們正依託於高通驍龍865等SoC晶片強大的圖像處理能力和AI算力為用戶提供更加出色的攝影體驗。

▲三星S20Ultra:支持1億像素、8K視頻拍攝、100倍變焦

據了解,高通驍龍865針對計算攝影的關鍵升級點主要體現在Spectra480ISP和第五代Qualcomm人工智慧引擎AIEngine這兩大方面,而這恰恰是影響計算攝影的兩大關鍵因素。其中OPPOFindX2的AI美顏人像拍攝、視頻超級防抖Pro功能、RealmeX50Pro的智能平滑變焦、以及超級夜景3.0等功能,無不是源自於第五代AIEngine的AI加成。

首先,AI美顏。作為AI應用於手機攝影的代表案例,現如今包括OPPO在內的各大OEM廠商的AI美顏技術已經愈加得爐火純青,而這完全得益於第五代AIEngine下的語義分割功能。簡單來說,語義分割能夠將整個圖像或者視頻分割為各個語義區域,並針對各區域進行針對性優化,比如讓眉毛更加濃密。

▲OPPOFindX2ProAI美顏

語義分割仿佛一個後期修圖大師,讓拍攝和修圖得以完美融合,這不僅能夠實現人像美顏功能,又能令我們在黑暗或者大逆光環境下也能夠拍攝出清晰的照片,因此RealmeX50Pro超級夜景3.0模式同樣受益於此,同時OEM廠商常常宣傳的「逆光也清晰」亦是同理。

其次,防抖拍攝。在利用OPPOFindX2系列進行視頻拍攝時,我們只需打開相機頁面左下角的定製按鈕,便可以實現視頻拍攝的超級防抖功能,而這主要是由於第五代AIEngine能夠進行更好的防抖運算,以進一步通過AI優化視頻拍攝的穩定性。

▲OPPOFindX2Pro視頻超級防抖Pro功能

第三,智能平滑變焦,即第五代AIEngine下的無縫變焦功能。以往我們利用手機拍攝視頻時,總能發現從超廣角到長焦的變換痕跡,那種「跨越」極大影響了視頻的美感。而此次,高通將與虹軟(ArcSoft)合作完全改變傳統的變焦方式,讓變焦如同單眼相機的機械變焦一樣順滑,這便為Realme等廠商得以實現平滑變焦功能奠定了基礎。

此外,基於第五代AIEngine的圖像分割功能,我們還能體驗一種全新的拍攝方式。例如,當我們拍攝風景照片時,圖片分割可以讓風景照片劃為幾部分(比如天空、森林、草地),那麼我們便可以將灰色天空替換為藍色天空,進行個性DIY,讓圖片和視頻創作更富有樂趣。

▲小米10「魔法換天」

遊戲體驗

在當下這個充斥著碎片化時間的時代,手機遊戲已經成為越來越多人打發閒暇時間的主要途徑之一。高通遊戲&XR產品市場總監LeilaniDeleon曾表示,「在智慧型手機的所有使用場景中,遊戲已佔據幾乎一半的比例,且佔據74%的應用商店消費(約每年700億美元)。這是一個非常驚人的數字,且數字還將在未來不斷攀升。」

因此,如何通過軟硬體設計提升遊戲體驗成為了當下手機OEM廠商研發設計的重點方向,這其中除了OEM自身的研發能力外,更多的是依靠手機SoC晶片廠商和遊戲軟體提供商在背後的支持,典型的案例便是紅魔5G手機的智能CPU/GPU調度、以及其遊戲內的變聲功能。

不同於微信聊天和瀏覽網頁等輕應用,遊戲是一項需要CPU和GPU共同協作的重度應用。也正因如此,遊戲體驗的好壞成為了目前諸多評測機構或者媒體衡量手機性能的關鍵參考維度,其重要性相比安兔兔等跑分軟體「有過之而無不及」。

如何合理調用CPU和GPU資源在智慧型手機設計過程中便顯得尤為關鍵。倘若長時間滿載調用,CPU和GPU會由於發熱嚴重等問題而降頻掉幀,引起遊戲卡頓等現象的發生。而這便需要AI這個「潤滑劑」了。

基於第五代AIEngine對CPU和GPU的智能調度,紅魔5G遊戲手機得以在遊戲過程中時刻保持高幀率和高流暢度。在《和平精英》遊戲體驗過程中,我們將紅魔5G遊戲手機畫面設置為HDR高清畫質和極限幀數,測得遊戲平均幀率在59.5fps(目前尚未適配更高幀率),且長時間遊戲幀數無明顯波動,遊戲全過程流暢順滑,無絲毫卡頓。

眾所周知,驍龍865搭載的Kryo585架構CPU主要包含八顆核心:一顆最高主頻為2.84GHz的A77大核心、三顆最高主頻為2.4GHz的A77性能核心、以及四顆最高主頻1.8GHz的A55效率核心。當紅魔5G遊戲手機運行遊戲時,CPU主要調動是除大核心外的七顆核心,其中四顆A55效率核心會一直穩定工作,而A77性能核心會根據遊戲場景的變化而進行相應波動,與大核心相互配合,從而保持遊戲運行流暢穩定。

同時,Adreno650GPU在遊戲過程中也一直處於穩定運行狀態。當遊戲過程中遇到複雜地圖場景時,CPU和GPU核心都會相應升頻以令遊戲流暢穩定運行,而這些無疑都是第五代AIEngine對CPU和GPU的智能調度的直接展現。不僅如此,驍龍865的第五代AIEngine還能實現性能和功耗之間的平衡,通過實現智能CPU/GPU調度,來根據任務所需性能,自動尋找合適的運行頻率和運行核心,最大程度的發揮相應的性能並節省功耗。

此外,紅魔5G遊戲手機還支持遊戲變聲和TouchChoreographer遊戲插幀算法,而這兩者也均是在五代AIEngine的支持下實現的。前者需要AI對於語音進行實時處理,而後者需要實時調節遊戲幀率,讓遊戲保持在接近144Hz的高幀率(紅魔5G屏幕刷新率),當然這需要遊戲軟體提供商支持這項技術。

AI讓手機更智能

除了對於手機攝影能力和遊戲體驗帶來的巨大提升,第五代AIEngine還在智能翻譯、語音轉文字等應用場景上實現了肉眼可見的體驗升級,讓實時變為可能。

翻譯是我們日常生活中經常遇到的場景,然而傳統意義上的「翻譯」大多需要其背後的雲端支持,其擁有一個上傳、識別、翻譯的過程,非實時翻譯,這無疑令翻譯體驗大打折扣,因此實現實時翻譯可以說是翻譯功能走向「智能」的關鍵一步。如今,基於第五代AIEngine,智慧型手機終於能夠實現如同聲傳譯般的實時翻譯,其中最具代表性的莫過於vivoNEX3S最新推出的翻譯機功能。

在實際體驗中,vivoNEX3S雖然還是會出現一些的翻譯細節上的錯誤,但是整體翻譯的完整度和準確性還是能夠令人滿意的。值得一提的是,整個過程都是在終端側完成,無需將其上傳至雲。

▲vivoNEX3S翻譯機

對此,高通方面表示,「為了提升驍龍865的終端側AI性能,我們可謂是三管齊下,包括最優硬體配置、卓越的軟體支持、以及開發者工具。在AI翻譯中,我們和有道進行了大量的合作,它是我們在翻譯用例上的重要夥伴。」

綜上,作為高通驍龍865SoC晶片中的關鍵升級,第五代AIEngine無疑成為了手機OEM廠商突破創新的源動力。第五代AIEngine不僅能夠為攝影愛好者提供媲美單反的攝影體驗,還能夠為遊戲愛好者的流暢遊戲保駕護航,同時特色的遊戲功能點也為遊戲增添了更多樂趣。此外,實時智能翻譯和實時語音轉文字的功能引入讓以前略顯「遲鈍」的智慧型手機變得更加聰明。

事實上,AI技術在智慧型手機上應用的初衷便是為了手機真正「智能」起來,然而這個看似簡單的目標手機實施起來卻並不容易。手機「智能」需要整個手機產業鏈的共同配合,從高通等SoC晶片上遊廠商,到小米Ov等OEM廠商;從谷歌等底層系統架構廠商,再到應用層的軟體開發商,缺一不可。如今,隨著第五代AIEngine的問世,手機「智能」產業生態正在不斷走向成熟。

因此,第五代AIEngine更像是高通為下遊廠商提供一款智能「白板」,繪出怎樣的圖畫則需要包括OEM在內廠商的無盡創造力,以及這些廠商和開發商對於當下市場需求更準確的把握。

2020年才剛剛開始,第五代AIEngine也剛剛開啟其智能人生,至於未來如何,需要整個智慧型手機產業鏈的共同努力。

*本文版權歸「PingWest品玩」公眾號所有,未經授權嚴禁轉載。

來源:搜狐

相關焦點

  • 爭搶著當高通晶片「首發」的手機廠商在玩些什麼?
    打開APP 爭搶著當高通晶片「首發」的手機廠商在玩些什麼? 作為全新一代的高通旗艦處理器,在性能方面特別是AI運算方面有了跨越式的提升,也就意味著這款產品將更加適合智慧型手機的機器學習,為消費者提供更好的使用體驗。我們並非來介紹這款晶片,而是說說這款晶片發布之後手機廠商之間發生的事情。 以小米為中心聊一聊,那些爭搶著當「首發」的手機廠商在玩些什麼。
  • 高通突然高調宣布驍龍855+,性能更強支持5G,一眾手機廠商打Call
    隨著智慧型手機的普及,都知道一塊好的處理器平臺,能為智慧型手機帶來難以想像的提升。在高端市場中,是由蘋果A系列、華為麒麟900系列、三星Exynos系列以及高通驍龍800系列的處理器霸佔著,前三者並不對外銷售,所以現在很多手機廠商所使用的處理器則是高通家的。
  • 騰訊遊戲語音GVoice攜手vivo利用第五代高通AI引擎率先推出遊戲...
    (2)一般情況下,手機上的語音算法往往會運行在手機的CPU上,這樣會大量消耗CPU內存等處理計算資源。而遊戲本身已經佔用大量計算資源,此時需要遊戲語音利用最小的性能消耗,實現最佳的語音體驗。為滿足遊戲每日海量的對局交流,降低性能消耗的同時進一步提升玩家的語音體驗,騰訊遊戲語音GVoice聯合全球智慧型手機品牌vivo、高通公司展開深層次技術優化,利用第五代高通AI引擎聯合推出遊戲語音處理技術,旨在從源頭提升語音體驗。11月2日,騰訊互娛研發效能部副總經理李從兵,及vivo軟體平臺部總經理楊進寧於深圳市舉行了遊戲語音技術合作籤約儀式。
  • 高通驍龍888發布背後,是ARM的野心和手機產業的狂歡
    要知道,在競爭如此激烈的智慧型手機市場,一個小小的升級都可能會讓你領先競爭對手一大步,何況是SoC這樣重要的核心部件。這也造成了驍龍888發布後,普天同慶的「過年」景象。 高通讓中國廠商們等的太久了。
  • 高通驍龍845全解析:AI is Changing Everything
    今年是高通推出驍龍處理器的第十個年頭,作為當前智慧型手機最重要的晶片廠商,除了啟用自主晶片的蘋果外,每一家主流廠商旗艦都會採用驍龍處理器,正因如此,每一年高通的進步,往往都能一定程度反映在來年旗艦的具體功能中。
  • 小米支持的智慧型手機品牌手機詳細介紹了高通驍龍888
    高通公司最近為高端智慧型手機推出其Snapdragon 888處理器時,小米迅速宣布已開始在該SoC隨附的小米Mi 11智慧型手機上工作。後來,Redmi的盧維冰還宣布,手機可以與Snapdragon 888處理器一起使用。現在,第三手的詳細信息已由Tipster Digital Chat Station洩露。
  • 手機處理器市場收入排名:高通40%,海思20%,蘋果15%!
    就如今的智慧型手機市場,三星、蘋果、華為這三大智慧型手機廠商,都具有自研晶片的實力。比如蘋果的iPhone系列,就搭載了蘋果自家研發的A系列處理器。當然,對於小米、OPPO、vivo、魅族、聯想、努比亞等智慧型手機廠商,則需要高通和聯發科提供的手機處理器。在此基礎上,就高通這家晶片供應商,得以在全球手機處理器市場長期保持領先。
  • 現在還沒和高通驍龍855 plus 說「hello」的手機廠商,都怎麼樣了?
    高通這次命名和之前有所不同,參考高通驍龍820和821,這次直接增加了一個後綴「plus」,給我的第一感覺就是:廠商在宣傳上更硬氣一些了。和手機產品相似的命名,在宣傳的時候「我們這款產品搭載了高通驍龍855 plus處理器」,衝擊力比搭載高通驍龍856(假設有)強得多。
  • 高通加大5G應用力度:發布手機晶片,還推出機器人和無人機5G系統
    白交 發自 凹非寺量子位 報導 | 公眾號 QbitAI5G不僅可以用在手機上,還可以用在機器人和無人機上。今天,高通推出了一個可用於機器人和無人機的5G系統——RB5。而就在昨天,剛發布又一款手機晶片驍龍690。RB5系統是一套集硬體、軟體和開放工具於一體的平臺套件,可以為製造商創造出下一代高性能、低功耗機器人和無人機。
  • 高通公司全面的手機開發平臺參考設計介紹
    在當前的手機市場上,Android智慧型手機的市場佔有率持續上升,而這其中,中檔及大眾市場智慧型手機被業界關注。數據顯示,從2009年到2014年,中檔及入門級智慧型手機的出貨量將增加9倍之多。
  • Counterpoint:三季度聯發科首次成為全球最大智慧型手機晶片廠商
    IT之家 12 月 24 日消息 據技術市場研究公司 Counterpoint 估計,2020 年第三季度,聯發科成為全球最大的智慧型手機晶片組廠商,市場份額達 31%,因為本季度智慧型手機銷量回升。聯發科在 100-250 美元價格區間智慧型手機的強勁表現,以及在中國和印度等關鍵地區的增長,幫助其成為最大的智慧型手機晶片組廠商。
  • 微軟開放多項AI技術,小娜與Alexa「合體」丨AI Daily
    1、7 月起,Drive.ai 將在德州提供無人計程車服務由吳恩達擔任董事的無人車初創公司 Drive.ai 昨日宣布: 2018 年 7 月起將在德克薩斯州弗裡斯科(Firsco)提供無人計程車服務。Drive.ai 將與弗裡斯科運輸管理協會合作,共同運營該項目。
  • 驍龍865帶來第五代AI Engine後 手機會如何更Smart?
    智慧型手機,誕生之初,重要的點就在智能上。早期的智能,大多只是要讓手機這種移動終端可以提供類似PC的功能。然而近年來,因為AI技術的加持,在很多特別的場景下,智慧型手機功能早已超越了PC產品。
  • 從智能語音助手到智慧識屏,vivo 如何將 NEX 的 Jovi 打造成手機上...
    目前智慧型手機中最常見的設計是電源鍵、音量加、音量減三大「金剛」,除此之外,一些手機廠商也嘗試增加額外的按鍵讓用戶更快捷地完成部分操作,比如 iPhone 上的靜音按鍵、一加手機上的三段式模式按鍵、錘子手機的「閃念膠囊」鍵、索尼手機上的實體拍照鍵、三星手機的 Bixby 按鍵。
  • 智能翻譯機前景廣 手機廠商也來涉足
    雙擊耳機開始錄音,再雙擊結束,實時翻譯結果能夠自動從手機端播放……近日,在OPPO新款旗艦機型Find X發布會現場,具備實時翻譯功能的耳機同步亮相,標誌著這家國產手機廠商也開始踏足人工智慧翻譯領域。
  • Strategy Analytic:2019 年智慧型手機應用處理器出貨量下跌 11%
    該報告指出,2019年全球智慧型手機應用處理器(AP)市場收益份額位居前五的為高通、蘋果、海思、三星LSI和聯發科。高通以36%的收益份額保持第一,蘋果以24%緊隨其後,海思以14%排名第三。具有設備上AI引擎的智慧型手機應用處理器佔2019年智慧型手機應用處理器總出貨量的近51%,高於2018年的約31%。
  • 夏普新款手機發布:首發高通驍龍690處理器!
    一具體來說,在水滴屏的基礎上,夏普Aquos Zero 5G Basic這款智慧型手機的屏幕刷新率達到了240Hz,這無疑超過了絕大部分智慧型手機。在2020年的智慧型手機市場,華為、小米、OPPO、vivo等智慧型手機廠商發布的新機,很多就應用了90Hz或者120Hz刷新率的屏幕,也即幾乎沒有240Hz刷新率加持的機型。
  • 全球十大IC設計廠商排名出爐,華為未進入前十,高通排名第二!
    近日拓璞產業研究院公布了全球前十大IC設計廠商榜單,榜單顯示博通位居全球第一,上個季度獲得了40億美元的營收;博通生產的有線數據機和無線數據機非常優秀,一些高端的電腦採用的便是博通的解決方案,蘋果的MacBook也採用博通的解決方案。
  • 5G不僅可以用在手機上,還可以用在機器人和無人機上
    白交 發自 凹非寺量子位 報導 | 公眾號 QbitAI5G不僅可以用在手機上,還可以用在機器人和無人機上。今天,高通推出了一個可用於機器人和無人機的5G系統——RB5。
  • 手機上的AI技術有什麼用?
    手機中加入AI技術,也是未來技術發展的趨勢之一,只不過現在的作用並不是那麼大而已,可以看作是手機廠商在民用級AI技術的嘗試。說到智慧型手機,國內技術實力較強的當屬華為手機。華為麒麟970處理器創新的加入了NPU神經網絡單元,開啟了手機AI時代。隨著技術的不斷提升,華為基於ARM架構,自研出了達文西NPU架構。