訂閱
糾錯(cuò)
加入自媒體

2020 OPPO 開(kāi)發(fā)者大會(huì)召開(kāi),全新 AIUnit 與 FusionUnit 開(kāi)放引擎亮相

2020-09-27 14:30
來(lái)源: 粵訊

9 月 24 日,2020 OPPO 開(kāi)發(fā)者大會(huì)正式召開(kāi),全新 ColorOS 11 正式發(fā)布,秉承「創(chuàng)造無(wú)邊界」的理念,為用戶(hù)帶來(lái)更加豐富精彩、多端互融、安全便捷的全場(chǎng)景體驗(yàn)。大會(huì)中,OPPO ColorOS 設(shè)計(jì)總監(jiān)陳希宣布,OPPO 系統(tǒng)能力開(kāi)放引擎進(jìn)一步擴(kuò)大到七個(gè),增加 AIUnit 與 FusionUnit,幫助開(kāi)發(fā)者在移動(dòng)端部署 AI 算法,同時(shí)實(shí)現(xiàn)手機(jī)與其他設(shè)備快速、穩(wěn)定、低延時(shí)協(xié)同,在智能化、多設(shè)備、多場(chǎng)景等方面,將 OPPO 的系統(tǒng)能力全面開(kāi)放,與開(kāi)發(fā)者一同帶給用戶(hù)更好的創(chuàng)新體驗(yàn)。

image.png

在 2020 OPPO 開(kāi)發(fā)者大會(huì)技術(shù)能力開(kāi)放專(zhuān)場(chǎng),OPPO 進(jìn)一步向開(kāi)發(fā)者講述了AIUnit 與 FusionUnit 兩大全新系統(tǒng)引擎的能力,同時(shí)全新升級(jí)的 Hyper Boost、CameraUnit 與 MediaUnit 也正式與開(kāi)發(fā)者見(jiàn)面。

AIUnit應(yīng)用無(wú)限可能,AI 技術(shù)全面助力開(kāi)發(fā)者

為了給應(yīng)用開(kāi)發(fā)者和從事AI 算法開(kāi)發(fā)的研究人員提供更好的支持,OPPO 進(jìn)行了 AI 能力的開(kāi)放。目前,OPPO AI 開(kāi)放能力主要包含 AIUnit 算法引擎和 AI Boost 模型推理加速框架。通過(guò)AIUnit 來(lái)幫助應(yīng)用開(kāi)發(fā)者更好地開(kāi)發(fā) AI 功能,而 AI Boost 可以幫助開(kāi)發(fā)者部署算法到移動(dòng)端。

image.png

AIUnit 引擎能力提供了視覺(jué)算法、視頻算法、音頻算法、感知算法四大方向的能力建設(shè),能夠向應(yīng)用開(kāi)發(fā)者提供人工智能算法 API,使應(yīng)用開(kāi)發(fā)者高效地編寫(xiě)用于在移動(dòng)設(shè)備上運(yùn)行的 AI 應(yīng)用程序。目前,AIUnit 已經(jīng)應(yīng)用于 ColorOS 系統(tǒng)相冊(cè)、視頻編輯、音頻及感知等相關(guān)應(yīng)用中,如系統(tǒng)相冊(cè)的老照片修復(fù)、人臉聚類(lèi)能力、視頻增強(qiáng)能力、鈴聲編輯能力等。

image.png

AI Boost 作為面向移動(dòng)端的 AI 模型加速框架,借助 OPPO 終端強(qiáng)大的硬件計(jì)算資源,可有效幫助 AI 算法研究者將算法模型快速部署到 OPPO 終端設(shè)備上,最大限度地提供端側(cè) AI 加速能力。在 ETH 瑞士蘇黎世大學(xué) AI Benchmark 的評(píng)測(cè)平臺(tái)上,借助 AI Boost,平臺(tái)效能可提升 23-33%;在高通和 MTK 同芯片平臺(tái)的產(chǎn)品中均優(yōu)化達(dá)到了業(yè)界最佳表現(xiàn),對(duì)標(biāo)準(zhǔn)的模型效能提升了 30% 左右。

FusionUnit 智能互聯(lián)能力,開(kāi)啟多端融合新場(chǎng)景

隨著科技的飛速進(jìn)步,用戶(hù)身邊的智能設(shè)備日益豐富,但繁雜的設(shè)備也需要用戶(hù)花費(fèi)更多的時(shí)間去了解、配置以及使用。針對(duì)用戶(hù)在多設(shè)備使用的場(chǎng)景下,如何能夠優(yōu)化這些設(shè)備的管理、協(xié)同和聯(lián)動(dòng),F(xiàn)usionUnit提供了一整套的解決方案。

image.png

FusionUnit 應(yīng)用重定向技術(shù)讓用戶(hù)在系統(tǒng)或者應(yīng)用界面中,可以將當(dāng)前屏幕或某個(gè)應(yīng)用界面共享給周邊或遠(yuǎn)程好友,實(shí)現(xiàn)多人同看視頻或好友觀戰(zhàn)等功能。同時(shí),用戶(hù)還可以為接收方賦予控制權(quán)限,允許對(duì)方使用此應(yīng)用,并且在此過(guò)程中雙方手機(jī)均可以離開(kāi)當(dāng)前頁(yè)面。在支持設(shè)備上,該功能未來(lái)將會(huì)覆蓋手機(jī)、PC、電視等終端。

image.png

通過(guò) FusionUnit 數(shù)據(jù)融合能力,多端設(shè)備可以實(shí)現(xiàn)便捷的應(yīng)用級(jí)數(shù)據(jù)共享。例如,通過(guò)手機(jī)上的相冊(cè)應(yīng)用可以訪問(wèn)同 Wi-Fi 下其它所屬設(shè)備上的照片文件,并且提供統(tǒng)一檢索、傳輸能力,實(shí)現(xiàn)近場(chǎng)多設(shè)備數(shù)據(jù)一致,讓用戶(hù)可從任意一端進(jìn)行統(tǒng)一資源管理。開(kāi)發(fā)者借助FusionUnit,即可實(shí)現(xiàn)應(yīng)用跨端接續(xù)的能力,保證用戶(hù)在多端使用時(shí)的無(wú)縫感。

同時(shí) FusionUnit 支持跨計(jì)算資源、跨設(shè)備算力的增強(qiáng),可同時(shí)調(diào)動(dòng)起CPU / GPU / NPU / DSP 等計(jì)算單元進(jìn)行運(yùn)算加速。在 AI 相關(guān)的實(shí)時(shí)視頻流解析、離線視頻處理等任務(wù)中,可大幅提高 AI 計(jì)算能力和應(yīng)用幀率,實(shí)現(xiàn)端內(nèi)多芯片計(jì)算協(xié)同。

Hyper Boost系統(tǒng)加速引擎,保障應(yīng)用高速流暢運(yùn)行

Hyper Boost 致力于為用戶(hù)帶來(lái)流暢順滑的使用體驗(yàn),在此次大會(huì)中,Hyper Boost 帶來(lái)更多技術(shù)革新,增加了GPU加速、DDR加速、大核綁定、溫控回調(diào)、4D振感等能力,讓開(kāi)發(fā)者在應(yīng)用優(yōu)化過(guò)程中能夠根據(jù)具體應(yīng)用場(chǎng)景來(lái)選擇對(duì)應(yīng)的能力。

目前,微信、QQ、淘寶、抖音、王者榮耀等頭部應(yīng)用和游戲均已接入 Hyper Boost系統(tǒng)加速引擎,國(guó)內(nèi)市場(chǎng)日均調(diào)用次數(shù)超過(guò) 2 億次。除此之外,Hyper Boost也積極走向海外,海外的開(kāi)發(fā)者可非常簡(jiǎn)單地獲取該能力,助力應(yīng)用的流暢運(yùn)行。

image.png

在開(kāi)發(fā)適配方面,Hyper Boost 已由系統(tǒng)組件變?yōu)閼?yīng)用組件,讓廣大開(kāi)發(fā)者升級(jí)調(diào)優(yōu)更便捷。同時(shí),Hyper Boost 還引入了云端配置管控功能,僅需在云端進(jìn)行輕量化的適配工作,開(kāi)發(fā)者便可以完成接入工作。

image.png

CameraUnit 與 MediaUnit,全面開(kāi)放系統(tǒng)級(jí)影像與多媒體能力

CameraUnit作為OPPO影像能力的開(kāi)放接口,可消除系統(tǒng)相機(jī)能力與三方應(yīng)用之間的隔閡,將OPPO相機(jī)的強(qiáng)大能力提供給三方應(yīng)用使用。通過(guò)簡(jiǎn)單的API接口調(diào)用,三方應(yīng)用可實(shí)現(xiàn)雙攝同開(kāi)、視頻HDR、超級(jí)防抖、超廣角、超級(jí)夜景等特性,實(shí)現(xiàn)與OPPO相機(jī)同樣的拍攝效果,為用戶(hù)帶來(lái)豐富的相機(jī)能力以及優(yōu)質(zhì)的拍攝體驗(yàn)。

當(dāng)前抖音、快手等三方應(yīng)用已經(jīng)接入了CameraUnit的超級(jí)防抖和超廣角能力,接入后可利用系統(tǒng)原生的多源傳感器信息融合和防抖場(chǎng)景智能分析,讓用戶(hù)使用三方應(yīng)用拍攝視頻時(shí)也實(shí)現(xiàn)超級(jí)防抖,在戶(hù)外場(chǎng)景下拍出取景更大、內(nèi)容更多、降噪明顯 的視頻成片,為5G時(shí)代年輕用戶(hù)提供更多視頻創(chuàng)作空間。

除此之外,OPPO智能相冊(cè)支持用戶(hù)在使用時(shí)根據(jù)時(shí)間、地點(diǎn)、人物、模糊詞等標(biāo)簽,快速找到想要的圖片,當(dāng)前智能相冊(cè)能力可覆蓋超過(guò)80個(gè)場(chǎng)景。同時(shí),相冊(cè)的智能選圖推薦服務(wù)可幫助用戶(hù)根據(jù)時(shí)間節(jié)日、地點(diǎn)圖集、精彩回憶等類(lèi)別進(jìn)行分類(lèi),大大提升管理效率。

值得一提的是,包含這么多豐富功能的CameraUnit僅20KB大小,三方應(yīng)用只需要簡(jiǎn)單配置對(duì)應(yīng)的能力參數(shù)即可完成接入。

image.png

MediaUnit 支持將硬件級(jí)的低時(shí)延耳返能力開(kāi)放給開(kāi)發(fā)者,讓用戶(hù)可以自主調(diào)節(jié)音色、節(jié)奏、音準(zhǔn)等各種參數(shù),獲得聽(tīng)唱同步的優(yōu)質(zhì) K 歌體驗(yàn)。此外,針對(duì)直播、視頻通話等場(chǎng)景,由于人們關(guān)注的往往是人的臉部表情和手部動(dòng)作,通過(guò)提高這些區(qū)域的清晰度,可以有效的提高用戶(hù)主觀觀看效果。憑借MediaUnit開(kāi)放的ROI編碼功能,開(kāi)發(fā)者可以控制視頻重點(diǎn)關(guān)注區(qū)域的碼率分配情況, 弱化背景信息,在節(jié)約帶寬的同時(shí)提升視頻整體感官體驗(yàn)。

image.png

OPPO 一直致力于和全球開(kāi)發(fā)者及廠商合作,促進(jìn)軟硬件生態(tài)融合,提升消費(fèi)者使用體驗(yàn)。截至目前,ColorOS 已開(kāi)放系統(tǒng)能力數(shù)達(dá)到 27 個(gè),擁有超過(guò) 100 家三方合作伙伴,日均接口調(diào)用次數(shù)達(dá)到 3 億。未來(lái),OPPO 也將不斷提升系統(tǒng)輕快流暢的使用體驗(yàn),同時(shí)持續(xù)開(kāi)放系統(tǒng)能力,與更多開(kāi)發(fā)者和用戶(hù)共享技術(shù)開(kāi)放帶來(lái)的便利。

聲明: 本文系OFweek根據(jù)授權(quán)轉(zhuǎn)載自其它媒體或授權(quán)刊載,目的在于信息傳遞,并不代表本站贊同其觀點(diǎn)和對(duì)其真實(shí)性負(fù)責(zé),如有新聞稿件和圖片作品的內(nèi)容、版權(quán)以及其它問(wèn)題的,請(qǐng)聯(lián)系我們。

發(fā)表評(píng)論

0條評(píng)論,0人參與

請(qǐng)輸入評(píng)論內(nèi)容...

請(qǐng)輸入評(píng)論/評(píng)論長(zhǎng)度6~500個(gè)字

您提交的評(píng)論過(guò)于頻繁,請(qǐng)輸入驗(yàn)證碼繼續(xù)

  • 看不清,點(diǎn)擊換一張  刷新

暫無(wú)評(píng)論

暫無(wú)評(píng)論

人工智能 獵頭職位 更多
掃碼關(guān)注公眾號(hào)
OFweek人工智能網(wǎng)
獲取更多精彩內(nèi)容
文章糾錯(cuò)
x
*文字標(biāo)題:
*糾錯(cuò)內(nèi)容:
聯(lián)系郵箱:
*驗(yàn) 證 碼:

粵公網(wǎng)安備 44030502002758號(hào)