愛鋒貝

標題: 如何看待 OPPO 發(fā)布自研芯片馬里亞納 MariSilicon X？將會 ... [打印本頁]
作者: 數(shù)碼桃桃    時間: 2022-1-12 03:26
標題: 如何看待 OPPO 發(fā)布自研芯片馬里亞納 MariSilicon X？將會 ...
OPPO INNO DAY期間，OPPO正式發(fā)布首款自研NPU芯片——馬里亞納?? MariSilicon X。作為首個專為影像而生的NPU芯片，馬里亞納 MariSilicon X基于面向未來AI時代的DSA新黃金架構理念，通過自主創(chuàng)新的IP設計以及6nm先進制程，帶來空前強大的實時AI計算能效，領先行業(yè)的Ultra HDR能力，無損的實時RAW計算，以及最大化傳感器能力的RGBW Pro，以芯片級技術突破成就計算影像的新標準。

(, 下載次數(shù): 11)
和小米以及vivo一樣，OPPO選擇將ISP芯片作為自己的上手試煉的芯片。不過和之前小米的澎湃C1以及vivo的V1比，OPPO這顆馬里亞納Mari Silicon X這顆芯片，在我看來是目前MOV三家的自研“ISP”里，屬于最成熟的那一個，沒想到OPPO可以做到這個程度。
為什么三家都選擇從影像入手。其一是做NPU、ISP的難度遠低于做GPU和CPU，因為這個東西結構較為簡單、功能較為明確、也不涉及到復雜的軟件適配。另一方面，當今安卓手機市場同質化嚴重，而拍照/攝像正好是現(xiàn)在為數(shù)不多能做差異化的地方了。所以我們看到OPPO vivo以及小米都朝著這塊去做也不奇怪了。

(, 下載次數(shù): 12)

(, 下載次數(shù): 10)

我一直在說，在后摩爾定律時代，提升性能的一個方式就是設計專用化電路。無論是軟件還是硬件，越是通用化那么就性能提升越為困難。專用化的電路在特定的場景下，在性能、能耗比等方面都有絕對優(yōu)勢。例如GPU相對于CPU就是犧牲一定通用性后，獲得了數(shù)量級的計算力提升。 NPU相對于GPU同理，而ISP版NPU相對于通用NPU也是同理。

(, 下載次數(shù): 11)

(, 下載次數(shù): 13)
MariSilicon X這顆芯片最終提供了72TOPs的INT4理論性能，以及18TOPs的INT8理論性能，根據(jù)OPPO官方的描述，這個理論性能高于Apple A15的15.8TOPs的算力。
這個數(shù)據(jù)我去看了蘋果官方的PPT，數(shù)值是沒有問題，但是這個對比不一定有意義。正如OPPO所說，馬里亞納是一個影像專用NPU，而蘋果沒有聲稱這個NPU是一個影像專用NPU，專用對比通用本來就不公平。

(, 下載次數(shù): 11)
但是也不要說OPPO的對比不厚道，因為蘋果官網(wǎng)上，關于NPU的描述也全都是影像相關的，大概率其實也是一個影像NPU。

(, 下載次數(shù): 11)
無論如何，MariSilicon X的硬件完成度已經(jīng)很高了，個人經(jīng)驗判斷即便沒有真的追上Apple那個NPU，但相差的不是很多了，至少在影響層面。而且這個芯片很有趣，還有獨立的DDR帶寬，大概率也有自己的內(nèi)存吧，可以做更加復雜的任務。影響數(shù)據(jù)的帶寬占用是比較大的，特別是如果處理RAW域未壓縮數(shù)據(jù)，如果來回和SoC溝通或者借SoC訪問內(nèi)存，那么實用性是比較堪憂的。

再然后，我們聊聊為影像適配的功能吧，MariSilicon X最高支持20bit的影響處理，這個比之前高通驍龍8 Gen 1吹噓的18bit多2bit，也就是OPPO宣稱的高了4倍的原因。不過這個東西有多少用不大清楚，畢竟手機CMOS的原始數(shù)據(jù)沒有那么高bit數(shù)，而后期各種多幀疊加后也很難用到這個么多，反正數(shù)據(jù)歸數(shù)據(jù)，最后還是看最終效果吧。

(, 下載次數(shù): 13)
擁有馬里亞納 MariSilicon X之后，OPPO第一次完成了影像垂直鏈路整合，RGBW Pro模式就是最好的例證。通過雙通路設計，馬里亞納MariSilicon X首次實現(xiàn)了對RGB和W像素的分隔處理，最大化利用每一種像素特性，釋放出RGBW陣列的全部潛力。馬里亞納 MariSilicon X的RGBW Pro模式帶來了8.6dB的信噪比提升，以及1.7倍的解析力提升，在傳感器尺寸規(guī)格都沒有變化的前提下實現(xiàn)大幅的影像效果增強。
此外，OPPO之前有一個很Fancy的RGBW排列，大體上把Quad Bayer 的一半像素替換成W像素。假設還是總計48MP的像素，那么這個RGBW的傳感器可以輸出一個12MP（2合1）的Bayer信號，以及一個12MP（2合1）的黑白信號，理論上分辨率對比12MP（4合1）是不低的甚至因為黑白信號可能還會高一些，也不多影響猜色，再加上理論翻倍的進光量，算是我認為最完美的其中一種非Bayer排列了。這種排列相對來說，最大的問題就是Bayer彩色部分的信噪比相當于面積砍半的情況，最終表現(xiàn)就很依賴與和黑白信號的融合了。 MariSilicon X從硬件上提供適配讓我覺得很是驚喜，感覺這個RGBW的最終產(chǎn)物應該會很是驚艷。

(, 下載次數(shù): 13)
OPPO在Find X3上開始的10bit全鏈路衍生到了RGBW全鏈路，是一個不錯的趨勢。不能簡單的只做一個硬件，而是要做整一套，這樣才能真正釋放全部潛力，并且形成硬件壁壘。

(, 下載次數(shù): 13)
最后總結下，為什么我說 MariSilicon X的完成度在MOV里最高，因為 MariSilicon X的算力、架構、工藝、軟件配合上都是明顯高于之前的幾家的。特別是OPPO一上來就下血本用了高成本的6nm（vivo V1 12nm），看起來OPPO真不只是隨便做做占個名分，而是真的投入了很多去做。

(, 下載次數(shù): 10)
換個角度去看，其實你對比下之前小米澎湃C1以及vivo V1所披露的硬件參數(shù)，MariSilicon X明顯更為自信，展現(xiàn)了更多的細節(jié)。小米澎湃C1可能就是個完全練手的水平，vivo V1做到了及格可用，而OPPO MariSilicon X看起來已經(jīng)趨于優(yōu)秀了。
本文純粹自己想寫的，不是什么合作任務，沒有充值~~事實上，我對MOV都做自己芯片很是悲觀（以后有空聊），不過不妨礙今天看到OPPO MariSilicon X?很是激動。

-----------------------------
作者: 外星人    時間: 2022-1-12 04:30
OPPO INNO DAY期間，OPPO正式發(fā)布首款自研NPU芯片——馬里亞納?? MariSilicon X。作為首個專為影像而生的NPU芯片，馬里亞納 MariSilicon X基于面向未來AI時代的DSA新黃金架構理念，通過自主創(chuàng)新的IP設計以及6nm先進制程，帶來空前強大的實時AI計算能效，領先行業(yè)的Ultra HDR能力，無損的實時RAW計算，以及最大化傳感器能力的RGBW Pro，以芯片級技術突破成就計算影像的新標準。

(, 下載次數(shù): 16)
和小米以及vivo一樣，OPPO選擇將ISP芯片作為自己的上手試煉的芯片。不過和之前小米的澎湃C1以及vivo的V1比，OPPO這顆馬里亞納Mari Silicon X這顆芯片，在我看來是目前MOV三家的自研“ISP”里，屬于最成熟的那一個，沒想到OPPO可以做到這個程度。
為什么三家都選擇從影像入手。其一是做NPU、ISP的難度遠低于做GPU和CPU，因為這個東西結構較為簡單、功能較為明確、也不涉及到復雜的軟件適配。另一方面，當今安卓手機市場同質化嚴重，而拍照/攝像正好是現(xiàn)在為數(shù)不多能做差異化的地方了。所以我們看到OPPO vivo以及小米都朝著這塊去做也不奇怪了。

(, 下載次數(shù): 13)

(, 下載次數(shù): 15)

我一直在說，在后摩爾定律時代，提升性能的一個方式就是設計專用化電路。無論是軟件還是硬件，越是通用化那么就性能提升越為困難。專用化的電路在特定的場景下，在性能、能耗比等方面都有絕對優(yōu)勢。例如GPU相對于CPU就是犧牲一定通用性后，獲得了數(shù)量級的計算力提升。 NPU相對于GPU同理，而ISP版NPU相對于通用NPU也是同理。

(, 下載次數(shù): 14)

(, 下載次數(shù): 12)
MariSilicon X這顆芯片最終提供了72TOPs的INT4理論性能，以及18TOPs的INT8理論性能，根據(jù)OPPO官方的描述，這個理論性能高于Apple A15的15.8TOPs的算力。
這個數(shù)據(jù)我去看了蘋果官方的PPT，數(shù)值是沒有問題，但是這個對比不一定有意義。正如OPPO所說，馬里亞納是一個影像專用NPU，而蘋果沒有聲稱這個NPU是一個影像專用NPU，專用對比通用本來就不公平。

(, 下載次數(shù): 15)
但是也不要說OPPO的對比不厚道，因為蘋果官網(wǎng)上，關于NPU的描述也全都是影像相關的，大概率其實也是一個影像NPU。

(, 下載次數(shù): 11)
無論如何，MariSilicon X的硬件完成度已經(jīng)很高了，個人經(jīng)驗判斷即便沒有真的追上Apple那個NPU，但相差的不是很多了，至少在影響層面。而且這個芯片很有趣，還有獨立的DDR帶寬，大概率也有自己的內(nèi)存吧，可以做更加復雜的任務。影響數(shù)據(jù)的帶寬占用是比較大的，特別是如果處理RAW域未壓縮數(shù)據(jù)，如果來回和SoC溝通或者借SoC訪問內(nèi)存，那么實用性是比較堪憂的。

再然后，我們聊聊為影像適配的功能吧，MariSilicon X最高支持20bit的影響處理，這個比之前高通驍龍8 Gen 1吹噓的18bit多2bit，也就是OPPO宣稱的高了4倍的原因。不過這個東西有多少用不大清楚，畢竟手機CMOS的原始數(shù)據(jù)沒有那么高bit數(shù)，而后期各種多幀疊加后也很難用到這個么多，反正數(shù)據(jù)歸數(shù)據(jù)，最后還是看最終效果吧。

(, 下載次數(shù): 13)
擁有馬里亞納 MariSilicon X之后，OPPO第一次完成了影像垂直鏈路整合，RGBW Pro模式就是最好的例證。通過雙通路設計，馬里亞納MariSilicon X首次實現(xiàn)了對RGB和W像素的分隔處理，最大化利用每一種像素特性，釋放出RGBW陣列的全部潛力。馬里亞納 MariSilicon X的RGBW Pro模式帶來了8.6dB的信噪比提升，以及1.7倍的解析力提升，在傳感器尺寸規(guī)格都沒有變化的前提下實現(xiàn)大幅的影像效果增強。
此外，OPPO之前有一個很Fancy的RGBW排列，大體上把Quad Bayer 的一半像素替換成W像素。假設還是總計48MP的像素，那么這個RGBW的傳感器可以輸出一個12MP（2合1）的Bayer信號，以及一個12MP（2合1）的黑白信號，理論上分辨率對比12MP（4合1）是不低的甚至因為黑白信號可能還會高一些，也不多影響猜色，再加上理論翻倍的進光量，算是我認為最完美的其中一種非Bayer排列了。這種排列相對來說，最大的問題就是Bayer彩色部分的信噪比相當于面積砍半的情況，最終表現(xiàn)就很依賴與和黑白信號的融合了。 MariSilicon X從硬件上提供適配讓我覺得很是驚喜，感覺這個RGBW的最終產(chǎn)物應該會很是驚艷。

(, 下載次數(shù): 12)
OPPO在Find X3上開始的10bit全鏈路衍生到了RGBW全鏈路，是一個不錯的趨勢。不能簡單的只做一個硬件，而是要做整一套，這樣才能真正釋放全部潛力，并且形成硬件壁壘。


(, 下載次數(shù): 17)
最后總結下，為什么我說 MariSilicon X的完成度在MOV里最高，因為 MariSilicon X的算力、架構、工藝、軟件配合上都是明顯高于之前的幾家的。特別是OPPO一上來就下血本用了高成本的6nm（vivo V1 12nm），看起來OPPO真不只是隨便做做占個名分，而是真的投入了很多去做。

(, 下載次數(shù): 11)
換個角度去看，其實你對比下之前小米澎湃C1以及vivo V1所披露的硬件參數(shù)，MariSilicon X明顯更為自信，展現(xiàn)了更多的細節(jié)。小米澎湃C1可能就是個完全練手的水平，vivo V1做到了及格可用，而OPPO MariSilicon X看起來已經(jīng)趨于優(yōu)秀了。
本文純粹自己想寫的，不是什么合作任務，沒有充值~~事實上，我對MOV都做自己芯片很是悲觀（以后有空聊），不過不妨礙今天看到OPPO MariSilicon X?很是激動。
<a data-draft-node="block" data-draft-type="mcn-link-card" data-mcn-id="1454202195814637568">
作者: 錯80    時間: 2022-1-12 06:29
關于OPPO馬里亞納自研NPU芯片，這里有你想知道的

正如之前預熱所說的，OPPO如期在2021未來科技大會上帶來了自家首個影像專用NPU——馬里亞納MariSilicon X。這個是OPPO于2019年成立自研芯片團隊后，交出的首份答卷。
馬里亞納MariSilicon X芯片的推出對于OPPO是貫徹其影像之路的重要一步，也可能為未來OPPO手機影像樹立新的標桿。

(, 下載次數(shù): 12)
從2016年OPPO與索尼聯(lián)合開發(fā)IMX398傳感器，到今年雙方最新的大底傳感器IMX766，與此同時，OPPO于2017年成立了單獨的理想人像實驗室部門，專注于人像攝影。
OPPO已經(jīng)實現(xiàn)了傳感器和算法上的突破，自研芯片也成為了必然。
馬里亞納是世界上最深的海溝，寓意自研芯片的難度。早在2019年，OPPO就已成立自研芯片團隊，并宣布3年在相關研發(fā)領域斥資500億元，據(jù)媒體報道，目前OPPO自研芯片團隊的規(guī)模已超過了2000人。
馬里亞納MariSilicon X只是OPPO首個推出的自研芯片產(chǎn)品，也是OPPO自研芯片的開端。
以下我們通過三個問題來初步了解馬里亞納 MariSilicon X芯片：
01 馬里亞納 MariSilicon X是什么芯片？

OPPO首發(fā)的馬里亞納MariSilicon X芯片是為影像而生的專用NPU芯片，也就是我們常說的AI芯片，主要負責手機AI部分功能。
比如人臉識別、物體識別、動作捕捉、超級分辨率等工作，目前的智能手機里，AI的作用愈發(fā)重要，尤其是在影像方面，成為決定手機影像表現(xiàn)上限的關鍵因素。

(, 下載次數(shù): 12)
02 馬里亞納MariSilicon X芯片帶來哪些優(yōu)勢是什么？

如今智能手機上大多都不缺少對AI運算功能的支持，然而通用芯片無法滿足AI對計算影像提出的算力和能效要求。
針對這一痛點，馬里亞納MariSilicon X影像專用NPU芯片就成為了OPPO的必然選擇，其意義是最大化地解決算力和能效的問題，專芯專用的能力和效率也是通用NPU和傳統(tǒng)ISP絕對比不了的。
OPPO在今年的Find X3系列上已經(jīng)完成從影像捕捉、存儲到顯示的全鏈路10bit影像色彩生態(tài)；
而自研芯片將讓OPPO首次完成影像鏈路的垂直整合，有能力解決行業(yè)長期以來的影像難題，包括傳感器定制化使用、第三方APP生態(tài)等，讓手機影像實現(xiàn)有質的飛躍。
03 馬里亞納MariSilicon X芯片的作用？

據(jù)OPPO官方的介紹來看，馬里亞納MariSilicon X能讓手機實現(xiàn)4K AI HDR暗光視頻，這是首次在4K AI HDR視頻中實現(xiàn)超清夜景照片的清晰畫質，實現(xiàn)手機影像上的一次突破。

(, 下載次數(shù): 13)
技術上，馬里亞納MariSilicon X集成了自研AI處理單元MariNeuro，并有專用的內(nèi)存子系統(tǒng)，AI算力最高可以達到每秒18萬億次AI計算。真實應用場景下，它的每瓦性能也能達到每秒11.6萬億次。

(, 下載次數(shù): 8)
同時，馬里亞納MariSilicon X芯片搭載了OPPO自研的、業(yè)界領先的MariLumi影像處理單元，最高可以支持20bit的影像處理和Ultra HDR超動態(tài)范圍，畫面光比最高可達1000000：1，是目前頂級平臺四倍的性能。
并支持20bit RAW計算，將傳統(tǒng)只能在后處理完成的計算推向了最前端，為整個影像鏈路輸出無損計算后的高質量數(shù)據(jù)，帶來基礎畫質的提升、預覽成像、第三方App畫質提升。
未來隨著AI訓練，馬里亞納MariSilicon X芯片的效果能進化，功能能拓展，我們相信OPPO自研芯片團隊對其不斷的研發(fā)優(yōu)化，未來馬里亞納MariSilicon X芯片能應用到更多的手機使用場景里。
總結

從首發(fā)高通每年的旗艦芯片、與索尼打造定制傳感器、自研AI和影像相關的算法，到如今不同類型的自研芯片，手機行業(yè)真的是越來越“卷”，大廠間的技術比拼日益激烈。
以往我們可能覺得其中部分“創(chuàng)新”多是為了營銷上的考慮，但當我們看到如OPPO在相關的產(chǎn)品狀態(tài)、功能體驗上不斷突破，也十分直觀地感知到如手機影像近年的巨大飛躍，我們必須認同廠商們的真心付出。

(, 下載次數(shù): 14)

(, 下載次數(shù): 11)
OPPO在正式發(fā)布馬里亞納MariSilicon X芯片后，也宣布首發(fā)搭載該芯片的Find X系列新品將在明年第一季度推出，具體的影像表現(xiàn)如何？我們一起拭目以待。
碼字不易，如果覺得本篇內(nèi)容對你有幫助的話可以雙擊點贊支持一下，有什么想要了解的問題歡迎來評論區(qū)跟我交流。
延伸閱讀
如何看待 OPPO 正式發(fā)布的首枚 6nm 自研 NPU 芯片？到底有沒有用？如何評價 12 月 14 日發(fā)布的 OPPO Air Glass 新一代智能眼鏡？產(chǎn)品有何技術亮點？如何看待華為將發(fā)布新款折疊屏手機？P50 Pocket 傳遞了哪些信息？
作者: 金帥    時間: 2022-1-12 08:20
(, 下載次數(shù): 11)
看了下OPPO的首款自研芯片馬里亞納 MariSilicon X，int8下算力18TOPS，能效11.6TOPS/W，對于當前階段的OPPO來講也算是可以了。

(, 下載次數(shù): 15)
我還是那個觀點，未來自研技術將會成為廠家的核心競爭力，脫離自研技術的旗艦產(chǎn)品會成為空中樓閣，羅永浩口中“方案整合商”的年代遲早會過去，用戶也不會再把廠商們信口開河說出來的所謂“黑科技”信以為真?！叭A為跌倒，蘋果吃飽”的故事在前，國產(chǎn)廠商們在自研方面可以慢慢來，但絕對不能不用功。

(, 下載次數(shù): 12)
另外OPPO“馬里亞納”這名字起得也有意思，科技行業(yè)的下半場競爭已至深水區(qū)，就看各位力度如何了。

(, 下載次數(shù): 14)
P.S.搞不懂為什么OPPO發(fā)布個自研芯片會有那么人跑出來陰陽怪氣，最起碼看人家這架勢也不是PPT發(fā)布啊，這難道不是好事兒嗎……
作者: 兔兔跑腿    時間: 2022-1-12 10:15
提起OPPO，很多人的觀念還停留在充電五分鐘，通話兩小時那個時代。甚至還有很多小伙伴依舊以為它還是那個只會請明星開演唱會發(fā)布高價低配的大廠。
事實上OPPO近幾年一直都是在不斷創(chuàng)新突破，力爭改變大家對它的看法，如今功夫不負有心人，OPPO也有了第一顆自研芯片馬里亞納，具體含義不太清楚，反正就是一顆可以提升算力的手機芯片，后續(xù)機型估計也會采用一機兩個芯片，逐漸減少對高通和聯(lián)發(fā)科的依賴，總之大家都發(fā)現(xiàn)自研芯片是真香。

(, 下載次數(shù): 13)
作者: 春～夏-秋：冬    時間: 2022-1-12 12:07
軍備競賽要開始了，高端機沒點自己芯片不好意思拿出手了
作者: 小權。    時間: 2022-1-12 13:32
這個能效比什么概念，比英偉達，華為PPT上同工藝下高出4倍！這是ASIC芯片，這個設計水平領先同行至少十年。這還只是第一代，在迭代一下出個大算力版本，車載、服務器大一統(tǒng)指日可待。



歡迎光臨 愛鋒貝 (http://m.7gfy2te7.cn/) Powered by Discuz! X3.4