如何看待 OPPO 发布自研芯片马里亚纳 MariSilicon X？将会 ...

oppo INNO DAY期间，OPPO正式发布首款自研NPU芯片——马里亚纳®️ MariSilicon X。作为首个专为影像而生的NPU芯片，马里亚纳 MariSilicon X基于面向未来AI时代的DSA新黄金架构理念，通过自主创新的IP设计以及6nm先进制程，带来空前强大的实时AI计算能效，领先行业的Ultra HDR能力，无损的实时RAW计算，以及最大化传感器能力的RGBW Pro，以芯片级技术突破成就计算影像的新标准。

和小米以及vivo一样，OPPO选择将ISP芯片作为自己的上手试炼的芯片。不过和之前小米的澎湃C1以及vivo的V1比，OPPO这颗马里亚纳Mari Silicon X这颗芯片，在我看来是目前MOV三家的自研“ISP”里，属于最成熟的那一个，没想到OPPO可以做到这个程度。
为什么三家都选择从影像入手。其一是做NPU、ISP的难度远低于做GPU和CPU，因为这个东西结构较为简单、功能较为明确、也不涉及到复杂的软件适配。另一方面，当今安卓手机市场同质化严重，而拍照/摄像正好是现在为数不多能做差异化的地方了。所以我们看到OPPO vivo以及小米都朝着这块去做也不奇怪了。





我一直在说，在后摩尔定律时代，提升性能的一个方式就是设计专用化电路。无论是软件还是硬件，越是通用化那么就性能提升越为困难。专用化的电路在特定的场景下，在性能、能耗比等方面都有绝对优势。例如GPU相对于CPU就是牺牲一定通用性后，获得了数量级的计算力提升。 NPU相对于GPU同理，而ISP版NPU相对于通用NPU也是同理。




MariSilicon X这颗芯片最终提供了72TOPs的INT4理论性能，以及18TOPs的INT8理论性能，根据OPPO官方的描述，这个理论性能高于Apple A15的15.8TOPs的算力。
这个数据我去看了苹果官方的PPT，数值是没有问题，但是这个对比不一定有意义。正如OPPO所说，马里亚纳是一个影像专用NPU，而苹果没有声称这个NPU是一个影像专用NPU，专用对比通用本来就不公平。


但是也不要说OPPO的对比不厚道，因为苹果官网上，关于NPU的描述也全都是影像相关的，大概率其实也是一个影像NPU。


无论如何，MariSilicon X的硬件完成度已经很高了，个人经验判断即便没有真的追上Apple那个NPU，但相差的不是很多了，至少在影响层面。而且这个芯片很有趣，还有独立的DDR带宽，大概率也有自己的内存吧，可以做更加复杂的任务。影响数据的带宽占用是比较大的，特别是如果处理RAW域未压缩数据，如果来回和SoC沟通或者借SoC访问内存，那么实用性是比较堪忧的。

再然后，我们聊聊为影像适配的功能吧，MariSilicon X最高支持20bit的影响处理，这个比之前高通骁龙8 Gen 1吹嘘的18bit多2bit，也就是OPPO宣称的高了4倍的原因。不过这个东西有多少用不大清楚，毕竟手机CMOS的原始数据没有那么高bit数，而后期各种多帧叠加后也很难用到这个么多，反正数据归数据，最后还是看最终效果吧。

拥有马里亚纳 MariSilicon X之后，OPPO第一次完成了影像垂直链路整合，RGBW Pro模式就是最好的例证。通过双通路设计，马里亚纳MariSilicon X首次实现了对RGB和W像素的分隔处理，最大化利用每一种像素特性，释放出RGBW阵列的全部潜力。马里亚纳 MariSilicon X的RGBW Pro模式带来了8.6dB的信噪比提升，以及1.7倍的解析力提升，在传感器尺寸规格都没有变化的前提下实现大幅的影像效果增强。

此外，OPPO之前有一个很Fancy的RGBW排列，大体上把Quad Bayer 的一半像素替换成W像素。假设还是总计48MP的像素，那么这个RGBW的传感器可以输出一个12MP（2合1）的Bayer信号，以及一个12MP（2合1）的黑白信号，理论上分辨率对比12MP（4合1）是不低的甚至因为黑白信号可能还会高一些，也不多影响猜色，再加上理论翻倍的进光量，算是我认为最完美的其中一种非Bayer排列了。这种排列相对来说，最大的问题就是Bayer彩色部分的信噪比相当于面积砍半的情况，最终表现就很依赖与和黑白信号的融合了。 MariSilicon X从硬件上提供适配让我觉得很是惊喜，感觉这个RGBW的最终产物应该会很是惊艳。


OPPO在find X3上开始的10bit全链路衍生到了RGBW全链路，是一个不错的趋势。不能简单的只做一个硬件，而是要做整一套，这样才能真正释放全部潜力，并且形成硬件壁垒。


最后总结下，为什么我说 MariSilicon X的完成度在MOV里最高，因为 MariSilicon X的算力、架构、工艺、软件配合上都是明显高于之前的几家的。特别是OPPO一上来就下血本用了高成本的6nm（vivo V1 12nm），看起来OPPO真不只是随便做做占个名分，而是真的投入了很多去做。


换个角度去看，其实你对比下之前小米澎湃C1以及vivo V1所披露的硬件参数，MariSilicon X明显更为自信，展现了更多的细节。小米澎湃C1可能就是个完全练手的水平，vivo V1做到了及格可用，而OPPO MariSilicon X看起来已经趋于优秀了。
本文纯粹自己想写的，不是什么合作任务，没有充值~~事实上，我对MOV都做自己芯片很是悲观（以后有空聊），不过不妨碍今天看到OPPO MariSilicon X​很是激动。

-----------------------------

OPPO INNO DAY期间，OPPO正式发布首款自研NPU芯片——马里亚纳®️ MariSilicon X。作为首个专为影像而生的NPU芯片，马里亚纳 MariSilicon X基于面向未来AI时代的DSA新黄金架构理念，通过自主创新的IP设计以及6nm先进制程，带来空前强大的实时AI计算能效，领先行业的Ultra HDR能力，无损的实时RAW计算，以及最大化传感器能力的RGBW Pro，以芯片级技术突破成就计算影像的新标准。

和小米以及vivo一样，OPPO选择将ISP芯片作为自己的上手试炼的芯片。不过和之前小米的澎湃C1以及vivo的V1比，OPPO这颗马里亚纳Mari Silicon X这颗芯片，在我看来是目前MOV三家的自研“ISP”里，属于最成熟的那一个，没想到OPPO可以做到这个程度。
为什么三家都选择从影像入手。其一是做NPU、ISP的难度远低于做GPU和CPU，因为这个东西结构较为简单、功能较为明确、也不涉及到复杂的软件适配。另一方面，当今安卓手机市场同质化严重，而拍照/摄像正好是现在为数不多能做差异化的地方了。所以我们看到OPPO vivo以及小米都朝着这块去做也不奇怪了。





我一直在说，在后摩尔定律时代，提升性能的一个方式就是设计专用化电路。无论是软件还是硬件，越是通用化那么就性能提升越为困难。专用化的电路在特定的场景下，在性能、能耗比等方面都有绝对优势。例如GPU相对于CPU就是牺牲一定通用性后，获得了数量级的计算力提升。 NPU相对于GPU同理，而ISP版NPU相对于通用NPU也是同理。




MariSilicon X这颗芯片最终提供了72TOPs的INT4理论性能，以及18TOPs的INT8理论性能，根据OPPO官方的描述，这个理论性能高于Apple A15的15.8TOPs的算力。
这个数据我去看了苹果官方的PPT，数值是没有问题，但是这个对比不一定有意义。正如OPPO所说，马里亚纳是一个影像专用NPU，而苹果没有声称这个NPU是一个影像专用NPU，专用对比通用本来就不公平。


但是也不要说OPPO的对比不厚道，因为苹果官网上，关于NPU的描述也全都是影像相关的，大概率其实也是一个影像NPU。


无论如何，MariSilicon X的硬件完成度已经很高了，个人经验判断即便没有真的追上Apple那个NPU，但相差的不是很多了，至少在影响层面。而且这个芯片很有趣，还有独立的DDR带宽，大概率也有自己的内存吧，可以做更加复杂的任务。影响数据的带宽占用是比较大的，特别是如果处理RAW域未压缩数据，如果来回和SoC沟通或者借SoC访问内存，那么实用性是比较堪忧的。

再然后，我们聊聊为影像适配的功能吧，MariSilicon X最高支持20bit的影响处理，这个比之前高通骁龙8 Gen 1吹嘘的18bit多2bit，也就是OPPO宣称的高了4倍的原因。不过这个东西有多少用不大清楚，毕竟手机CMOS的原始数据没有那么高bit数，而后期各种多帧叠加后也很难用到这个么多，反正数据归数据，最后还是看最终效果吧。

拥有马里亚纳 MariSilicon X之后，OPPO第一次完成了影像垂直链路整合，RGBW Pro模式就是最好的例证。通过双通路设计，马里亚纳MariSilicon X首次实现了对RGB和W像素的分隔处理，最大化利用每一种像素特性，释放出RGBW阵列的全部潜力。马里亚纳 MariSilicon X的RGBW Pro模式带来了8.6dB的信噪比提升，以及1.7倍的解析力提升，在传感器尺寸规格都没有变化的前提下实现大幅的影像效果增强。

此外，OPPO之前有一个很Fancy的RGBW排列，大体上把Quad Bayer 的一半像素替换成W像素。假设还是总计48MP的像素，那么这个RGBW的传感器可以输出一个12MP（2合1）的Bayer信号，以及一个12MP（2合1）的黑白信号，理论上分辨率对比12MP（4合1）是不低的甚至因为黑白信号可能还会高一些，也不多影响猜色，再加上理论翻倍的进光量，算是我认为最完美的其中一种非Bayer排列了。这种排列相对来说，最大的问题就是Bayer彩色部分的信噪比相当于面积砍半的情况，最终表现就很依赖与和黑白信号的融合了。 MariSilicon X从硬件上提供适配让我觉得很是惊喜，感觉这个RGBW的最终产物应该会很是惊艳。


OPPO在Find X3上开始的10bit全链路衍生到了RGBW全链路，是一个不错的趋势。不能简单的只做一个硬件，而是要做整一套，这样才能真正释放全部潜力，并且形成硬件壁垒。



最后总结下，为什么我说 MariSilicon X的完成度在MOV里最高，因为 MariSilicon X的算力、架构、工艺、软件配合上都是明显高于之前的几家的。特别是OPPO一上来就下血本用了高成本的6nm（vivo V1 12nm），看起来OPPO真不只是随便做做占个名分，而是真的投入了很多去做。


换个角度去看，其实你对比下之前小米澎湃C1以及vivo V1所披露的硬件参数，MariSilicon X明显更为自信，展现了更多的细节。小米澎湃C1可能就是个完全练手的水平，vivo V1做到了及格可用，而OPPO MariSilicon X看起来已经趋于优秀了。
本文纯粹自己想写的，不是什么合作任务，没有充值~~事实上，我对MOV都做自己芯片很是悲观（以后有空聊），不过不妨碍今天看到OPPO MariSilicon X​很是激动。
<a data-draft-node="block" data-draft-type="mcn-link-card" data-mcn-id="1454202195814637568">

关于OPPO马里亚纳自研NPU芯片，这里有你想知道的

正如之前预热所说的，OPPO如期在2021未来科技大会上带来了自家首个影像专用NPU——马里亚纳MariSilicon X。这个是OPPO于2019年成立自研芯片团队后，交出的首份答卷。
马里亚纳MariSilicon X芯片的推出对于OPPO是贯彻其影像之路的重要一步，也可能为未来OPPO手机影像树立新的标杆。


从2016年OPPO与索尼联合开发IMX398传感器，到今年双方最新的大底传感器IMX766，与此同时，OPPO于2017年成立了单独的理想人像实验室部门，专注于人像摄影。
OPPO已经实现了传感器和算法上的突破，自研芯片也成为了必然。
马里亚纳是世界上最深的海沟，寓意自研芯片的难度。早在2019年，OPPO就已成立自研芯片团队，并宣布3年在相关研发领域斥资500亿元，据媒体报道，目前OPPO自研芯片团队的规模已超过了2000人。
马里亚纳MariSilicon X只是OPPO首个推出的自研芯片产品，也是OPPO自研芯片的开端。
以下我们通过三个问题来初步了解马里亚纳 MariSilicon X芯片：
01 马里亚纳 MariSilicon X是什么芯片？

OPPO首发的马里亚纳MariSilicon X芯片是为影像而生的专用NPU芯片，也就是我们常说的AI芯片，主要负责手机AI部分功能。
比如人脸识别、物体识别、动作捕捉、超级分辨率等工作，目前的智能手机里，AI的作用愈发重要，尤其是在影像方面，成为决定手机影像表现上限的关键因素。


02 马里亚纳MariSilicon X芯片带来哪些优势是什么？

如今智能手机上大多都不缺少对AI运算功能的支持，然而通用芯片无法满足AI对计算影像提出的算力和能效要求。
针对这一痛点，马里亚纳MariSilicon X影像专用NPU芯片就成为了OPPO的必然选择，其意义是最大化地解决算力和能效的问题，专芯专用的能力和效率也是通用NPU和传统ISP绝对比不了的。
OPPO在今年的Find X3系列上已经完成从影像捕捉、存储到显示的全链路10bit影像色彩生态；
而自研芯片将让OPPO首次完成影像链路的垂直整合，有能力解决行业长期以来的影像难题，包括传感器定制化使用、第三方APP生态等，让手机影像实现有质的飞跃。
03 马里亚纳MariSilicon X芯片的作用？

据OPPO官方的介绍来看，马里亚纳MariSilicon X能让手机实现4K AI HDR暗光视频，这是首次在4K AI HDR视频中实现超清夜景照片的清晰画质，实现手机影像上的一次突破。


技术上，马里亚纳MariSilicon X集成了自研AI处理单元MariNeuro，并有专用的内存子系统，AI算力最高可以达到每秒18万亿次AI计算。真实应用场景下，它的每瓦性能也能达到每秒11.6万亿次。


同时，马里亚纳MariSilicon X芯片搭载了OPPO自研的、业界领先的MariLumi影像处理单元，最高可以支持20bit的影像处理和Ultra HDR超动态范围，画面光比最高可达1000000：1，是目前顶级平台四倍的性能。
并支持20bit RAW计算，将传统只能在后处理完成的计算推向了最前端，为整个影像链路输出无损计算后的高质量数据，带来基础画质的提升、预览成像、第三方App画质提升。
未来随着AI训练，马里亚纳MariSilicon X芯片的效果能进化，功能能拓展，我们相信OPPO自研芯片团队对其不断的研发优化，未来马里亚纳MariSilicon X芯片能应用到更多的手机使用场景里。
总结

从首发高通每年的旗舰芯片、与索尼打造定制传感器、自研AI和影像相关的算法，到如今不同类型的自研芯片，手机行业真的是越来越“卷”，大厂间的技术比拼日益激烈。
以往我们可能觉得其中部分“创新”多是为了营销上的考虑，但当我们看到如OPPO在相关的产品状态、功能体验上不断突破，也十分直观地感知到如手机影像近年的巨大飞跃，我们必须认同厂商们的真心付出。




OPPO在正式发布马里亚纳MariSilicon X芯片后，也宣布首发搭载该芯片的Find X系列新品将在明年第一季度推出，具体的影像表现如何？我们一起拭目以待。
码字不易，如果觉得本篇内容对你有帮助的话可以双击点赞支持一下，有什么想要了解的问题欢迎来评论区跟我交流。
延伸阅读
如何看待 OPPO 正式发布的首枚 6nm 自研 NPU 芯片？到底有没有用？如何评价 12 月 14 日发布的 OPPO Air Glass 新一代智能眼镜？产品有何技术亮点？如何看待华为将发布新款折叠屏手机？P50 Pocket 传递了哪些信息？

看了下OPPO的首款自研芯片马里亚纳 MariSilicon X，int8下算力18TOPS，能效11.6TOPS/W，对于当前阶段的OPPO来讲也算是可以了。


我还是那个观点，未来自研技术将会成为厂家的核心竞争力，脱离自研技术的旗舰产品会成为空中楼阁，罗永浩口中“方案整合商”的年代迟早会过去，用户也不会再把厂商们信口开河说出来的所谓“黑科技”信以为真。“华为跌倒，苹果吃饱”的故事在前，国产厂商们在自研方面可以慢慢来，但绝对不能不用功。


另外OPPO“马里亚纳”这名字起得也有意思，科技行业的下半场竞争已至深水区，就看各位力度如何了。


P.S.搞不懂为什么OPPO发布个自研芯片会有那么人跑出来阴阳怪气，最起码看人家这架势也不是PPT发布啊，这难道不是好事儿吗……

提起OPPO，很多人的观念还停留在充电五分钟，通话两小时那个时代。甚至还有很多小伙伴依旧以为它还是那个只会请明星开演唱会发布高价低配的大厂。
事实上OPPO近几年一直都是在不断创新突破，力争改变大家对它的看法，如今功夫不负有心人，OPPO也有了第一颗自研芯片马里亚纳，具体含义不太清楚，反正就是一颗可以提升算力的手机芯片，后续机型估计也会采用一机两个芯片，逐渐减少对高通和联发科的依赖，总之大家都发现自研芯片是真香。

军备竞赛要开始了，高端机没点自己芯片不好意思拿出手了

这个能效比什么概念，比英伟达，华为PPT上同工艺下高出4倍！这是ASIC芯片，这个设计水平领先同行至少十年。这还只是第一代，在迭代一下出个大算力版本，车载、服务器大一统指日可待。