目前 SoC 这么强了 OPPO 为什么还要自己做芯片?OPPO ...
一、为什么是芯片?作为一个古典互联网一级市场投资人,其实过去几年的感官是不太好的,
因为一个很现实的问题是:所谓的互联网似乎也已经不是投资的“风口”。
(PS:美团王兴总提出互联网下半场是16年)
那么最近几年的一级市场的热点是什么呢?
如果只有一个关键词的话,那就是:
硬科技。
什么是硬科技?
科技自诞生以来,确实头也不回地推动着人类的发展,但只有极少数的技术创新才会对世界产生巨大的价值和影响,远超所有其余所有技术之和,就如同过去的蒸汽机、电力、航天飞船、集成电路。
这些科技创新被称为硬科技。
来源:为什么我们需要一场硬科技投资热?而在这诸多的技术栈之中,芯片无疑是最为被关注的细分方向。
1、投资热
芯片这个主题可能是几乎所有一级市场基金的“共识”所在;
根据企名片的数据显示,2018年开始芯片领域的投资项目数量开始激增;
而且又由于芯片行业的研发周期和投入,所以相关厂商的投融资只要曝出来就是“巨大”的;
天使融资几亿,一轮融资融个几十亿,估值百亿都是“合理”的;
图片来源:科创之道
2、芯片提价
疫情影响、原材料成本价格提升、代工厂家涨价加上本身芯片整个行业的供不应求现状,最直接的结果就是芯片成品的全面提价;
作为头部大厂,当然可以通过提前囤货的方式部分解决需求的缺口,
但明显这样的行为不是长久之计;
所以综合来看,对于头部消费硬件厂商,自研芯片已然是必选项而非可选项。
OPPO第一次曝光自研芯片的新闻是20年2月,
36氪报道OPPO CEO特别助理发布内部文章《对打造核心技术的一些思考》,
文中提出三大计划,涉及软件开发、云,以及关于芯片的“马里亚纳计划”;
而这其中的马里亚纳计划就是指自研芯片,
考虑到内部立项的时间应该是19年底的事情,所以这件事情OPPO已经做了3年,
似乎也该到了给出阶段性答卷的时间了;
巧合的是,今年大会的邀请函中还有一本《海底两万里》,一切似乎都连上了……
二、为什么是NPU?
1、NPU-AI芯片是竞争热点
后摩尔时代手机,因为半导体工艺节点逐渐接近物理极限、工艺节点的演进降速,
每一代CPU和GPU性能提升在放缓,而与之相对应的是AI芯片成为新的竞争热点;
从2017 年 9 月华为发布全球首款内置独立 NPU (神经网络单元)的智能手机 AI 计算平台的麒麟970 芯片后,AI 芯片就变成竞争的新赛道。
2、中国厂商的弯道超车机会可能来自于NPU
相较于此前的CPU\GPU领域,中国厂商在NPU领域与海外公司起点并没有差太远;
这和中国AI厂商在过去今年的技术\算法的发展以及商业落地有关,
也与中国有更大的数据量级和应用场景更加相关;
3、场景化的特殊需求愈发要求专业的芯片
提及场景,中国庞大的应用场景和市场也是这一波NPU在国内发展迅速的核心原动力之一;
而基于场景的生态构建也是NPU能够被大量使用的重要前提;
这一点对于已有巨大出货量的头部电子消费\手机厂商来说,具体围绕什么场景构建NPU以及生态就变得重要了;
回到OPPO,考虑到OPPO手机一直以来都主打的影像功能,大概率此次NPU主要应用场景应该是影像相关。
4、NPU可能仅仅是个开始
从过去Apple、华为的发展路径看,SOC+NPU的完整结构才会是手机厂商的演进路径;
而回看这么多年OPPO的发展,公有SOC为基础,sensor的定制,到摄像头模组的定制,
一步步走来,在满足用户需求和场景的这条路上,OPPO一直都没有停止;
此次自研NPU的发布,这一枚芯片本身当然有很多意义,但大概率OPPO也应该会走到SOC……
总结
过去3年,OPPO号称500亿的投资,绝大多数都投入到了研发这个领域,
资金、人力、时间的重投入,在今天,自研NPU的正式发布可以算是阶段性的成绩单;
但这个阶段节点可能仅仅是未来很长一段时间OPPO这家公司新发展旅程的开始,
祝福OPPO。
----------------------------- 一、为什么是芯片?
作为一个古典互联网一级市场投资人,其实过去几年的感官是不太好的,
因为一个很现实的问题是:所谓的互联网似乎也已经不是投资的“风口”。
(PS:美团王兴总提出互联网下半场是16年)
那么最近几年的一级市场的热点是什么呢?
如果只有一个关键词的话,那就是:
硬科技。
什么是硬科技?
科技自诞生以来,确实头也不回地推动着人类的发展,但只有极少数的技术创新才会对世界产生巨大的价值和影响,远超所有其余所有技术之和,就如同过去的蒸汽机、电力、航天飞船、集成电路。
这些科技创新被称为硬科技。
来源:为什么我们需要一场硬科技投资热?而在这诸多的技术栈之中,芯片无疑是最为被关注的细分方向。
1、投资热
芯片这个主题可能是几乎所有一级市场基金的“共识”所在;
根据企名片的数据显示,2018年开始芯片领域的投资项目数量开始激增;
而且又由于芯片行业的研发周期和投入,所以相关厂商的投融资只要曝出来就是“巨大”的;
天使融资几亿,一轮融资融个几十亿,估值百亿都是“合理”的;
图片来源:科创之道
2、芯片提价
疫情影响、原材料成本价格提升、代工厂家涨价加上本身芯片整个行业的供不应求现状,最直接的结果就是芯片成品的全面提价;
作为头部大厂,当然可以通过提前囤货的方式部分解决需求的缺口,
但明显这样的行为不是长久之计;
所以综合来看,对于头部消费硬件厂商,自研芯片已然是必选项而非可选项。
OPPO第一次曝光自研芯片的新闻是20年2月,
36氪报道OPPO CEO特别助理发布内部文章《对打造核心技术的一些思考》,
文中提出三大计划,涉及软件开发、云,以及关于芯片的“马里亚纳计划”;
而这其中的马里亚纳计划就是指自研芯片,
考虑到内部立项的时间应该是19年底的事情,所以这件事情OPPO已经做了3年,
似乎也该到了给出阶段性答卷的时间了;
巧合的是,今年大会的邀请函中还有一本《海底两万里》,一切似乎都连上了……
二、为什么是NPU?
1、NPU-AI芯片是竞争热点
后摩尔时代手机,因为半导体工艺节点逐渐接近物理极限、工艺节点的演进降速,
每一代CPU和GPU性能提升在放缓,而与之相对应的是AI芯片成为新的竞争热点;
从2017 年 9 月华为发布全球首款内置独立 NPU (神经网络单元)的智能手机 AI 计算平台的麒麟970 芯片后,AI 芯片就变成竞争的新赛道。
2、中国厂商的弯道超车机会可能来自于NPU
相较于此前的CPU\GPU领域,中国厂商在NPU领域与海外公司起点并没有差太远;
这和中国AI厂商在过去今年的技术\算法的发展以及商业落地有关,
也与中国有更大的数据量级和应用场景更加相关;
3、场景化的特殊需求愈发要求专业的芯片
提及场景,中国庞大的应用场景和市场也是这一波NPU在国内发展迅速的核心原动力之一;
而基于场景的生态构建也是NPU能够被大量使用的重要前提;
这一点对于已有巨大出货量的头部电子消费\手机厂商来说,具体围绕什么场景构建NPU以及生态就变得重要了;
回到OPPO,考虑到OPPO手机一直以来都主打的影像功能,大概率此次NPU主要应用场景应该是影像相关。
4、NPU可能仅仅是个开始
从过去Apple、华为的发展路径看,SOC+NPU的完整结构才会是手机厂商的演进路径;
而回看这么多年OPPO的发展,公有SOC为基础,sensor的定制,到摄像头模组的定制,
一步步走来,在满足用户需求和场景的这条路上,OPPO一直都没有停止;
此次自研NPU的发布,这一枚芯片本身当然有很多意义,但大概率OPPO也应该会走到SOC……
总结
过去3年,OPPO号称500亿的投资,绝大多数都投入到了研发这个领域,
资金、人力、时间的重投入,在今天,自研NPU的正式发布可以算是阶段性的成绩单;
但这个阶段节点可能仅仅是未来很长一段时间OPPO这家公司新发展旅程的开始,
祝福OPPO。 绿厂这两年在技术研发上,节奏明显加快。
Find X上那套升降头,前置支付级人脸识别结构光系统来自奥比中光。
之后,奥比中光成功和阿里巴巴合作,目前你们能看到的市面上绝大多数支付宝刷脸支付系统,都来自于奥比中光,现在他们家还扩展了刷脸门锁解决方案。
Enco系列的Enco Free、Enco X,还有走量产品W51,都采用了恒玄科技家的BES系列。
恒玄科技家最新产品BES2500——一颗12nm,双核300MHz的Cortex M33,晶体管数量可能比果子A4还要多,首发就是在Enco X上。恒玄(BES)也和络达(Airoha)、高通(CSR)在TWS芯片界被并成为ABC家。
前几天发布的Reno 7系列搭载的IMX709,将图像算法写入硬件,四舍五入可以看做绿厂定制了一颗ISP堆叠在CIS后面,一颗差不多20平方毫米的ISP。
NPU是个非常有意思的切入点。
一方面这几年人工智能算法逐渐成熟。
人工智能算法已经开始在图像、语音等领域开展身手了。绿厂的小布语音助手的“生成式回答系统”,就是OPPO与北京智源人工智能研究院合作的成果。采用独立的NPU,可以对自家产品针对性优化,加快运算速度,降低功耗。
相对于传统人工标注,基于悟道合作共建的生成式知识问答系统,平均单条长尾问题问答成本降低99%,抽验准确率超65%并持续提升中,再加上上游增设的质量控制及融合排序,用户实际体验到的准确率会更高。对于当前知识库中不存在、用户未来可能问到的问题,悟道则借助GLM模型的三大能力,结合知识图谱,形成持续知识预训练模型,进而大规模生成问答语料库。
另一方面,手机也确实需要NPU做辅助。
尽管这几年ISP也好,SoC中的NPU也好,进化都非常快,但都是通用产品。单个手机厂商在定制了一堆其他方面的硬件后,对自家特色方面有针对性优化的算力可能就不那么够了。
从绿厂这颗6nm的NPU上,我们可以开始期待绿厂的SoC了。
毕竟有Google和特斯拉珠玉在前。
Google Pixel 6上的Tensor中TPU IP来自于之前的独立TPU。
2018年,Google发布了Edge TPU,用于在边缘计算中推理计算,这颗TPU采用了12nm工艺,在2W的功率上,提供了4 TOPs的计算能力。芯片面积也非常小,一美分硬币上能放好几个。
到了Pixel 6系列上的Google Tensor,根据TechInsights和AnandTech两家的分析,Google的Tesnor这颗芯片是从三星高度定制化的,甚至打在芯片上的,都是三星自家代号。
S5E9845
比三星自家Exynos 2100的S5E9840高了5。
两颗芯片在GPU、内存控制器、多媒体解码器和基带上都选择了类似甚至相同的IP。
Google Tensor显微图
不同的地方在于,这颗定制芯片采用了Google自家的TPU的IP。
虽然叫TPU,但这个TPU就是常说的NPU,都是用于机器学习的推理计算。我们有理由相信,Google Tensor上的TPU IP核是来自于那颗独立TPU的演化。
特斯拉的FSD也是类似的思路。
虽然特斯拉的自动驾驶芯片从Mobileye到英伟达再到AMD,但特斯拉的FSD芯片一直没有停止研发。
特斯拉FSD芯片来自Jim Keller——就是那个给苹果A系列SoC打底的,也是那个帮AMD翻身的架构大神。
从特斯拉的FSD自动驾驶芯片设计中,也可以看出来,NPU是最重要的部分。
辅助驾驶和自动驾驶的传感和处理,和手机拍照处理最大的不同在于实时性。手机拍照,完了可以在后台花点时间慢慢合成,但车载不同,处理慢了,就撞上了。因此,特斯拉充分利用NPU在神经网络中的处理能力,在这个14nm的芯片上,集成了2个NPU内核,总算力高达73.73 TOPs(Int8)。
OPPO的试水费用更贵,毕竟这是一颗6nm的芯片,光是流片就得一个亿,起。
万一有点什么岔子,那一个亿都打不住。
说真的,从这颗NPU上,我看到了OPPO这两年在硬件上的野心。OPPO开始不单纯只是做手机了,而是希望依托自家每年一个亿以上的手机出货量,摊薄自主研发和硬件定制成本,开始形成自家的生态体系。
“三年500亿”目标多吗?很多,但如果算算出货量,摊到每部手机上,不到200块钱,能节约下的成本和带来的竞争收益,很可能比这200更多。高度定制+自研体系,这条路子是苹果、三星,还有华为过去的成功之道。
这个时间点,OPPO切入的并不晚,因为NPU才刚刚开始在各个领域崭露头角。 对于OPPO这样的手机厂商而言,要成为与世界级的市场占有率匹配的世界级科技企业,必须要掌握芯片级的核心研发能力,而不是简单地成为SoC供应商的下游组装厂。从中国的产业发展来看,表面上看中国欠缺的是先进制程的芯片制造能力,但实际上,即使是先进制造能力得到解决,在芯片设计方面,中国企业的先进芯片设计能力也依然有待加强。目前国内厂商中,掌握了系统级芯片设计能力的厂商仅有海思麒麟、联发科和紫光展锐三家。对于OPPO而言,以先进制程下的系统级芯片设计作为切入点,对于芯片研发能力的培育而言是一个恰到好处的合理选择。千里之行始于足下,掌握系统级芯片设计能力,是OPPO芯片研发团队的一个里程碑式的开端。
具体而言,OPPO选择NPU作为自研芯片的切入点,是一个高度务实的选择——对于目前形势下的手机产品而言,引入独立于SoC之外的NPU,对OPPO手机产品的能力提升具备重大意义。经过多年的技术迭代,目前的安卓手机平台在日常使用范围内已经基本上脱离了性能不够用的困境。现在大多数高通或MTK平台的高端甚至中端手机SoC,已经具备了足够强大的CPU性能和I/O性能,可以让绝大多数用户在普通的日常使用中难以察觉到差异。对于绝大多数普通消费者而言,旗舰平台与中端平台最为明显的差异,就体现在影像系统上:要实现旗舰级的照相和摄像水平,手机不光要有高质量的光学和影像传感器模块,同样也有高质量的影像处理算法及其对应的硬件支撑。考虑到手机的镜头模组和影像传感器受到刚性的物理尺寸限制,今后很难达成较为显著的进步,从软件算法层面(尤其是基于深度学习的AI算法)进行优化,便成了今后旗舰平台影像能力发展的几乎唯一的前进方向。而独立NPU所瞄准的,正是这样的一个潜力无穷的领域。
2017年华为海思在麒麟970芯片中首次引入NPU,用于进行神经网络推断加速——此时的大规模深度神经网络主要还是运用于图像处理相关领域,在其他领域应用有限。而随着2018年Google首先提出了BERT,基于预训练的大模型几乎瞬间颠覆了整个AI业界——部署的模型性能几乎与模型规模正相关,而更大的模型规模不可避免地导致了更高的计算量要求,这也给推断加速芯片提出了全新的要求和挑战。
回顾过去展望未来,在手机平台引入高性能、高能效比的NPU芯片,可以显著地提高手机现有使用场景的用户体验,并且带来了更多更丰富的可能性:例如,基于更大规模的预训练语言模型,手机现有的机器翻译和语音助手功能将被提高到一个前所未有的高度——基于用户自己的数据,手机将成为真正意义上的“智能手机”,而强大的NPU则意味着相应的计算可以直接在端侧完成,无需联网上云,彻底避免了流量消耗和隐私泄露问题;目前图文混排的多模态技术已经得到了长足的发展,高性能算法与高性能NPU的结合,甚至能允许用户直接输入描述性的文本(例如“去年我家猫跟我的合照”)就准确地搜索到对应的图片;此外,随着以《原神》为代表的大型3D游戏在手机平台上的流行,主流SoC的GPU不可避免地遭遇了性能与能效比的瓶颈,此时一个独立的高性能NPU就格外地重要——独立NPU在SoC之外,不会与GPU争抢供电散热,同时可以实现类似于英伟达DLSS的深度学习超采样算法,显著地降低高分辨率条件下的GPU负载,实现更低的能耗和更高的帧率。
随着NPU进一步的发展,它在今后可以实现独立显卡之于游戏PC的作用——今后的大多数应用场景,传统的系统SoC甚至可能直接“退居二线”,NPU将承担起更多更重要的任务,而对NPU的掌握将成为关键,让OPPO可以掌握手机产品体验调校的主动权。而对于OPPO而言,NPU只是一个开始——目前的独立NPU使用带有片上内存的系统设计,本身也是一块完整的SoC。经过长期的研发投入,假以时日,OPPO也将发展出自己的手机SoC,实现更高层面的软硬一体化,提高自身在全球手机市场上的竞争力。
关于这颗芯片的细节和未来的布局,我已经非常清楚了。在过去这一个月的时间里,数次和OPPO从总监到到产品经理再到研发基层,以及公司高层沟通OPPO做芯片的逻辑,在14号深度分析文章出来之前(这次这颗芯片的技术分析,应该会让大家很兴奋,一方面因为这颗芯片本身的能力,一方面也是基于整体大逻辑带来的那种战略上的期待感),我把今天能说的和大家分享一下,主要是OPPO为什么要做芯片:
大概1个月前吧,我去深圳春笋,参加了一个8人碰头会。我们八个人,面对了30多位OPPO的同事,从芯片部门、旗舰机产品部门、营销部门、影像技术团队,无一不包。当OPPO第一次向我们八人核心小组揭开500亿研发预算的第一个成果的时候,我们确实被震撼到了。这和之前坊间传闻OPPO做的芯片完全不同,受限于NDA保密协议,我只能说这就是一颗简易的SoC,它可能会改变大家使用手机的场景和环境,现在做不到的很多场景,有了这个自研芯片终于能做到了。其实我第一次看到的时候也在想,用户为什么非要用这种使用场景?OPPO的回答是,不是用户不需要这些使用场景,而是现在的机器都做不到。甚至我可以说,有了这颗自研芯片,以后手机厂商和高通还有联发科的关系会发生变化,以后一定会是手机厂商自研芯片+目前旗舰SoC共存的方式。
今天凌晨高通刚刚公布了4nm制程的骁龙Gen1的跑分数据,因此今天这个前提设定很有想象空间:为什么高通和今年的发哥9000 SoC这么强了,OPPO还要自研芯片?没错,无论是高通,还是联发科,基于ARMv9架构的旗舰产品,以及4nm的制程,都带来了令人振奋的纸面性能。以至于高通前段时间甚至推心置腹地说:“我们虽然觉得各大厂商自行研发NPU、TPU、ISP是一件好事,但当前SoC的能力已经足够强,这么研发可能会有时效性问题。”同样的观点,我想其他做公开市场SoC的厂商也会这么想:我们都这么努力提高SoC各模组的性能了,你要多强的IP我都给你往上堆,何必还要外挂处理器呢?
得亏这是2021年,如果是十年前,大家可能还没什么感受。经过这么多艰难的日子和波折,从玩家到从业者,能明白两个基本道理:
第1、 不是你自研的东西,有一天,你可能真的买不到了,不卖给你。
第2、 即便不存在采购风险,公开市场的SoC产品,无法针对特定品牌、特定目标设计的手机产品做特定优化,因此手机厂商想做出差异化优势是基本没有可能的。这一点,苹果率先向业界证明了正确性。从A系列处理器到完全定制的影像系统,苹果的影像能力、系统智能算力都是全球标杆;而后来居上的华为,用竭力全自研,证明了国产手机高端化的唯一正确道路,就是自研的SoC+独占的感光元器件+封闭的算法+相对封闭的系统调优,所以华为成功了,而且成功的非常彻底。见到苹果和华为的成功,谷歌终于坐不住了,推出了史上可能最成功的一代Pixel手机,基于谷歌自研的SoC Tensor,配合自研的算法,和苹果,华为殊途同归。
这就是掌控供应链出身的OPPO中国区总裁刘波,在那天下午跟我讲的一句话,我很难忘记:“OPPO这个公司要想有前途,配得上自己的市场地位,就必须拥有全套自研体系,而这个体系的核心,就是芯片。”
换句话说,OPPO想真正成为一家高端手机和消费电子产品制造商,在资本市场获得令人尊敬的地位,就必须脱离制造业的形象。回顾过往,OPPO这三年来一直在疯狂的投资芯片上下游,甚至包括车机芯片,都有布局。坊间一直传闻,OPPO在谋求上市。有人问我,OPPO上市估值几何?我说,如果是老故事,能给2倍PS不能再多,说白了这就是个制造业公司,另外,他们上市干嘛呢?募资用来盖手机工厂,制造更多的手机吗?制造更多搭载骁龙和联发科旗舰芯片,索尼和三星公开市场元器件的高端机吗?市场真的会买这个故事吗?我个人不喜欢这个故事。
所以,即便谋求上市,这个目的不言而喻,再造一个新的OPPO,或者说,把苹果、华为走过的路,再走一遍。OPPO是一个Fabless,这意味着一旦投入到这个过程中,就没有回头路。在当前全球手机市场大盘容量长期上不去的前提下,搞一大堆花里胡哨的高端机,是不需要上市就可以达到目的。形成自己核心的竞争力,打造从芯片、独占元器件或解决方案、自研算法和交互系统为核心的封闭研发生态,这才是OPPO的未来之路。
这条路,苹果做了,无数人耻笑苹果封闭,不开放,结果苹果成了全球市值最高的高科技公司。在尝试了一番X86架构之后,人家苹果又用ARM架构的M1和M1 MAX宣告了芯片全自研才是唯一的道路。
这条路,华为做了,无数的人耻笑买来的猪肉好吃为什么还要自己养猪,结果华为用50%的市占率,一度把苹果拉下马的惊人业绩,告诉大家,只有自研芯片+自研算法+自研操作系统,才是唯一的出路。更可笑的是,华为不行了,市场又被另外一个自研生态的霸主全部夺走了,这就是苹果。
这条路,谷歌正在探索,Tensor只是谷歌小试牛刀,做硬件一直都是谷歌的梦想。终于,谷歌发现,长期依靠ODM伙伴代工的Pixel,没有最辣鸡只有更辣鸡,兜兜转转,还是得自己亲自下场,所以有了Tensor,也有了更广阔的想象空间。要知道,做不做手机对谷歌不重要,但是在一个封闭的软硬件体系上开发更为强劲的安卓互联生态,这才是谷歌的梦想。
今天官宣的这颗芯片,我只能说,会和大家之前市看到市面上的所有小试牛刀的图像信号处理器、和PixelWorks图像优化芯片都不一样,它所承载的,首先是OPPO对公司未来研发转型的一个态度,其次,这颗芯片的复杂程度,远超出一般人的想象,它当前所能提供的性能,也不是骁龙888相关模块能比拟的。它能够给SoC带去充沛的计算支持,极大减轻SoC在极限场景下的压力。更重要的是,这颗芯片的制程比较先进,这意味着OPPO可能已经在做更先进制程,更复杂任务的处理器了。这才是OPPO最大的想象空间。关于这颗芯片的技术解析,我们已经做好了充分准备,期待14号吧! 对于每个新入局芯片的厂商来说,技术上需要面对的问题就像是马里亚纳海沟,深不见底。对于OPPO来说,他们的目的绝对不是单纯为了一颗小小的NPU,而是为了以后更多的芯片打基础,让自己的芯片打响第一枪。
现在手机的ISP性能其实已经很强大了,我们可以看到一加9 Pro已经支持了4K 120Hz的视频拍摄,Find X3 Pro和许多骁龙888的机型也支持了4K 30帧的HDR视频拍摄和8K的视频拍摄,这些强大的功能放在过去的手机上都是不敢想的。
但是在计算摄影的时代,由于算力的限制,我们的手机依然无法把强大算法运用到高分辨率的视频上,直到今天,OPPO的许多视频功能并不支持4K分辨率的视频就是这个原因。当有了性能强大的NPU后,一切就会有所改变了。除此之外,有了强大的NPU手机也可以进行许多更加复杂的AI运算,能做的事情相比于ISP肯定要多很多,多处理器平台的影像调试难度相比于以前也会更加简单,不同处理器平台的手机影像能力不同的事情将会不复存在了。当然,OPPO这颗NPU具体能做什么,我们还是得等到发布会结束再说。
作为国内主要的手机厂商,拥有更多属于自己的技术是一件必须的事情,不停留在泛用性的东西以及行业通用解决方案,而是坚定的走自己的技术路线,手机行业才能多几分活力,对于每家手机厂商来说,都是如此。 最近有部分 SoC 厂商说,现在芯片的性能非常强大,其他厂商没有必要再做单独的 NPU 或者 ISP。那么 OPPO ,为什么还要坚持做这么一颗独立的 NPU ?我觉得这个东西可以用之前我对于 Apple M1 系列芯片的结论来解释。
手机上的 SoC 或者 PC 上的 CPU 和 GPU, 它们都是通用型的计算芯片,简单来讲就是你可以用它们做任何你想做的事,但是它的效率并不高,比如说你要让 CPU 去做图像处理和计算机视觉当然也能做,代价就是性能低功耗高。
这个逻辑是显而易见的,要不然 SoC 为什么不靠 CPU 去算,而是要在 SoC 里集成 ISP 呢?肯定还是因为 ISP 比 CPU 更快功耗更低嘛。
既然 SoC 厂商自己做了 ISP 和 NPU,那么自然不希望终端厂商又去搞一个独立的 ISP 和 NPU.
但是对于终端厂商来说,肯定是想要做出差异化的。
大家都用一颗 SoC, 硬件都一样,那么想要做出差别就只能靠软件算法和不同的 CMOS.
这几年的经验告诉我们,算法和 CMOS 也卷得差不多了,所以如果能加上一个独立的,专门为自己算法定制的 NPU, 也就意味着有可能做出更强的效果。
这一点可能要等这颗芯片的规格和特新公布的时候才能知道了。 在大部分情况下,短期看来确实是造不如买,因为造需要短期内投入巨大的成本
但事实上有一个因素是很多人都忽视了的
就是你未必能一直买得到
当因为经济,政治甚至是环境问题导致买不到的时候,造的优势就出来了,虽然高成本,虽然可能不够优秀,但至少有,比没有强
所以对于已经有一定规模,有充裕资金的企业,需要进一步扩大规模提升利润时,必须去尝试造,而不是只依赖买
你能买的东西,别人当然也能买,那就意味着你相比友商没有竞争力,友商只需要和你打打价格战,马上把你利润压缩没了
但一旦你有了友商没有的东西,价格战就很难对你继续生效
与此同时,因为你有了自己造出来的东西,在买的时候也有了更强的议价权,能进一步压低采购成本
研发这东西就像是浴火重生,痛苦是一定痛苦的,但必须忍受这部分痛苦,才有可能让实力再上一个台阶 泻药,看了一圈大伙讲的都很多了,讲的也很到位,不是我这种菜鸡可以攀比的。但是我觉得我们还是有必要溯一下源,为什么阿绿要先从独立npu开始做。
首先设计的难度和工作量不是一点点大,而且相比制造来说,设计同样需要累积大量的know-how,所以真正的设计巨头需要人力和时间的双重积累,海思就不说了,海思比我岁数都大,也比现在正在读体系博士的这帮hxd差不多大。而mtk就更不用说了,mtk一家设计公司的规模,都有5位数了。
所以现在指望oppo凭空造一个5nm的soc上机器不现实,也不科学。但如果能从国内外挖到一部分资深专家,配套校招和社招的人手,是在算法层通过自己做npu配套自己的算法还是可以一谈的,如果有能力的话,还可以针对国产存储芯片的特性进行针对性的io优化。同时如果设计端与算法配合合理的话,能够在影像方面起到比较大的加分。这也就是他相比集成式soc里的npu的亮点。 我认为独立NPU芯片有两个意义。
手机摄影的权重越来越强。受制于物理尺寸,镜头和模组只能那么大,进光量只有那么多。目前的主流思路是通过后期算法处理(如HDR,降噪),提升画质,这就是计算摄影的概念。
虽然说,外购的旗舰SOC通常就有不错的AI模块,但国产手机厂商的旗舰系列并不占大头,主要还是靠中低端走量。中低价位的手机,负担不起过贵的高端SOC,而中低端的AI算力未必很高。如果厂商能有自研的NPU模块,就能灵活选择搭配,成本可控地去补充图像处理能力,让千元机百元机也有机会享受计算摄影带来的画质提升。
另一方面是,自研NPU芯片能打通软硬,实现算法和硬件之间的协同设计,达到1+1>2的效果。多数手机厂商要么是买算法,要么是自研算法,总之能把图像算法抓在自己手里。但这些图像算法未必就能在第三方硬件上高效运行,像上百种常见的算子,就不太可能全部原生(高效)支持。加上手机端,功耗和效率都要考虑到,涉及维度很多,只依赖别人的硬件,很难达到完美,可能还必须要用硬件厂商打包卖的算法。如此跨平台就会很痛苦,比如从高通转到联发科,就要重新试配一遍,或许还要大改特改算法。试想如果软硬件都自家做,内部打通,那么算法需要个什么算子,硬件就努力去高效支持;硬件遇到实在改不了的坑,算法也会想办法找补。
另有一个可能存在的意义,就是积累芯片设计和流片经验,为日后打造全功能的SOC做准备。