马里亚纳 Marisilicon X,能否弯道超车? 马里亚纳X芯片下沉至OPPO Reno8,高通联发科同台竞技

上周微信更新了一个史诗级的功能!


无论是安卓还是 iOS,现在都已经正式支持 4K HDR 视频传输,而且还能点击原视频。(限制 1GB 大小)


机哥玩了一整天,就当是好好地出一口 200MB 的恶气。


斗图有什么意思。


斗 4K 视频呀!把微信服务器的硬盘和带宽都给我吃满它!

马里亚纳 Marisilicon X,能否弯道超车?

但是!我说但是了!


在互相发送/接收了一堆 4K 视频之后,机哥发现了一个问题。


虽然抽屉里有几百台手机,但除了 iPhone,我好像找不出多少能把 4K 视频拍好的手机。


注意,不是拍,而是拍好。


特别是夜景视频,只要夜景功能一开就是 1080P…那怎么可以的呀?


库克赢麻了…

马里亚纳 Marisilicon X,能否弯道超车?

正当我抱怨的时候。


远在对面的阿姜抬起了头:除了 iPhone,好像还有一个可以试试。

马里亚纳 Marisilicon X,能否弯道超车?

OPPO Find X5 Pro


机哥的第一反应,就是「我不信」。


但当我真的拿起手机,出门拍了些 4K 视频之后。


好像有一点点不同。

它,支持 4K 夜景视频。


它,也支持 4K HDR 视频。


而且,还是 20bit 的高画质 4K 视频!

这是从视频中截取的一帧,机友们注意康康广州塔本身的细节和地面灯带的细节以及夜空的纯净度。

别看右边好像总是会更亮,但你康康画面文字、灯光的高光控制,右上角暗部飘过的泛红噪点,OPPO 的表现明显都要更好一些。


为了把 4K 视频拍好,OPPO 在 Find X5 Pro 上多装了一颗芯片,就是之前那鼎鼎大名的「马里亚纳 Marisilicon X」。


可以说,Find X5 Pro 的影像这么强,这颗芯片有一半的功劳。


经过上周的发布会,大家应该已经初步了解了「马里亚纳 X」是什么东西。

但,机哥觉得还可以补充一下。


扒光马里亚纳 Marisilicon X


马里亚纳 X,是一颗 DSA 架构的,影像专用的, NPU 芯片


别跑,我稍微举个例子你就懂了!


DSA 架构,是通过专用的运算性能来专门负责某项运算「加速」的新一代架构。


我拿洗衣服来举例子,衣服就是手机要处理的数据,那洗衣液就是 CPU/GPU。


DSA 架构的芯片,就是在洗衣服的时候,额外增加的去渍剂,它只针对污渍增强洗衣服的效果。


也就是说,它是点对点增强某一项处理性能的。


所以,未来你可能还会看到很多各种各样的 DSA 架构芯片,那时候你得记着,OPPO 这颗马里亚纳 X,是里面专门用来加速图像运算的类型。

再举一个可能不太合适的例子,这颗额外的 NPU 芯片就像是你的头里面多长了一颗小小的,特别特别会算数学题的小脑袋一样。


这颗脑子虽然小,但它整个脑子都只做数学相关的处理和对应带来的数学计算,由于专脑专用,它还带来了一些它才有的特性。


比如算数学特别快…之类的。


马里亚纳 X 也一样。


它在 AI 运算性能方面有着碾压式的表现,运算性能达到 18TOPS,每秒可以进行 18 万亿次运算


它还提供了超过目前行业通用平台 4 倍的 ISP 位宽以及动态范围,支持 20bit 处理位宽和 20bit 的动态范围。

在这一项性能上,它真的是超过苹果 A15 的,就是库克来了也得这么说。


用上这颗芯片后,OPPO Find X5 Pro 就能够通过更强且专门为影像所用的算力,去更快地运算自己的算法,拍出好的影像内容。


这下明白了吧~

除了更快更强,马里亚纳 X 还有一个优点。


由于工作更专注,这些 DSA 芯片的功耗还会更低,或者说能耗比更高。


有了这颗功耗更低、算力更强、运算速度更快的 Marisilicon X 芯片后,OPPO 开始着手在之前不太好处理的 RAW 域进行图像优化。

Emmm,又会有一点点复杂,机哥尽量简单一些把它说清楚。


首先,用手机拍摄影像是需要经过好几次转换的。


它需要把从传感器得到的 RAW 图像转换为 RGB 图像;


在 RGB 域后,再次经过编码,转换为 YUV 域的图像。


在 YUV 域的时候,相机的 AI 算法会介入,对图像进行处理。


最后,再输出一张我们看到的照片。

但是!


每一次转换,数据都会有损失。


到 YUV 域的时候,在手机的算法参与优化图像的之前,这些图像因为算法转换已经有损了。


怎么说呢,它就像是做饭,在你烹饪之前,这些食材已经经过了冷冻/长途运输。


拿着这些食材,你废更多的功夫,往往也不如新鲜食材的口味好。


懂行的广东人都知道,食材要吃新鲜的。

那我们的算法可不可以在图像还没转换到 RGB 之前就参与处理一遍呢?


可以,但工序更多。


提前在 RAW 域处理意味着手机要处理更为庞大的数据量。

再加上要很快地出图,很多手机厂商都没有把运算前置到 RAW 域进行。


但额外增加这颗马里亚纳 X 芯片,可以支持高达 20bit 位宽的 RAW 域数据处理,4 倍于行业通用平台的性能,就能很好地解决这个问题。


目前高通骁龙8 处理器的 ISP 能提供 18bit 的处理能力。


特别提醒:用了马里亚纳 X,也是可以接着调用高通骁龙 8 的这颗 ISP 滴,两颗芯片都用,才是 OPPO Find X5 Pro 的核心方向。

由于马里亚纳 X 是能够提供 20bit 实时计算的,所以,OPPO Find X5 Pro 还支持 4K 20bit Ultra HDR 视频录制。


啊对!OPPO 后期还会 OTA 一个实时预览的功能,在拍摄页面就能清楚看到视频处理后的效果。


除了芯片外,如何处理影像的算法也是一个很重要的事情。


上回说 Marisilicon X 的时候,有机友说 OPPO 不如好好搞搞自己的算法


算法这事儿啊,其实,在 OPPO Find X5 Pro 上,也做了。


自主研发 3A 算法


手机上一直有一套固定的算法,叫 3A 算法。


所谓 3A 算法,就是自动对焦(AF)、自动曝光(AE)和自动白平衡(AWB)算法。


这三个自动算法决定着色彩、细节、清晰度等等的诸多内容,它有多重要,懂的都懂。

目前我们手里的手机,很多都以芯片/平台提供的 3A 算法为主。


这就出现了一个情况:由于产品迭代速度的问题,厂商针对算法的开发和训练的时间是很短的。


短时间内,往往很难发挥出 100% 的效果。


这和处理器的调校一样,很多厂商往往在中后期才会说自己「100%发挥性能」、「满血榨干」。

但是呢,你有没有发现这个「100% 发挥性能」只有特定厂商才用?


像华为、苹果、谷歌,你基本不会想说他们能不能发挥 100% 的性能,除了经验老到,还有一个原因:因为芯片是他们自己做的。


换句话说,假如 3A 算法也是由厂商自研,这个问题是不是就能解决了?


OPPO:是的。


所以 OPPO 在 Find X5 Pro 上自主研发了一套 3A 算法,通过自主研发去针对性地解决产品上的一些问题。

加上自主研发的马里亚纳 X 芯片,保障了手机的影像算法能发挥更强的性能。


不过啊,会后群访里 OPPO 自己也说了,马里亚纳 X 的能力实在太强,目前开发程度其实只有 30% 左右。


未来,还长呢!


除了这个 3A 算法,还有前面提到的 RAW 域 AI 算法,也是 OPPO Find X5 Pro 的一个重点。


有了这些算法和芯片的加持,OPPO Find X5 Pro 还可以进一步增强 APP 的影像表现。


包括直接用微信拍照、抖音拍摄视频等,都可以通过 RAW 域算法和芯片进行画质的优化。

这些,应该搞明白了吧?


马里亚纳 Marisilicon X 带来的不只是算力


除了提供算力之外,Marisilicon X 其实还给 OPPO 带来了更多的东西。


它,是第一颗由 OPPO 从 0 到 1 自主研发的高性能 6nm NPU 芯片。


它的量产上市,意味着 OPPO 真正具备了自主研发这类行业领先的高性能芯片的实力。

当然,这也意味着 OPPO 多年的芯片投入有了回报。


我记得之前聊马里亚纳 X 芯片的时候,有个机友留言是这么说的。

其实也没错,OPPO 之前也说把第一颗自研芯片叫做马里亚纳 X,正是表明了它的研发难度像马里亚纳海沟一样。


说起来,最早曝光 OPPO 要研发自主芯片的时间点差不多是 2018 年,那会儿 OPPO 的自研芯片团队还在「挖人」。


年底的科技大会上,OPPO 宣布加大技术研发投入,从 40 亿一下子提升到 100 亿

到 2019 年底,「马里亚纳计划」这一内部信息曝光。


在未来科技大会后的采访里,OPPO 直接告诉媒体:OPPO 已经具备芯片级能力。


2020 年底,大家都等着 OPPO 掏出这颗自主研发芯片,但…没有。


只是那时,OPPO 又悄悄把未来三年的研发费用调整到了 500 亿

一直到消息曝光的三年后,也就是 2021 年底,这颗芯片才终于发布。


有三年磨一剑那味儿了吧?但这三年磨一剑,还是没能完全磨好。


又是几个月后的现在,Find X5 Pro 上这颗马里亚纳 X 芯片也仅发挥了 30% 左右,这颗芯片的生命周期估计至少有两年左右。


从这些故事,你应该能看出来这颗芯片有多难做。


庆幸的是,它还是做了出来。

这怎么看,都是一件好事吧。

继旗舰系列Find X5/X5 Pro之后,OPPO高端系列的最新产品Reno8 Pro也升级为双芯,马里亚纳MariSilicon X从旗舰下沉至高端系列,让Reno8 Pro/Pro+能够实现4K 30帧的视频录制规格同时支持AI视频增强的能力,让夜景拍照更加清晰,人像拍照更加自然、真实、通透的效果。

高端Reno手机的出货量将会是旗舰Find手机的数倍。OPPO中国区总裁刘波在Reno8发布会上透露,从2019年面世至今,整个Reno系列在线用户数量已经超过4000万。这无论对于OPPO自研芯片降低成本,还是积累经验,都具有积极作用。

马里亚纳X芯片下沉至OPPO Reno8,高通联发科同台竞技

更有趣的是,Reno8 Pro的双芯同样是两个版本,天玑8100-Max加上马里亚纳的Reno8 Pro+,以及第一代骁龙7+马里亚纳处理器的Reno8 Pro。

近几年,联发科争夺高端手机市场份额的攻势明显,Reno8 Pro+无疑是联发科冲击高端市场的关键一战。

马里亚纳X芯片下沉至OPPO Reno8,高通联发科同台竞技

双芯下沉,高端手机影像功能卷到新高度

马里亚纳MariSilicon X是OPPO自研的影像专用NPU(神经网络处理器),采用台积电6nm工艺,具有11.6TOPS/W的超高能效比,配合主控SoC天玑8100-MAX 5G处理平台,以及全球首发的第一代骁龙7,Reno8 Pro/Pro+的双芯协作能够带来显著的摄影功能提升。

如今市场上的主控芯片+影像转用的双芯手机,最重要的价值就是提升影像功能,特别是暗光环境的视频拍摄效果。这是因为,要实现更加自然的AI拍照,以及要对视频拍摄进行实时优化,都需要大算力支撑,但通用SoC无论是算力还是算法都有所限制。

因此,安卓手机阵营选择了在主控处理器之外额外增加一颗芯片来提升手机的影像性能。

不过,想要提升摄影能力,仅靠一颗影像专用芯片还远远不够。手机影像系统是一个很长的链条,包括前端传感器、镜头、马达,承载图像处理的ISP芯片,以及后端标定和调优等过程。

在OPPO Reno8上,与马里亚纳MariSilicon X共同协作提升摄影性能的还有定制的摄像头,工作方式非常像人类的视觉系统。

OPPO Reno8系列前置摄像头为3200万像素超感光猫眼摄像头,集成OPPO自研RGBW图像融合单元和RGBW四合一像素融合算法,大幅提升进光量,较上一代产品感光能力提升60%,噪点降低35%,带来更加极致的夜景人像自拍效果。后置搭载5000万像素索尼旗舰大底主摄,拥有旗舰级配置。

马里亚纳X芯片下沉至OPPO Reno8,高通联发科同台竞技

Reno8系列的影像功能升级,可谓是Reno系列最“昂贵”的一次影像升级。

有了双芯,Reno8系列可以实现过去因为算力不足无法实现的4K 30帧录制,同时支持AI视频增强。能够轻松应对弱光环境和逆光环境,实现芯片级4K超清夜景视频,芯片级4K HDR视频。

当然, Reno8系列的拍照性能也大幅提升。OPPO测试数据显示,两颗芯片能够在不同的照度下,带来平均动态范围提升26%。由此可以带来更细腻、颜色更逼真的照片,在超大逆光场景,也能很好保留细节。

AI计算单元18万亿次/秒的超高算力,能够带来自然、真实、通透的自拍,也能像人眼感受世界的方式一样,认识画面中的噪点并能做到逐一剔除它们,保留更多细节。

从雷峰网实际的体验看,在马里亚纳MariSilicon X的加持下,Reno8 Pro+的暗光视频拍摄效果确实有肉眼可见的提升。

当高端手机上拥有了双芯,能够有芯片级4K超清夜景视频和4K HDR视频拍摄能力,也就意味着高端手机的摄影能力的竞争,又到了新的高度。

马里亚纳走量,对OPPO自研芯片有何价值?

从消费者的角度去看,当OPPO将其自研芯片应用到高端手机,可以在预算不增加的前提下,享受到更好的手机摄影功能。

从OPPO的角度,将自研芯片应用到高端系列中,增加Reno8系列的卖点是最容易看到的价值,其次就是让自研芯片的价值在更多手机中展现。刘波透露,OPPO做了一笔巨大的投资,向台积电下单上千万颗芯片。

设计一款先进制造工艺的芯片成本高昂,马里亚纳MariSilicon X采用的台积电6nm,固定成本就超过数亿美元。因此,如果是一家芯片公司,想要盈利首先需要大量销售芯片以摊销固定成本。

不过,雷峰网认为,OPPO将马里亚纳应用到出货量更大的Reno系列中,将成本并非他们首要的考虑,更重要的考虑是让更多消费者意识到OPPO自研芯片的价值,以及对OPPO自研芯片经验积累的长远价值。

马里亚纳作为OPPO的首款自研芯片,在帮助OPPO芯片团队进行磨合、产品性能验证以及经验的积累方面的价值更为重要。

马里亚纳NPU只不过是OPPO自研芯片的起点,其更长远的目标是能够像苹果、华为一样通过自研芯片构建独特的竞争优势。

联发科和高通的高端之战

OPPO Reno8系列,Reno8 Pro+是天玑8100-Max的版本(8GB+256GB版本售价3699元

12GB+256GB版本售价3999元),Reno Pro是骁龙7的版本(8GB+128GB版本售价2999元,8GB+256GB版本售价3199元,12GB+256GB版本售价3499元)。

从OPPO的角度,一定会致力于在同一个系列的产品中给消费者提供接近的使用体验,但底层硬件的差别确实可能在日常使用中体现出差异,对比来看,Reno Pro+从处理器到散热再到存储都有更高配置。

仅从硬件参数来看,第一代骁龙7平台采用三星4nm制程工艺,CPU架构是一个主频是2.4GHz的A710超大核,三个2.36GHz的A710的大核,以及四个1.8GHz 的A510小核,GPU是骁龙888同款Adreno 660,图形渲染速度相比上一代骁龙778G提升80%,AI性能提升30%。

天玑8100-Max采用台积电5nm工艺,八核CPU架构设计(4个主频为2.85GHz的Arm Cortex-A78核心和4个Arm Cortex-A55能效核心),GPU采用六核Arm Mali-G610。

手机是一个复杂的系统,手机SoC只是影响手机体验的其中一个重要因素。只是将两款定位相同的处理器放在同一个系列的产品中,虽然有部分配置的差别,但也让高通和联发科在同一个平台中竞技。

高端和旗舰手机市场,是所有手机厂商和手机芯片公司要争夺的市场。

Strategy Analytics预测,2022年旗舰机在全球市场的占比将达到31%左右,在2027年达到35%。另外,到2027年,高端手机的市场占比将达到17%,加上旗舰手机,在整个手机市场的占比将超过50%。

手机市场的主要参与者们都盯着旗舰市场的蛋糕,这块蛋糕,最终会如何分割?