第一,流畅的体验——每个人一眼就能看出来
我的第一台120Hz设备是iPad Pro 10.5。在iPad上使用120Hz的体验就像丝滑的牛奶。借助iOS的非线性动画,我意识到有比iOS更流畅的东西。当时疯狂爱上了高刷新率的感觉,把显示器换成2K144Hz,折腾了好久。当然,我最终还是回到了混合状态。
图>高刷新率的屏幕绝对是可感知的。我采访了五个没有使用高刷新率设备的用户,他们第一次滑动时都感受到了视觉流畅性的这种差异。然后我让他们看120Hz和60Hz刷新率的屏幕滑动对比,他们都觉得60Hz设备看起来很卡。这次测试在他们的脑海中形成了强烈的视觉记忆。
图>高刷新率用起来很爽,所以我不建议大家频繁对比120Hz设备和60Hz设备,因为这样的对比会无限放大120Hz的清爽感,让你忘记之前60Hz的流畅,没有对比就没有伤害。
但是高刷新率带来的体验绝对不是清爽流畅那么简单。本文不打算解释高刷新率的技术特点,而是想分享一下自己对高帧率内容路径的理解,对高帧率含义的理解以及对应用的期待。
二、硬件基础——高刷新率屏幕
1.首先要有高刷新率的屏幕
自从1加7 Pro在国内采用90Hz屏幕后,越来越多的厂商加入了高刷军备竞赛。三星在今年的S20系列中使用了120Hz屏幕,只提供了FHD+120Hz和QHD+60Hz的组合选项。虽然QHD+120赫兹可以在硬件上实现,但该选项是为了延长电池寿命而锁定的。另一方面,OPPO更激进地开放了QHD+120Hz的选项,给用户更多选择。接下来,一加8等众多国产手机系列将继续推动高刷新率屏幕的普及。
图>高刷新率屏幕不仅高端有机发光二极管才有。去年,Redmi K30率先实现了120Hz屏幕的LCD版,为千元手机市场开辟了新的战线。未来低端手机很有可能在高刷新率下继续发力。
2.你必须拥有旗舰处理器的性能
高刷新率的出现打破了处理器性能过剩的僵局。目前,高帧率游戏需要更强大的处理器性能来维持稳定的高帧率。高通骁龙865必须要有冰风散热器才能保持稳定的120Hz刺激战场。
很大程度上,处理器的性能已经成为了很多低端手机产品中高刷新率屏幕的障碍,因为低端处理器无法移动高刷新率屏幕,所以简单的浏览网页就可以了,基本上算是彻底的游戏破局了。
注定了目前高帧率游戏仍然是旗舰手机和游戏手机的特殊事件。如果普通用户也能享受到高帧率游戏,那还是需要等待硬件性能的提升和价格的降低。
3.如何在续航和车身沉重之间做出选择
续航问题是今年高刷新率手机面临的最大问题。2K高分辨率、120Hz高刷新率的功耗远高于1080P60Hz。高刷新率需要更强大的驱动模块,而机身占用的空空间远远大于60Hz屏幕驱动,严重占用了电池的空空间,这也是目前市场上高刷新率手机续航普遍一般,续航好的都是笨、厚、重的机型。
目前各大厂商给出的选择似乎只有两种:快充、轻续航差和重续航。快充方案可以更快的补充电量,而大电池则可以保证足够的续航时间。至于怎么选,就看消费者自己的喜好了。
三、应用场景——高帧率内容
高刷新率只是一种屏幕显示技术。重要的是能带给我们真实感受的高帧率内容。内容的战场集中在影视节目和游戏上。2020年的今天,我们可以玩120Hz的游戏,比如腾讯游戏里的和平精英,QQ飞车。去年我们也看了4K120Hz的双子杀手电影,可以说高帧率的内容已经开始在大众消费领域崭露头角。
1.高帧率影视节目
采用高帧率规格制作的视频在外观上会更加流畅。这种感觉会随着图片内容的不同而改变。在运动范围较小的画面下,高帧率带来的提升并不明显。就像看一个数码博主打开盒子,高帧率绝对不会产生太明显的画面变化。但是如果画面是大范围运动的场景,比如短跑、动作片,由于帧率较高,涂抹、模糊的感觉会大大降低,让你感觉画面极其流畅。
李安的作品《双子杀手》首次将120Hz用于电影拍摄,带来了不一样的电影观感。这种认知也在大众眼中形成了两极分化的声音。有人觉得效果很震撼,打斗场面流畅精彩;还有人觉得效果太真实,导致误以为眼前的画面是摄影棚,看电影的体验不舒服。
24帧影视规范确实是“电影感”的一部分,不同的用户对艺术的欣赏有不同的看法,有人说电影高于现实,应该以不同于现实的方式呈现。这种低帧率带来的画面感可能是电影一直深受喜爱的原因。
高帧率视频内容的制作也需要更多的成本,其中包括更多的编辑操作和更大的硬盘容量需求。但这类影片来到流媒体行业后,要求平台有更高的网络环境。对于消费者来说,也需要更快的网速来运行高清高帧率的内容。
客观来说,高帧率内容对生产者和消费者都提出了更高的要求。不可否认,未来高帧率视频内容和24帧电影都将存在于消费市场,用户可以根据自己的消费能力和喜好进行选择。
2.高帧率游戏
相比高帧率视频内容,高帧率游戏似乎更加成熟。主要原因是基于硬件计算能力的实时渲染,对存储和网络环境要求不高,不会受到内容传播的限制。
高帧率的游戏内容给玩家带来震撼的视觉效果,尤其是FPS游戏,可以流畅快速的移动,玩更刺激的操作。对于游戏等快速变化的内容,高帧率可以大大提升用户的操作体验,实现更快的操作。
就我自己较差的吃鸡体验来说,高帧率可以让我清晰的看到场景的变化,让我不会因为在太小的屏幕上分心而错过细节的变化,让我也能有同样的快速反应。
第四,曲线救国——人工智能互补框架技术
优秀的硬件不是全部,高帧率的内容必须与之相适应。目前高帧率的内容明显不足。你在网上能找到的120帧内容样本不多,各大流媒体平台已经开始普及60帧视频内容。
越来越多的创作者一直在尝试制作更高标准的电影内容,未来更新的新片也会有更高标准的版本。然而,由于生产问题,旧内容似乎永久保持在这个标准帧速率,而没有再现。此时,Ai补帧技术为这些旧内容的“翻新”提供了契机。
1.视频内容如何补充帧?
Ai取景是一个非常有趣的过程。如果要形象地描述这件事,我首先想到的是Keynote中神奇的动人效果,两个PPT之间相同的元素。你只需要固定开头和结果的位置和大小,选择神奇的移动效果,机器就会自动在它们之间补上移动效果。其实这是过渡动画的一个Ai补充。
组成视频内容的框架显然比这个要困难得多。得益于目前处理器运算速度的提升,我们可以在一段等待时间内得到补帧的内容,甚至可以通过一些设备的硬件进行实时运动补偿。我们已经在索尼电视和OPPO Find X2 Pro上看到了这样的技术应用。有趣的是,动画和影视作品有不同的互补框架。
2.动画内容的补充框架
相反,动画是最难填帧的内容,尤其是以往的动画作品受限于一拍二、一拍三的绘制方式,只绘制了24帧的8个动画,每三帧变化一次,导致Ai填帧只能在第三帧和第四帧之间插入一个计算好的过渡帧,另外两帧只能插入之前相同的帧, 所以它们实际上不能有很好的效果,无论如何填充,都无法恢复完整流畅的运动效果。
然而,补帧技术在动画领域并非一无是处。事实上,它为艺术家提供了更好的创作思路。每秒24帧只需要画8帧,画出动作开始和结束的状态。剩下的交给Ai自动计算补帧,将大大提高动画行业的制作效率,即摒弃原来一拍三弹重复帧的方法。这样,虽然不可能还原以前的经典动画作品,但在创作新的动画作品时,帧补技术会很有帮助。
目前用于Ai补帧机算法训练的内容更趋于逻辑化,动画中包含了太多无厘头的打斗场景,比如One Piece和龙珠。艾很难编出这个动作场面,或许直接就不吃了。未来如果增加没有现实逻辑的内容训练,可能会逐渐提高这个内容的补帧效果,但短期来看,训练集还是不够大。
3.补充电影和电视内容的框架
相比之下,在真实场景拍摄的影视作品,更容易进行Ai补帧,因为大部分场景都是有逻辑的,而且Ai机器训练的内容也很多,补帧效果自然会更好。
OPPO Find X2系列的O1超画质引擎支持2K分辨率下30帧到60帧的实时插值,以及1080P分辨率下60帧到120帧的插值。这是我第一次在手机上体验这个功能。我其实体验过一段时间,发现效果达到了可分辨的程度,尤其是遇到大面积快速移动的物体时,补帧效果特别出色。
从补帧的技术特效来看,最好的内容载体是体育运动激烈的体育赛事直播,因为运动员的动作非常快,补帧后的效果清晰可见。OPPO也在第一批中适应了腾讯体育、腾讯视频、网飞、油管、爱奇艺等主流媒体。
4.其他内容需要填框吗?
除了影视内容的补帧,我也在思考MEMC是否可以全球改编,这样就不用等游戏公司去适应高帧率游戏,也不用等App厂商去适应高帧率应用,听起来就更好了。
仔细想想,这是一种吃力不讨好的行为。以目前MEMC算法的能力,在高通骁龙865上补偿2K视频从30帧到60帧是相当困难的。根据我的实际经验,中间过于激烈的场景是编不出来的。实现游戏中瞬息万变的激烈战斗场景,计算量非常大。与其这样,还不如等厂商推出高帧率版本,在游戏运行时进行高帧率渲染。
至于120Hz运行的软件,其实是开发者在适配时的一些工作,工作量不是特别大。只要硬件性能足够,支持120Hz还是比较简单的。这种应该由开发人员来做的事情,交给硬件来做高难度的运动补偿,可以说是本末倒置。我们只能希望所有的软件开发人员都能积极适应,毕竟这关系到产品好不好。
5.探索未来——高刷新率的现状
我从来不奇怪为什么那么多人吹嘘高刷新率的体验,因为人们永远不会忘记那种奇妙的体验。技术会不断进步,用户体验只会越来越好。除了那些怀旧电影,未来还会有更多高帧率的内容。我想通过回答三个问题来结束这篇文章。
1.高帧率内容会改变生活吗?
我曾多次幻想高帧率的内容能带来无与伦比的视觉享受。它确实有魔力让每一个精彩瞬间都更加绚丽,但绝对不会让烂到发昏的内容再发光。我坚持认为改变生活的一定是“内容”,而不是“形式”。
智能手机的出现提供了快速获取内容的途径,而手机摄影则给了我们更多记录生活内容的手段。高帧率更多的是这些内容的一种新的显示形式。它不能为我们创造新的内容。它只是以另一种形式展示同样的内容,所以它绝对不会是改变我们生活的因素。
2.高刷新率屏幕用了就不能回去吗?
如果你告诉我你不能从120Hz屏幕回到60Hz屏幕,那么你大概是想向我表达第一次看到120Hz的震撼吧。和你一样,第一次用120Hz的屏幕就被深深吸引。但我还是想告诉你,这种感觉是完全可逆的。
目前我的生活处于60Hz和120Hz的混合状态。iPhone和Macbook都是60Hz,iPad Pro 2018和OPPO Find X2 Pro都是120Hz。在这些设备反复切换的过程中,除了短暂的几秒钟,我不会因为帧率的不适而放弃使用低刷新率的设备。即使是60Hz的显示设备,依然给我足够流畅的动画体验。
人眼是一个具有高度适应性和可调性的器官。如果在120Hz下长时间浏览后再看60Hz手机,会觉得手机动画卡顿,内容下滑,眼花缭乱。但当你用60Hz 10分钟,这种停滞不前的不舒服感就会逐渐消失,这就是眼睛的自我调节。所以,120Hz不会导致眼睛回不去,但回不去的最好的就是大脑中120Hz丝滑流畅的记忆。
3.高刷新率方向对吗?
高刷新率的屏幕除了要消耗更多的电量,消耗更多的性能外,一定会给你带来愉悦的体验,这注定是一个不会出错的方向。现阶段需要解决的主要问题是提高芯片性能和降低功耗。
我相信如果可能的话,每个人都希望他们的设备有一个刷新率更高的屏幕。未来随着高帧率内容的丰富,高刷新率屏幕的设备一定会提供更好的观看体验,你可不想错过。
目前高刷新率的屏幕价格昂贵,仍是旗舰手机考虑的问题,电池续航和性能也是亟待解决的问题。可以说,高刷新率的屏幕仍然不是大众市场的消费产品,高帧率的内容远远落后。
现阶段,我认为高刷新率屏幕是一个非常好的选择,但是如果没有高刷新率屏幕,你就不会死,更不用说没有经验了。无论如何,市场需要更多高刷新率的屏幕设备,为这个“平稳的未来”开路。