[PConline杂谈]最近的黑科技亮点既不是热门主流5G,也不是去年愈演愈烈的多摄像机之战,而是运动虚拟机械( memc )。
OPPOFindX2使用MotionClear视频的动态插值技术
3月6日发布的OPPOFINDX2除了众所周知的5G、2K分辨率、120Hz屏幕等外,还搭载了支持MotionClear视频动态插值技术的独立图像处理芯片,将30帧的视频转换为60帧
4月2日,一加也将在官方微博展上发布一加8系列新产品所搭载的MEMC插件技术,开启高框架生态元年。
120Hz屏幕才刚刚点燃,现在运动补偿技术又来了,孩子们,你有很多问号吗?
运动补偿技术,全称是motionestimateandmotioncompensation (以下简称MEMC ),是以提高画面整体流畅为目标的电视使用的运动图像质量补偿技术。
为什么高刷新率手机屏幕出现不到半年,MEMC就开始在手机上使用了? 目的和电视一样,是为了提高画面的整体平滑性。
很多朋友都觉得拥有120Hz的屏幕会让屏幕更光滑提高,这话只对了一半。
120Hz屏幕确实在理论上提供了更平滑的屏幕,但实际上屏幕的刷新率限制了屏幕的最高平滑度,相反,内容输出帧速率也限制了实际的平滑度。
目前大多数视频内容仍然以24Hz/25Hz/30Hz为主,缺乏对运动补偿技术的支持优化,120Hz屏幕的流畅体验可能仅限于系统级APP应用。 这充分说明——在硬件和内容之间有非常清晰的断层,视频内容的缺乏让作为先行者的硬件非常尴尬。
运动补偿技术的诞生是为了补偿内容与技术之间的背离,能够在传统的2帧图像之间增加1帧运动补偿帧,以提高视频的帧率达到更平滑的显示效果。
例如,我们看足球比赛的时候,以前以为运动员在不断奔跑中会出现拖尾,但是有了运动补偿技术,拖尾会明显减少,人眼会看到流畅自然。
为什么24帧视频一直称霸排行榜? 不能拍60帧或120帧吗? 平时我们玩游戏,为了使画面平滑,画面至少要达到30帧(最高60帧)。 也就是说,可以玩两个字——。
但是,对于视频内容来说,能够在短短24帧内顺利播放,真是一门不可思议的艺术。 其中的人妖在于拍摄录像时的画面是动态的,制作游戏时各帧的画面是静止不连续的。
通过摄像头拍摄足球飞走的场景,每秒24张照片中,部分清晰,部分模糊,有阴影。 这个模糊是基于物体的,有方向性的。 正是这个模糊,才能在大脑中形成一致光滑的画面。 关于24帧,最热烈的讨论是“电影是每秒24帧的艺术”。
24帧电影虽然有独特的“电影感”,但实际上也有缺点。 特别是在场景的快速切换和动作的表现方面,24帧电影给人一种不流畅的拖曳感,所以高帧游戏的画面流畅度远远优于24帧电影的画面。 通俗地说,每分钟显示的画面帧数越多,画面越清晰,看起来就越顺畅清晰。
那么,为什么电影在特效上花那么多钱,在帧数上却不提呢?高一那么? 事实上,技术上完全没有问题。 例如,李安导演的《比利林恩的中场战事》和《双子杀手》都采用120帧/3D/4K的拍摄参数,这样配置的电影只能说是昙花一现。
理由很简单,是成本的问题。 在以前的胶片时代,每秒拥有更多的帧数意味着需要更多的胶片。 从1秒24帧到1秒48帧、1秒60帧甚至1秒120帧,成本会呈指数级增长。 在数字电影普及的今天,存储问题仍然存在,需要更多的帧意味着需要更多的存储空间,需要更多的成本。
2023年《比利林恩的中场战事》上映时,世界上只有5家电影院可以上映120FPS/3D/4K版
另外,马需要马鞍,电影院的播放投影仪也需要用支持高帧率电影播放的投影仪代替。
例如,李安的《比利林恩的中场战事》,当时世界上只有5家电影院支持120FPS/3D/4K版的上映,但迄今为止全国范围内能支持120FPS/3D/4K版的电影院并不多。 所以要让电影走上高帧频的赛道,就要瞄准整个产业链。
当然,随着技术的发展,目前很多电影制作团队为了避免在拍摄时对视频的拍摄感到受挫,采用了60帧以上的帧进行拍摄,但为了最终的制作和发行成本,大部分电影发行公司仍然选择发行24帧版
作为低端电视的分水岭,MEMC是如何实现的? 既然电影拍摄制作无法实现高帧率,从AI算法入手,通过人工智能实现提高视频帧率,使画面在高速场景下更加流畅也是动态补偿技术诞生的目的。
目前动态补偿技术在电视端已经玩得不可开交,只是各家的叫法、名称不同而已。 像小米这样的大部分厂商直接被称为MEMC,索尼命名为Motionflow,LG命名为TruMotion,三星命名为AutoMotionPlus等。
索尼Z8H8K电视上使用的X-MotionClarity的锐利动态技术
名字不同,但本质是一样的。 是否拥有MEMC技术是低端电视的分水岭。 为什么大家如此重视MEMC技术,显然是因为MEMC技术可以实现提高视频的“帧率”,发挥了屏幕硬件的极限性能,增加了用户的观看体验。
那么,MEMC技术是如何实现的呢? 以索尼电视的Motionflow技术为例。
首先,视频中的足球从0/60帧的位置(左侧)移动到1/60帧的位置(右侧)。 虽然天空中间的位置没有记录在球的轨迹中,但算法会捕捉通过Motionflow移动的球,从画面背景自动生成第1/120帧,并插入到0/60和1/120之间,从而增加画面的整体平滑度
这样,MEMC技术的算法非常重要,如何正确识别移动物体,如何计算以产生正确的新帧,取决于各算法的智能程度。
另外,由于这样复杂的运算还需要强大的硬件支持,所以像索尼这样有名的电视制造商通常为了搭载自己的图像处理芯片而集成了MEMC的功能,是否拥有自己的图像处理新品也与低端电视存在差距
这样就没意思了,让我给你看看索尼最新的8K电视Z8H打开Motionflow后的实际效果。
由于网站视频上传受限,视频效果不明显。 然而,现场观察显示,开启清晰的动态技术后,整个画面的光滑度瞬间达到(提高 ),在画面中高速移动的汽车非常自然流畅,帧数过低,没有断层感,观察体验达到提高
未来,MEMC在手机上的APP应用手机将成为任何人的娱乐中心,高刷新率屏幕也逐渐成为所有旗舰手机的标配,针对目前视频内容匮乏的情况,MEMC技术的运用将成为手机用户的娱乐电影
当然,手机厂商的MEMC技术不仅优化了本地播放视频,还需要各APP APP的更新支持,可以进一步提高高刷新率、高帧率的使用体验。
然而,无论是MEMC技术还是高帧率屏幕应用,像5G一样,不得不接受这样的事实:手机对功耗、性能需求,以及对发热有更高的要求。 由于手机不像电视那样具有持续供电和大面积散热,手机厂商在进一步增加观影体验的同时,还需要解决后续出现的一系列“副作用”。 例如,采用动态帧率来确保功耗的平衡,使效果和效率最大化
蛋:能教你如何在电脑上利用MEMCMEMC技术是件好事,但要体验MEMC提供的流畅的丝绸体验,你必须更新家里的电视或换新手机吗? 对技术宅来说,当然是NO! 下面介绍两种在电脑端体验插件播放的方法。
首先登录SVP4官网,下载并安装免费版。
安装后,打开SVP4的控制面板,调节所需的效果和配置。
SVP4插件附带MCP播放器。 在MPC播放器界面中,右键单击以显示菜单,然后选择“选项”。 在此配置界面中找到扩展过滤器。 如果列表中已经有如图所示的过滤器,那就结束了。 如果没有的话,从“添加滤镜”开始添加这个滤镜。
当然,SVP4也支持PotPlayer等第三方播放器。 设置方法相似,只要设置与播放器选项对应的插件,就可以使用SVP4。 需要注意的是,SVP4免费版最多支持60帧的插件,付费版支持120帧。
一般来说,电脑的性能比电视和手机高,所以在SVP的协助下可以顺利体验高帧频视频带来的福利。 虽然可以通过HDMI连接电脑和电视,但是想花钱买120帧版SVP的人,请先确认电视和电脑屏幕的刷新率是否支持120Hz。