数码科技AI视频增强妙手回春AI开超高清视频大门
来源:中关村网
近日,数码科技(股票代码:300079)与国内某知名动漫制作发行公司达成合作,将其基于深度学习算法的AI超分辨率视频增强技术(以下简称AI视频增强技术)应用于合作方数万小时的90年代动画片资源批量高清化,成为国内首个AI视频增强技术的落地应用案例。此次合作,将利用AI视频增强技术让现在即将被埋没,之前备受欢迎的动画IP,重新获得生机。
数码科技基于其10年的视频算法积累,将深度学习技术与视频超分辨率算法结合、重构,推出AI视频增强技术。其涵盖超分辨率复原和AI视频增强两大功能,可实现视频从低分辨率向高分辨率的多倍数放大(如x2~x4)和大分辨率(如超高清4K)处理,让视频更清晰、更美丽,让用户享受到更高清的画质体验。
数码科技的AI视频增强技术打开了AI技术与视频算法深度结合的大门,将加速社会各行业将超高清视频应用于生产、生活方方面面这个超高清时代的到来。目前,超高清视频作为全球视频产业的新一轮重大技术更迭,必将重塑产业生态链。此次AI视频增强技术的落地应用可以看作一把用AI开启超高清视频大门的钥匙,未来数码科技还将继续技术升级和专业积累,持续为视频产业赋能。
数码科技AI视频增强技术解读
数码科技的AI视频增强技术是基于深度学习技术,重新设计并提出自研的超分核心技术算法。可针对有损的视频场景、低分辨率视频流或视频文件进行实时放大、修复、复原,输出高分辨率、高清晰度视频,并经过神经网络的处理,有效修复编解码引入的图像错误,实现更优的超分效果,整体提升PSNR水平。目前,可针对任意压缩、编码格式的视频,在服务端或者终端,通过预处理或者后处理的方式,提供将低分辨率视频向1080p、2K、4K分辨率转化的超分服务。
核心技术1:超分辨率修复
·什么时候用超分辨率修复?
举个例子,一段低分辨率的视频,怎么在一个高清的终端设备上播放?在4K终端设备上,如何让720p清晰度的视频看上去更清晰和美丽?
当低分辨率视频源和高分辨率显示设备之间的不匹配,这个场景下我们可以使用超分辨率修复功能。
·超分辨率修复使视频更清晰
超分辨率修复是通过对AI超分算法,将低分辨率视频重建成高分辨率视频,在服务端或终端设备上,做到分辨率放大、修复。
图一左侧为超分前720P画面,右侧为超分后720P画面
核心技术2:AI视频增强
·智能修复视频,让设备自行脑补并修复画面
AI视频增强提供超分辨率、增强、修复等多种视频处理算法集合,采用视频画面特征数据的深度训练,对那些由于采集设备较差、网络环境欠佳、拍摄时间久远、画面抖动等等导致画质损伤的片源,通过AI视频增强技术去除视频中的毛刺、伪影、噪音、马赛克等,从而大大提高人眼视觉清晰度、流畅度的感知。
图二左侧源视频为360P,右侧为超分至1080P、并AI修补部分信息的输出画面
·智能插帧,消除画面顿挫感
使用AI视频增强功能,智能生成内插帧,将24帧/秒或者30帧/秒的视频重制为48帧/秒或者60帧/秒,消除画面中的顿挫感。
图三左侧源视频为360P,右侧为超分至1080P的输出画面
应用场景
老片翻新,经典作品重现超高清版本!
想象一下,画面粗糙的90年代电视剧、动画片要是能被修正为色彩华丽的画面,观看体验会有多棒!行业有大量的老旧片源,这些片源在当前智能设备、高清晰度显示设备普及的超高清时代已经无法满足老百姓观影需求,通过AI视频增强技术处理可以提升老旧片源清晰度,让经典IP重新焕发青春。
图四 某动画片的片段修复
通过AI视频增强技术的处理,原本比较模糊、灰暗的老片会变得清晰、明亮,同时消除源视频中人物的伪影,文字边缘的毛刺,变得更加细腻。同时,一些老旧片源中,因为当时的技术瓶颈和岁月的沉淀,经常会出现人眼不可分辨的模糊部分,或者因为胶片老化,在其转录成数字化影片后,出现部分画面残缺,AI视频增强可通过深度学习,自行修补,使画面更加细腻,为老片赋予新生。
智能监控,超高清时代下的低成本高效能监控方式!
一些科幻影视剧中,我们经常会看见这样的场景:某些调查机构,通过某种高科技手段,将无处不在的摄像头捕捉到的模糊影像放大,形成更为精细、清晰的图像,把嫌疑人人肉到底,帮助调查人员更精确地识别。数码科技AI视频增强技术,可以将监控到的视频流实时进行超分处理,AI修复监测画面,在现有探测设备和网络条件下,使画面更清晰、细节更明显。
图五 实时监测画面超清晰度放大、修复
同样的,这种将监控监测画面通过AI视频增强技术来提升画质、提高分辨率的方式,在医疗检测领域、舆情监测领域、勘探勘察领域有相似的应用场景。
数码视讯AI视频增强技术特点
数码科技AI视频增强技术,国内视频基础算法领域的领先技术!
当前,中国超高清产业发展面临着超高清片源少、终端硬件标准不统一、网络传输带宽压力等瓶颈。数码科技AI视频增强技术的推出,有望逐一解决超高清产业发展过程中的这几大痛点:
首先,AI视频增强技术突破了清晰度成本的限制,能够实现海量中低清内容的高清化,从而大大扩大了超高清视频的内容来源,有望突破被业界视为4K超高清产业发展的最大瓶颈。
其次,AI视频增强技术打破了终端的限制,解决了视频清晰度与设备不匹配的矛盾。
此外,AI视频增强技术打破了传输网络、摄录设备的限制。可在视频监控、视频探测等行业现有条件下,不改变网络带宽、不改变摄录设备的基础上,实现更为精准、细腻的高清晰度画面还原。