1、基于人工智能的图片视频压缩与增强帝视科技公司简介图片增强与压缩解决方案CONTENTS视频增强与压缩解决方案片源重制解决方案帝视科技公司简介福建帝视信息科技有限公司(Imperial Vision Technology)是一家致力于引领机器学习和计算机视觉前沿技术研究与开发的人工智能公司,利用人工智能技术来实现图片和视频的深度压缩和视觉增强,提供更加高效、低成本的图片和视频传输解决方案。2017年获得Nvidia中国最佳人工智能初创公司TOP 5等荣誉.愿景:以更低的成本享受更高清的图片视频服务,打造高清多媒体新时代,与您一起构建智能社会!公司目前3名顶尖高校海归计算机博士,所有核心算法及产品
2、都是自主研发,技术到达国际领先水平,并申请相关知识产权保护。公司现已申请:11 项发明专利(已公开)1 项实用新型专利 15项软件著作权互联网图片增强解决方案 为了降低带宽成本和传输延迟,大部分的互联网服务商都会选择对图片内容进行有损压缩以减少图片传输字节数,但这会导致图片尺寸缩小或者画面质量降低,使得终端用户无法享受高质量的图片视觉体验。对此,帝视科技基于AI技术的互联网图片增强产品为互联网服务商提供了一个两全的解决方案,利用终端的边缘计算能力对下载图片进行超分辨率放大和画质修复,在不增加额外的带宽成本和传输延迟的前提下提升终端图片的显示效果。图片 JPEG/WebP.服务端用户端图片解码帝
3、视图片增强帝视图片增强图片显示下载传输图片 JPEG/WebP.降低降低30%-50%码率码率图片解码帝帝视图片增强视图片增强图片显示下载传输降带宽降带宽提效果提效果图片超分辨率技术基于深度学习的图像超分辨率技术,可以将低分辨率图片重建成高分辨率图片,尽享图片的每个细节,帝视科技的高清图像重建效果达到国际领先水平。下载图片帝视超分下载图片帝视超分图片画质修复技术基于深度学习的图像画质修复技术,可以去除图片压缩过程产生的伪影,马赛克等问题,让画面更干净。下载图片帝视修复下载图片帝视修复产品规格规格指标基础版SDK高级版SDK支持功能画质修复画质修复,2倍超分,3倍超分支持图像格式Bitmap输入
4、,手机能解码的图片格式均可支持图像分辨率2048*2048以下支持平台Android5.0+,IOS10+支持机型Android:处理器采用Adreno 300系列以上或者ARM MALI T700系列以上GPUIOS:iphone6以上机型帝视产品是以SDK的形式提供给客户,可以嵌入系统或者APP中,对图片解码后的Bitmap进行增强视频增强与压缩解决方案-背景概述 随着网络技术的发展以及直播、短视频等内容形态的创新,国内互联网视频服务进入了快速发展期,目前互联网上接近80%的流量都是视频流量,这给视频服务商带来巨大的成本压力,为了降低带宽成本和传输延迟,大部分的互联网服务商都会选择对视频内
5、容源进行有损压缩以减少传输字节数,但这会导致视频分辨率缩小或者画面质量降低,降低终端用户的视频观看体验。另一方面,根据中国视频服务体验白皮书,视频清晰度是用户选择视频服务时最重要的因素,为了在激烈的市场竞争中获取更多用户,视频服务商需要投入更多成本提高用户的视频观看体验。清晰度35%加载速度30%内容28%其他5%网站品牌2%影响用户选择视频服务的因素影响用户选择视频服务的因素清晰度加载速度内容其他网站品牌视频增强与压缩解决方案 对于视频服务商的两难境地,帝视科技基于最新的AI技术提出创新性的解决方案,利用终端的边缘计算能力对下载视频进行超分辨率放大和画质修复,可以在不增加额外的带宽需求的前提
6、下提升终端视频的显示效果,或者在适当提高压缩比降低带宽成本的情况下维持原来的显示效果。视频压缩转码 FLV/MP4.服务端用户端视频解码帝视视频增强帝视视频增强视频显示下载传输视频压缩转码 FLV/MP4.降低降低30%-50%码率码率视频解码帝视视频增强帝视视频增强视频显示下载传输提效果提效果降带宽降带宽产品规格规格指标基础版SDK高级版SDK支持功能画质修复画质修复,2倍超分,3倍超分支持视频格式yuv帧输入,yuv帧输出支持视频输入分辨率移动端最高360p,PC端最高540p支持平台Android5.0+,IOS10+,Windows,macOSX支持机型Android端支持采用高通骁龙
7、660/820/821/835/845的机型IOS端支持iphone6s/ipad air 2以上的机型PC端支持具有DirectX 11能力的独立显卡和部分集成显卡(Intel i3/i5/i7,AMD APU)机型帝视产品是以SDK的形式提供给客户,可以嵌入终端播放器中,对播放器解码后的视频帧进行处理本产品采用帝视异构计算团队深度优化的底层加速引擎,提供了业内领先的实时性和兼容性。性能指标版本输入分辨率输出分辨率平均每帧处理时间(ms)iPhone 7iphone6s三星S7华为Mate 9 Intel HD520GeForce 940M基础版640 x360640 x36024.6345
8、9.6 36.2 24.19.6高级版480 x270960 x54011.618.922.9 23.0 206640 x3601920 x108024.939.761.2 39.0 26.510.1960 x5401920 x108069.427.2应用场景1-社交分享视频增强原始视频增强后视频由于流量费的考虑,微信等社交APP里面分享的视频清晰度普遍很低。如果在微信APP上应用帝视的视频增强技术,可以让终端用户看到的视频质量有非常显性的提升。应用场景2-游戏直播分发压缩游戏直播由于画面复杂,直播清晰度普遍设置很高,这就造成了直播分发的带宽成本很高,在直播APP上采用帝视技术后,可以让直播服
9、务端按原来一半的码率去分发游戏视频并且清晰度不降低。片源重制解决方案背景说明:当前视频技术正经历从高清向超高清的演进,工信部正在积极推动超高清视频产业的快速发展,研究制定超高清视频产业发展行动计划(2018-2022年),相关机构预测,2018-2022年,中国超高清视频发展将带来2.5万亿元的产业规模增量。2017年12月,广东省率先发布了开展新数字家庭行动推动4K电视网络应用与产业发展的若干扶持政策(2017-2020年),预计3年的财政补贴投入接近40亿元,主要在建设4K产业发展载体、丰富4K电视内容供给、打造4K产业集聚发展、补齐4K产业发展短板、鼓励4K试点示范应用5个方面加大投入。
10、帝视解决方案:针对4K内容拍摄制作成本高的问题,利用AI技术将目前广泛的高清片源重制为4K超清视频,将常规摄像机拍摄的30帧/秒视频重制为60帧/秒的极致平滑视频,快速丰富4K内容供给。基于帝视自主研发的AI Super Resolution算法,将原先低分辨率的视频重制为高分辨率视频,细节更加丰富,消除传统插值放大算法导致的模糊问题核心技术-SR原始视频增强后视频高清1280 x720(0.9 百万像素)IV 4K3840 x2160(8.2 百万像素)基于帝视自主研发的AI Frame Rate Conversion 算法将24帧/秒或者30帧/秒的视频重制为48帧/秒或者60帧/秒,消除
11、画面中的顿挫感核心技术-FRCACACAI生成的内插帧生成的内插帧BB基于帝视自主研发的AI HDR Conversion算法,可以让普通的SDR片源也拥有HDR的效果支持输出HDR10和HLG格式核心技术-HDR原始视频增强后视频核心技术-Deinterlace原始视频增强后视频基于帝视自主研发的AI算法,去除广电视频特有的interlace毛刺基于帝视自主研发的视频去噪声算法,智能去除视频噪声,让视频更清楚核心技术-Denoise原始视频增强后视频基于帝视自主研发的AI处理算法,去除视频降码流压缩导致的马赛克和模糊,恢复其应有的画质注:码流降太多会导致视频有效信息不足,无法恢复,当前支持码流下限为2Mbps1080P(其他分辨率的码流下限按像素点数量等比例折算)核心技术-画质恢复原始视频增强后视频