基于深度学习的芒果自研超分SDK,利用AI技术,在终端应用视频超分辨率,视频修复等实时画质增强技术,以较小的流量给用户带来更清晰的视觉体验。
基于深度学习的芒果自研超分SDK,利用AI技术,在终端应用视频超分辨率,视频修复等实时画质增强技术,以较小的流量给用户带来更清晰的视觉体验。通过使用超分,可以在播放过程中实时对视频的分辨率放大1.5倍到两倍(x2),比如将 360P 超分成 720P 画质更清晰、纹理细节更细腻、文字更清楚,并且在播放端本地超分,不会增量带宽、流量,解放网络压力,带来更清晰画质体验。使用超分后的优势总结如下:
提升画质 —— 因分辨率的提升,像素点更多,画质整体会比原画面更加清晰。
去编码脏块 —— 去除由于码率不足引起的编码脏块,画面更加平滑整洁;
不会增加流量以及带宽成本—— 超分功能利用端上计算能力,只依赖设备性能;
芒果端智能终端极速高清解决方案使用芒果自研终端超分算法,充分利用终端设备硬件vulkan\Metal,以及NPU等AI芯片的运行能力,针对视频播放场景实现画质实时增强的同时,达到计算量和画质增强的平衡,保证终端算力的实时性以及算法运行的低能耗。
端智能引擎架构图如下:
终端视频实时增强技术的应用不仅提升了视频画质和用户体验,还降低了视频传输和存储成本。