本文来自微信公众号“科技云报到”。
“对于视频的画质,我现在最低只能够接受720P,最好是1080p。”早五年前,身边就已经有人提出了这样的要求。
随着科技的进步,我们进入了一个视频内容快速增长的时代。从社交媒体到在线教育,从直播购物到虚拟会议,视频正逐渐成为主流的信息传输方式。
艾瑞网研报指出,截至2020年底,中国网络视听用户占整体网民规模的比例已高达95.4%。高饱和的渗透率水平,使用户更加关注音视频服务的体验感。
在这一背景下,高清画质的需求愈发迫切。随着AI的应用和发展,高清画质需求迎刃而解,实时高清时代也随之来临。
高清画质的迫切需求
其实,我们一直追求视觉的完美,高清画质的需求正是这一追求的体现。
FHD、4K和8K等超清画质让影像更加精致,更能捕捉到生活的细微之处,无论是电影的细腻情感还是游戏的逼真场景,高清画质都让体验更上一层楼。
随着智能手机和平板电脑的普及,人们越来越多地通过移动设备观看视频。这些设备的屏幕尺寸和分辨率也在不断提升,从而推动了对高清画质的需求。
尤其是在苹果Vision Pro推出后,对画质的要求更为迫切。如果像素太低,颗粒感就十分明显。
实际上,现阶段的点播行业,高清已经是非常普遍的现象。
不过,现代的视频内容不再局限于单向传播,越来越多的互动元素涌现,如直播连麦、虚拟现实等。这些场景对画质和实时性的要求更高,进一步推动了高清画质的需求。
除了市场用户需求的变化外,长、短视频平台、内容创作者,以及硬件厂商们对高清、超清画质同样需求迫切。
首先,长视频平台和短视频平台纷纷升级技术支持超清画质。这不仅体现了技术的进步,还彰显了企业对市场变化的敏感度和响应能力。
对于内容创作者来说,更高的画质,也可以吸引更多观众和赢得市场竞争。无论是电影制片人还是网络红人,高清画质已经成为他们展示才华的重要工具。
高清画质的推广还与硬件厂商的合作密不可分。许多电视、计算机显示器和移动设备厂商也推出了支持高清内容的产品。
画质的清晰度甚至直接关系到了用户、主播的存留。
根据声网的数据分析,高清画质相比标清画质,频道内用户留存时长高10.3%。高清画面能让观众更愿意在平台上停留,增强用户粘性。
此外,在直播平台上,画质不仅影响观众,还关系到主播的留存。糟糕的画质可能导致优秀主播的流失,进而影响平台的竞争力。
高清画质还为商业模式的创新提供了可能。例如,在电商直播中,高清画质可以让商品展示得更加真实生动,从而提高转化率。
“在这样的背景下,实时高清在未来的时间之内都是一个实时互动中很重要的环节。”声网CTO兼首席科学家钟声说。
AI为实时高清
插上翅膀
其实,早在2020年前后,AI、5G商用、云计算等新技术已经在超高清视频领域融合发展。
人工智能也加速了超高清视频发展,超高清视频与人工智能的融合应用正迅速增强。
在过去的两年里,超高清视频技术也为以远程医疗、远程教育、安防监控为代表的非接触式经济发展提供了重要助力。
发展至今,AI对超高清视频的赋能具体表现在以下几个方面:
智能压缩。AI可以通过深度学习算法,识别并保留视频中的重要信息,同时压缩不太重要的部分。这样可以在保持画质的同时减小文件大小,从而更有效地进行传输。
优化传输路径。通过AI的预测和分析,可以智能选择最佳的传输路径,从而减少延迟和丢包,保证实时高清视频的流畅传输。
超分辨率技术。AI可以通过学习已知的高清图像,对低分辨率的图像进行重建,从而实现超分辨率效果,让画质得到显著提升。
降噪和提亮。AI能自动识别并消除视频中的噪点,或者在暗部细节上进行提亮,从而让画质更清晰生动。
智能编码和解码。通过AI驱动的智能编码和解码技术,可以根据网络条件和设备能力动态调整视频质量,保证在各种情况下都能提供最佳的观看体验。
个性化体验。AI可以根据用户的习惯和偏好,智能调整画质、分辨率和流量消耗,为不同的用户提供个性化的高清体验。
虚拟现实和增强现实应用。通过AI的图像识别和渲染能力,实时高清视频可以与虚拟现实(VR)和增强现实(AR)无缝结合,为用户带来沉浸式的体验。
其实,在实时互动时代有两点核心要求,一是传输,二是画质,而这些也正是AI赋能行业的发力点。
在AI助力下,以秀场直播、电商直播、赛事直播为主实时互动场景,正迎来超高清时代。
实时互动像空气和水
一样无处不在
现阶段,在AI驱动下,国内实时音频(RTC)赛道也迎来了新一轮的发展。
据悉,实时音视频赛道玩家主要分为两大类:
一是提供通用的Paas层能力,包括RTC Paas厂商、通信云Paas厂商、综合型Iaas厂商。其中,RTC Paas厂商在技术研发和产品打磨上具备更高的行业专注度,占据市场的主导地位。
二是根植于特定行业场景,主要为垂直行业解决方案商。
近日,定位于全球实时互动云服务RTE-Paas服务商声网正式发布面向实时视频场景的以提升视频画质和使用体验为核心的解决方案,助力开发者与企业实现视频画质、用户体验和互动玩法的全面升级。
声网从清晰度、美观度、流畅度三方面对画质、体验、玩法进行全面升级,特别针对秀场直播、电商直播、赛事直播、多人连屏、跨房间PK等场景,引领实时互动进入高清时代。
据钟声介绍,实时高清的呈现首先基于视觉感知的前处理,比如暗光、噪声改善,AI视觉感知处理,再通过多格式视频编码及弱网对抗,视频自适应分发(低码高清、动态传输路径规划),最后进行基于视觉感知的后处理。
“声网AI推理引擎是实现实时高清的基石。”
声网研发总监秦泽雄表示,在前处理阶段,基于深度学习的AI感知处理,能够带来30%视频压缩效率增加。
在编码阶段,实时高清·超级画质采用H.265高效编码器,H.265使用先进的技术用以改善码流、编码质量、延时和算法复杂度之间的关系,能够在有限带宽下传输更高质量的网络视频,同样码率下的H.265画质明显优于H.264。
在传输阶段,声网采用自适应弹性传输算法,适应不同网络环境,接受者可以根据下行带宽自适应接受对应级别的内容。
在后处理阶段,声网基于深度学习,修复增强高清画质,在不改变分辨率的情况下,智能调整画质锐度和对比度,让好的画质更好,改善用户主观体验。
此外,在AI算法低消耗方面声网也有做调优,使得低端机算法自动降级,链路各模块自动协商,统一调度不冗余,硬件模块全面使能。
“我们所期望达到的,就是想让实时互动像空气和水一样无处不在。”秦泽雄说。
结语
音视频已成为现代社会的重要组成部分,高清画质的需求也因此变得前所未有的迫切。
声网实时高清·超级画质解决方案展示了如何通过技术创新满足这一需求,不仅为用户提供了更优质的观看体验,也为行业树立了新的标准。
未来,随着AI和其他先进技术的不断演进,我们有理由期待音视频行业将继续朝着更智能、更高效、更个性化的方向发展。