好玩儿的视频生产出来,怎么传送给观众观看?怎么提高视频消费环节的用户体验?这是快手音视频团队的核心关注。在刷视频的体验越来越好的背后,是音视频黑科技的不断迭代和落地应用。一方面,让视频的质量不断提高,让用户享受更清晰、更真实的显示效果;另一方面,要让看视频更加流畅,在不同环境下、不同硬件上都能流畅观看视频,避免视频卡顿、延迟等不好体验,做到真正的科技普惠。
HDR视频:让用户“身处其中”
2021年初,快手宣布全面支持多种高动态范围(HDR)格式视频的上传和消费,为用户带来全新的画质体验。HDR技术让像素的动态范围、色域和位深三个维度全面得到改善,让视频画面中的每个像素具备了更高的表达能力。这一技术的出现,适应了用户对更高视频体验的要求,适应了信息技术的变革发展。
相对于传统的SDR视频,HDR拥有更加出色的表现能力,可以让用户在屏幕上看到更接近事物真实状态的图像。随着支持HDR拍摄的机型越来越多,HDR会在用户中得到更广泛普及。快手的黑科技不仅在于实现HDR格式视频的上传和编辑,以及在支持HDR显示的手机上正确播放,还在于让HDR视频在非HDR手机上也能正确观看,画质也会根据算法进行调整和提升,尽量还原视频效果。因为各家视频拍摄软件采用的HDR格式都不统一,视频上传到服务器后,往往会出现适配麻烦。但在快手上,后端转码会把不统一的HDR转成统一的HDR10格式,把视频普惠分发到每台支持HDR的设备上。
音频技术:让用户“声临其境”
快手上的声音场景比较复杂,有短视频、直播、聊天室、PK、KTV等场景下的声音,也有涉及不同位置间的语音交互,语音在双向、多向传递过程中的质量保障非常重要。常见的声音延迟、噪音、响度不均、混响、回声等问题,都会明显影响用户的收听体验。快手在直播RTC语音技术、短视频智能音频技术和K歌音频技术方面取得一系列进展,保障了用户的收听体验。
在直播RTC语音方面开发了AEC回声消除技术,在多个产品上落地应用,包括:小快机器人,通过AEC消除音乐回声干扰,大幅提高唤醒率;直播伴侣,通过AEC消除外录的游戏音效,再内混游戏音效实现高音质直播;主站K歌打分,通过AEC消除BGM回声干扰,大幅提高打分准确度。此外,基于深度学习的AI语音降噪、多码率优化、丢包率自适应恢复策略、音频超分等技术提高了实时语音的准确性和清晰度。
在短视频音频方面,平台应用的响度控制处理技术和标准,有利于规范平台音频响度和动态范围的平衡,避免响度战争。同时让短视频内容的声音响度体验更加一致,避免切换不同视频时,声音响度忽大忽小。在K歌音频方面,利用神经网络消除或减轻用户K歌过程中所产生的喷麦噪声,提升K歌作品的音质,解决普通用户没有专业设备的喷麦或风噪问题。
多码率优化:让用户社交无碍
快手是个普惠的平台,其用户基数大,分布广,网络环境差异大,尤其在偏远山区,刷视频、看直播,卡顿是常有的事。快手的一项“多码率自适应”技术可以有效缓解以上难题。
日前,快手凭借一项“多码率自适应”技术的专利——“媒体码率自适应方法、装置、计算机设备及存储介质”获得第六届北京市发明专利三等奖。该项专利首次提出短视频场景下的多码率架构及先进的多码率自适应算法,可以显著降低观看短视频时的播放卡顿率,有效改善因网络条件差导致的视频卡顿现象。
为保障不同硬件设备和网络环境用户间的畅通交流,快手持续就“码率自适应技术”迭代更新。2020年6月,快手正式对外发布基于流式的直播多码率自适应标准LAS(Live Adaptive Streaming),用于提供低延迟、平滑、流畅的直播多码率体验。据悉,快手同时开源了LAS的端到端解决方案,包括服务端、客户端、业界领先的多码率自适应算法等,帮助业界实现零门槛接入和使用LAS。
在开发技术的同时,团队就码率自适应技术持续迭代更新,至今已申请相关专利20余件。
企业的发展离不开技术的创新推动。
作为一家以人工智能为核心技术的科技企业,快手一直重视对研发投入及知识产权保护,先后被评为“国家知识产权优势企业”“北京市知识产权示范单位”“中关村知识产权领军企业”。
走进快手公司,一面专利墙映入眼帘。据了解,快手持续在先进的短视频生产方法、推荐技术、音视频技术等领域进行专利布局,同时围绕专利、商标、著作权和域名建立全方位的、有前瞻性、有策略性的知识产权保护体系,为技术创新构建起坚固的护城河。经过多年努力,目前快手专利申请量达4000余件。
不仅是强化自身知识产权保护,快手也非常重视对平台用户或权利人的知识产权保护。通过便捷维权举报入口和设立官方维权邮箱等方式,建立知识产权维权机制,监控和打击各类专利、商标侵权行为,切实履行平台责任义务,净化内外部市场环境。
在持续完善知识产权保护体系建设的同时,快手积极参与互联网行业的各类技术和知识产权交流探讨活动,参与中国人工智能产业发展联盟学术与知识产权工作组组织的《中国人工智能产业知识产权白皮书2020》部分编写工作,携手共建知识产权保护环境。