智能视频时代480p秒变1080p 腾讯云让你的IDOL更清晰
近日在成都举行的第五届中国网络视听大会互联网电视产业分论坛上,腾讯云副总裁王帅先生发表了题为《连接技术与内容,共享OTT产业升级》的主题演讲,对家庭大屏及互联网电视的场景化、个性化趋势做了洞察和剖析。同时发布了腾讯云智能编解码优化及画质提升服务T-HD。
四大维度全面能力,打造高质观看体验
腾讯T-HD服务综合了腾讯独有的视频超分辨率技术、重点及感兴趣区域编码、画质增强、智能分类编码等技术能力,最大程度上提升画质的同时,节省带宽和码率,可帮助视频平台大幅节约成本,改善用户的观看体验。
腾讯云视频超分辨率技术,基于深度学习技术,通过为视频提供超分辨率特定算法,对图像重要区域进行高清细节重构、增强、修复,提供更丰富的细节和更清晰的字幕,达到超越原视频分辨率的画质表现及观看体验。
技术实现原理方面,通过训练并实现了一个10层的深度卷积神经网络,能够很好的解决CheckerBoard Artifacts和对于部分图像处理文理不清晰问题。
神经网络结构示意图
通过神经网络能够抽象出视频图像的整体特性,识别图像的纹理与内容,根据图像的纹理与内容进行高清细节重建,从而达到远超过原图像的视觉效果。通过控制卷积神经网络的层数与每层的CHANEL数,在简化整体计算量的情况下,能够很好的解决图像过于平滑,纹理不清晰的问题。
超分技术图像效果对比
例如,游戏直播平台在进行热门游戏直播时,需要将主播端的游戏画面,以高清甚至超清的质量呈现给用户,但之前受限于用户的高并发及带宽成本,很多平台只能通过转码降低清晰度后,再呈现给用户。运用该技术,只需在播放端使用与腾讯云相匹配的播放器SDK,就能将压缩后的低分辨率视频还原成高清视频。
除此之外,腾讯云视频超分辨率技术也支持将高清视频压缩成低分辨率进行传输,通过独有的解码技术,在接收端进行高清还原,为合作方节约大量传输带宽成本及存储成本。
感兴趣区域编码技术,集成人体检测、特征提取功能,可将人脸、肤色、视频焦点区域识别后进行编码,区域强化后输出码率等技术,进行特定动态区域编码。该技术可以提升视频感兴趣及重点区域的观看体验。针对重点区域图像优化与人眼感官识别匹配,在满足用户人眼观看体验的同时,通过视频分辨率的流式优化法,降低带宽成本。
画质增强技术,基于腾讯独有的画质增强算法,可对视频画质、颜色进行分析处理,使画面鲜艳通透、层次感更突出,达到极致的视觉效果。
画质增强效果对比
智能视频分类编码技术,通过对比海量视频分辨率与码率的曲线关系,结合其视频类型及视频标签,对视频进行分类编解码,在保证用户达到最优观看效果的同时,持续优化传输带宽,为客户方及用户节省相关成本。
在同分辨率的情况下,不同类型的视频需要的真实带宽并不相同。例如为达到1080P的分辨率,足球比赛直播,电视剧,动画片等不同类型的片源所需要的真实带宽是不一样的,但此前的处理模式,1080P分辨率对应的码率是一样的。智能视频分类编码技术,可以针对不同类型的片源,进行不同程度的带宽压缩,从而为平台用户节省带宽成本。
输出技术积累,持续助力视频平台转型升级
随着直播、短视频行业对资源、技术、成本持续优化的要求,腾讯云利用在音视频方面的深厚积累,持续对于视频资源调度能力的精细运营。根据不同行业场景进行优化,腾讯云提供了完整的技术解决方案,不但保证视频平台的稳定运行,还帮助视频平台省成本、避风险。
在直播平台能力的提升方面,腾讯云重点投入建设直播资源,在全球建设900多的加速节点,覆盖国内移动、联通、电信及十几家中小型运营商与海外30多国家地区,带宽储备超70TB,为直播平台提供稳定、低时延、低卡顿的直播加速服务。
在云端转码能力的优化方面,腾讯视频云转码拥有超大规模12000+分布式转码集群,可以按需提供转码服务,最大限度的满足客户的转码需求、避免资源浪费。
同时,全新升级的云端转码方案很好解决了以往进行转码时需要自己搭建、管理转码软硬件服务的高昂成本,以及需要对转码参数进行调整适配的复杂问题。简单说就是转码能力更强,更加具有弹性,对于S7总决赛直播这种短期并发非常高的场景非常有用。
腾讯云X-P2P解决方案采用私有协议传输,具有及时连接、无缓冲发送等特点,与基于TCP和HTTP协议配合达到更好的传输效果。客户可根据自己业务场景实际需求选择最合适的延迟和分享率。加上腾讯云X-P2P方案在客户端进行了追帧处理,每隔一定时间会消除因网络传输波动带来的延迟,对于实时性要求高的场景非常适用。
此外,近来腾讯云还接连发布了实时游戏语音、H5双向音视频等行业先进的技术方案,不断扩大自己在技术上的优势地位。通过技术上的领先优势以及腾讯生态的强大赋能,腾讯云将助力直播、短视频行业完成智能化、生态化转型升级,在未来拥有广大的市场空间。