AV1及国产的AVS2开始发力抢占市场。腾讯推出的图片格式TPG就是基于AVS2内核的图片容器,这是AVS2在互联网上最新,也可能是最广泛的应用。 腾讯音视频实验室:TPG的全称是Tiny Portable Graphics,它是腾讯音视频实验室基于AVS2视频压缩标准推出的一种新的图片压缩格式。 我们知道,WebP是基于VP8的视频内核,VP8和H.264属于同一代标准,它的压缩效率是要低于最新一代标准H.265和AVS2的,那如果采用H.265或者AVS2来进行图片压缩,是不是效率更高? 腾讯音视频实验室:前面我们介绍过,WebP、HEIF和TPG分别采用了VP8、H.265以及AVS2编解码器作为自己的压缩内核,主要还是因为视频编码的高压缩效率。 我们向AVS组织提出了制定互联网图像标准的提案,并成功将TPG申请成为AVS2的图像标准容器格式。
摘要本文主要介绍 flvAnalyser 支持AVS2 ES格式的分析案例,满足用户深入了解AVS2 4K 视频编码格式。熟悉AVS2/AVS3扩展 HDR vivid数据格式的约定等知识。 什么是AVS2和AVS3AVS2 和 AVS3 是中国自主制定的新一代视频编码标准,旨在提供高效压缩性能并降低专利授权风险:AVS2 (2016年发布,2024年有新的重大扩展):核心目标:超高清电视广播 性能:中国首个面向 8K 的视频编码标准,压缩效率超越 AVS2 和 H.265,接近甚至部分超越更新的 H.266/VVC。 总结: AVS2 奠定了中国超高清广播的基础,而 AVS3 是更先进的下一代标准,专注于 8K 及未来视频应用,旨在推动中国在视频技术领域的自主创新和国际竞争力。两者共同服务于降低对国外标准的依赖。 完善和补充说明如果您验证AVS2、AVS3 ES素材,遇到问题,欢迎通过Github提交issue。
比如在音视频领域,中国也推出了自己的超高清标准方案:AVS2 和 AVS3。 目前大多开源库都缺乏对 AVS2 和 AVS3 的支持,比如我正在着手的浏览器项目就没考虑 AVS2 和 AVS3 的存在。 所以这里将条件限定为: Android 操作系统 Android 解码芯片支持 AVS2 / AVS3 解码 Android MediaCodec 框架支持 AVS2 / AVS3 解码 Chromium ,但是缺少 AVS2 和 AVS3。 我们需要在 media_codec_util.cc 中增加 AVS2 / AVS3 的 mime 定义,一般定义为 video/avs2 和 video/avs3 即可。
5)重复4)测试五组数据(H.264硬解,H.264软解,H.265硬解,H.265软解和AVS2软解)。 不同软件解码方案功耗差异较大,测试的三种方案中,AVS2软解方案功耗最低。 与H.264软解码方案相比,因为AVS2压缩效率更高,同等质量的视频,AVS2编码码率可比H.264低40%,更低的码率带来更低的解码复杂度和网络开销。 视频分辨率对软解功耗差异较大,如表2所示,以iPhone 8为例,对于480P(640x480)视频,AVS2软解和H.264硬解功耗相当;对于720P视频,AVS2软解比H.264硬解功耗高8%;对于 1080P视频,AVS2软解仅比H.264硬解功耗高11%。
北京大学数字视频编解码技术国家工程实验室视频编码算法研究室 (PKU-VCL) 开源了 AVS2 高清实时编码器 xAVS2(V1.0)。原文链接请点击【阅读原文】。 2018 年 1 月 31 日,北京大学数字视频编解码技术国家工程实验室视频编码算法研究室 (PKU-VCL) 开源了 AVS2 高清实时编码器 xAVS2(V1.0)。 AVS2 是我国新一代视频编码国家标准,和第一代 AVS 视频编码标准相比,AVS2 编码效率提升一倍以上;和国际标准 HEVC/H.265 相比,AVS2 在场景视频编码方面有显著优势。 preset 9 编码性能与 AVS2 参考软件 RD19.2 相当,而速度提升约 10 倍。 测试序列:AVS2 通测条件中的 5 个 1080P 高清序列。 软件编码配置 i).
5、国际化:AVS2被UHD Forum采纳 2018.年3月,UHD Forum经过长时间的调研和分析论证,最终一致认为AVS2性能优异、产业链成熟、专利授权政策优惠,最终决定把AVS2列为和H.265 AVS2实现 1、AVS2解码芯片 1)AVS2 4K量产芯片厂商:华为海思,Hi3796MV200,AVS2 全4K解码芯片 MStar, MSO9385,AVS2 全4K解码芯片 2)年内将推出AVS2 6)AVS2云转码服务 AVS2云转码服务支持H.264、H.265和AVS2标准互转,支持JPEG、PNG、GIF等格式和TPG互转,支持AI去噪、超分辨率、超帧率等画质增强功能,并且是和华为云合作推广 ,要求在10月以后新上线4K节目支持AVS2标准;2018年5月,央视联通端到端AVS2 4K系统,计划10月1日开通AVS2 4K频道。 A: 大家可以上AVS工作组的网站,有一个AVS2的专栏(http://www.avs.org.cn/avs2/index.asp)上面有一些AVS2的大概的介绍。
在这期间,AVS2、AV1等竞争者也在逐步推出,究竟谁才能引领新一代视频编码标准呢? AVS2虽然暂未出台正式的专利许可政策,但根据AVS专利池管理委员会出台的《关于AVS2专利池许可的建议性规定》,AVS2的专利授权将沿用AVS1的统一许可模式,只对设备象征性收费,不对内容收费。 华为海思用国家电影电视总局指定的4K 10bit序列对HEVC和AVS2在通测条件下进行了测试,测试结果如下: 从测试结果中可以看到:对于4K 10bit序列HEVC的编码效率普遍低于AVS2,个别序列甚至差了将近 这也意味着,在超高清领域AVS2编码性能要优于HEVC。 主观方面,根据国家广播电影电视总局广播电视计量检测中心的报告显示:AVS2和HEVC相对于源图像质量下降分别为2.9%和3.0%。 AVS2在高清视频领域和HEVC的压缩效率相当,在4K超高清领域比HEVC性能略优,而且AVS2的专利许可政策简洁优惠,为企业提供了新选择。
摘要 (附注:过往版本已支持AVS2/AVS3,这次新加 AVS1/AVS+ 的ES解析是工具的增强补充) 本文主要介绍 flvAnalyser 新支持 AVS1(Jizhun-P2)/AVS+(GuangDian-P16 注释:本文是 flvAnalyser --- 支持AVS2 ES数据解析和解码预览 补充。 现将 flvAnalyser 新版本(v0.2.1.002)发布给网友使用。 AVS2/AVS3的案例(历史版本支持) 3.1 AVS2 图示1 图示2 图示3 图示4 图示5 3.2 AVS3 完善和补充说明 如果使用过程中遇到问题,欢迎联系笔者(hybase@qq.com)。 编码效率:相比AVS2,在8K等超高清内容上可再节省约30% 的码率,综合性能已超越H.265/HEVC,与新一代国际标准H.266/VVC处于同一竞争梯队,且在特定序列上表现优异。 AVS2 达到了技术性并跑,并在安防这一关键领域确立了全球优势。 AVS3 取得了时代性领跑,在8K超高清赛道上赢得了先发优势。
日前,腾讯视频云直播、点播均已支持AVS2标准,据悉,腾讯云也是国内首家直播+点播同时支持AVS2视频处理业务的公有云厂商。 AVS2属于第二代AVS标准。相关测试表明,AVS2的压缩效率超过国际同类型标准HEVC/H.265。 针对AVS2视频编解码的解决方案,经过腾讯云与多媒体实验室的通力协作,持续投入,也已于近日上线。 目前,腾讯mavs2编解码器能够支持10bit、8bit的低时延与随机访问等多种配置。
AVS2标准面向高清视频应用,性能对标当时同期完成的国际标准H.265/HEVC。 2019 第三代AVS视频标准(v1)定稿。 2021 第三代AVS视频标准(v2)定稿。 此外,TPG相比于基于HEVC/H.265编码标准的图片编码格式HEIF也具有相似的压缩性能,考虑到AVS2标准是属于我国自主研发的标准,相比HEIF可减少大量专利风险。 相比目前广泛应用的视频编码器,如x264与x265,AVS2、AVS3编码器能够获得大幅的编码性能提升。 AVS2与AVS3编码器均已通过腾讯云服务广电等行业应用。 图4:AVS2视频编码器与x264、x265性能对比 目前AVS系列编解码器均已通过腾讯云进行陆续落地。 例如,腾讯视频云直播、点播均已支持AVS2标准。据悉,腾讯云也是国内首家直播+点播同时支持AVS2视频处理业务的公有云厂商,编解码器能够支持10bit、8bit的低时延与随机访问等多种配置。
1.2 AVS2及其产业化 第二代的AVS标准简称AVS2,于2016年5月被颁布为广电行标,2016年的12月30日被颁布为国家标准,压缩效率与国际标准H.265/HEVC相当,但在全I帧编码以及监控场景编码中性能优于 在产业化方面,AVS2视频标准全面应用于IPTV和广东省4K超高清,解码芯片已由华为海思、晨星(Mstar)等研发并推向市场,广播级AVS2超高清实时编码器由深圳优微视觉等公司推向市场。 2.4 滤波器 2.4.1 deblock去块滤波器 在AVS3中直接继承了AVS2中的去块滤波方案,但由于严格的滤波条件,AVS2中现有的去块滤波方案常常会引入严重的块效应。 AVS3的编码时间和解码时间相比AVS2均有下降,尤其是解码时间缩短为AVS2参考软件的一半。原因是AVS3的参考软件HPM已经经过了部分优化,该参考软件由北大深研院和华为公司共同提出。 总体性能对比结果来看,AVS3相比AVS2编码性能高出23.52%,时间复杂度增加了一倍,解码复杂度是AVS2参考软件的一半。
3月18日,国际音视频产业论坛暨AVS标准十五周年年会在北京举行,大会上腾讯公司、北京大学数字视频编解码技术国家工程实验室、AVS产业联盟三方宣布达成合作,共同推动基于AVS2的互联网图像与视频标准制定 腾讯公司音视频实验室总经理冼业成 三方强强联合 共同推动AVS2互联网图像与视频标准制定 AVS(音视频编码标准)是我国具备自主知识产权的第二代信源编码标准,是数字音视频产业的共性基础标准。 国际音视频产业论坛暨AVS标准十五周年年会 达成合作后,三方将共同推动AVS2互联网图像标准的制定,其中腾讯牵头制定标准,北京大学数字视频编解码技术国家工程实验室为标准制定提供技术支持,该标准制定后由AVS 产业联盟快速发布为团体标准,并推动其成为AVS2国家标准的一部分。 其次,三方将共同推动AVS2互联网图像标准以及AVS2视频解码标准的应用,腾讯在相关产品线中采用该标准,北京大学数字视频编解码技术国家工程实验室提供优化技术服务。
AVS3虽然在块划分、运动估计等方面采用了更复杂的方法,但其解码复杂度还是得到了有效控制,并且基本解码框架与基本模块与AVS2一脉相承。 AVS2解码器为AVS3解码器的优化实现提供了很好的代码基础。 鉴于AVS+/AVS2在高清和超高清领域的应用,AVS3在未来超高清市场(尤其是8K视频)会占有重要一席,AVS3转码会成为一大需求。 3)图像类应用。 此外,AVS3的解码复杂度控制的非常好,基本上和AVS2、HEVC和H.264等标准的解码复杂度相当,这也是AVS3相对于VVC和AV1的一大优势。 蔡砚刚:AVS2在广电行业的应用已成定局,下一步将向IPTV、监控还有互联网延伸。而AVS3标准凭借着优秀的编解码效率,也必将在互联网、8K视频等领域占据一席之地。
第二代AVS2编码效率比第一代标准提高了一倍以上,压缩效率超越最新国际标准HEVC(H.265)。 可以推测,由于技术陈旧需要更新及收费较高等原因,MPEG-2即将退出历史舞台。 第二代AVS标准包括系列国家标准《信息技术 高效多媒体编码》(简称AVS2),AVS2主要面向超高清电视节目的传输,定位在引领未来五到十年数字媒体产业的发展,并争取为相关国际标准的制定发挥关键作用。 在第一代AVS推广应用的同时,AVS技术的持续演进工作在积极推进,第二代标准AVS2技术已开发完成,2016年5月,广电总局颁布AVS2视频为行业标准,2016年12月30日,颁布为国家标准。 目前,AVS标准除在广电领域广泛使用,已进入互联网领域,下一步AVS2会进入监控应用。 2016年初,AVS已启动VR国际标准和国家标准的制定,AVS VR国际标准已完成立项。 AVS2音频标准立足提供完整的高清三维视听技术方案,与第二代AVS视频编码(AVS2视频)配套,是更适合超高清、3D等新一代视听系统需要的高质量、高效率音频编解码标准。
上图展示的AVS在过去十六年经历的发展过程,从2002年AVS确立到2003年第一代标准AVS1基本完成,再到随后中国高清电视广播使用AVS标准,2012年启动AVS2标准的制定,2015年完成AVS2 如果我们对比AVS2与HEVC便不难发现,无论是在主观质量还是用户体验上AVS2都略胜一些。 在编码其优化方面,上图展示的实验结果来自于我的学生优化的AVS2编码器,商用AVS编码器的性能还要高于上述结果。 右上图我们可以看到AVS2的各项性能指标与其他标准下的编码性能对比可以说是不相上下, AVS2与x265相同性能条件下AVS2编码速度快一倍。 上图展示的AVS2 4K广播应用的发展历程,可以看到全行业都对AVS2抱有强烈的兴趣并积极参与推广建设,这极大提高了AVS2的普及速度与应用范围。 4.
LiveVideoStack:大家已经开始研究H.266、AV1以及国产的AVS2/AVS3,他们有哪些特点?各自的优势应用场景是什么? 马思伟:AVS从2002年至今制定了一系列的视频编码标准,即我们常说的AVS1、AVS+、AVS2,每一个标准制定实际上都是一个大工程,对于每项技术都要进行详细全面的评估,目前AVS+、AVS2在广电行业的成功应用已经充分证明 LiveVideoStack:比如腾讯推出的TPG图片格式采用了AVS2作为引擎,AVS在工业界的已经有哪些应用落地?未来AVS的主要应用场景是什么? 目前AVS2 4K超高清广播、IPTV点播等应用也已落地或正在落地,和TPG一样,未来有多少勇于创新者,AVS就会有多少应用场景。
与此同时,国产的Codec AVS2已经成为广电系统的标准,在工业界开始有实践应用。如腾讯开发的图片格式TPG采用了AVS2作为压缩内核。而下一代Codec AVS3已经开始征稿。 AVS2只象征性的收取专利费,这与AV1免专利费的方式不谋而合。(完)
另外两个挑战者是由我国组织制定的AVS2国家标准和由谷歌牵头制定的AV1(还未正式定稿)标准。 最近国家广电总局发文推动基于AVS2标准的全4K视频应用落地,相当于把4K影院体验搬到家,对于家庭视频服务体验的提升是革命性的。 关于AV1和AVS2我刚才已经说过,属于第三代编码标准。AVS2已经发布,AV1即将发布,大家在这两个标准上做新的编码工具没有机会啦,主要还是做编码工具优化。 从应用场景上,HEVC, AVS2和AV1等第三代标准很清晰,主要面向超高清视频应用。 AVS2虽然暂未出台正式的专利许可政策,但根据AVS专利池管理委员会出台的《关于AVS2专利池许可的建议性规定》,AVS2的专利授权将沿用AVS1的统一许可模式,只对设备象征性收费,不对内容收费。
2016年发布的AVS2国家标准主要面向4K超高清应用,压缩效率与国际同期HEVC/H.265相当。 从左至右分别是AVS1中的8种预测模式;AVS2中的33种预测模式;AVS3中的65种预测模式。 2.3 帧间预测 帧间预测指的是在视频编码过程中,通过已编码帧和相邻帧之间的运动匹配来估计待编码帧。 选取上一代标准AVS2为对比对象,以随机访问(Random Access, RA)配置和全帧内编码(All Intra, AI)两种最常用的编码模式作为对比配置。 实验结果表明,AVS3和AVS2相比,在降低解码复杂度的同时在YUV三个通道都获得了显著的编码性能提升,综合性能提升超过40%。
封装包列表等) 2)HLS实时流接入(M3u8列表,分片缓存等分析); 3)除主流的MPEG-1/2/4,H.264/AVC、H.265/HEVC外,工具扩展支持了 H.266/VVC, AVS1/AVS+, AVS2 (提示:部分功能需软件授权后才能使用,授权方法请参考GitHub或知乎) 说明: 1)flvAnalyser 全免费 (除了flv分析外,还具备H264/H265/H266/AVS1/AVS+/AVS2 .264提升50%压缩率、支持更高色深(10-bit) H.266/VVC 基本介绍:新一代高效视频编码,主要用于超高清(4K/8K)等,还在起步阶段 特点:比H.265提升更多的压缩率 AVS/AVS+/AVS2 /AVS3(中国标准系列) 基本介绍:中国自主音视频编码标准 AVS:对标MPEG-2 AVS+:广播级高清编码,对标H264/AVC AVS2:超高清编码标准(含菁彩HDR),对标H265/HEVC 2.1 AVS1/AVS+ 解码能力 图像/Nalu/GOP列表 语法透视(结合flvAnalyser) GOP视频预览 (结合flvAnalyser) 2.2 AVS2 解码能力 图像/Nalu/GOP