在过去的一段时间中,VVC视频编码性能逐步提升,在编码质量相同的情况下,所需码率逐步下降。PSNR指标也在稳步增长。 a-quick-and-dirty-look-at-vvc-16e8c2c56512 VVC是ITU H.266最有希望的候选方案,它取代了H.265,(我们称为HEVC),其目标是在编码质量相同的情况下比 最新版本需要50分钟才能编码60帧1080p的视频(系统规格和数据)。实际上我没有看过任何VVC内容,所以我不知道它是看起来不错,还是数字确实如此。 我们需要建立VVC。 作为编码质量的一个简单指标,PSNR也在稳步增长。还有更好的度量标准,比如VMAF。 ? 编码速度是...... 不太好。 接下来 实际解码并查看内容 与不同的HEVC(x265)和AV1(aom,SVT-AV1)编码器进行比较 统计更多的数据(SSIM,VMAF) 用更多序列和不同的分辨率进行测试 使用更多不同的编码器和速度设置来进行测试
方案将8K内容智能地编码成4个4K流传输,由8K电视放大,这样可以节省带宽,降低发行成本。 正在讨论的编解码器包括开放媒体联盟的AV1、基本视频编码(EVC)、低复杂度增强视频编码(LCEVC)、高效视频编码(HEVC)和多功能视频编码(VVC)。 这个方案是NHK设计的,因为四年前在日本没有人能够对8K进行编码。 “因此,如果你把内容感知编码、云计算和一些智能工程结合起来,你就能用8K创造奇迹。”Thierry说。 人工智能编码 在现有的人工智能编码方法中,来自三星研究院视觉技术团队的研究人员开发了AI ScaleNet,这是一种基于人工智能的编解码器,可以在通常只支持4K速度的网络上传输8K内容,而且都不需要额外的基础设施 (富士通旗下品牌)也在研究这种类型的AI辅助编码,目前Brightcove和Kaltura等多频道托管和播放服务正在部署这种编码方案。他们正在将8K的母带内容,在AI的辅助下,降频到4K进行发行。
,用3个字节(byte)存储; 那么一帧画面所需要的存储体积=2,073,600*3/1024/1024≈5.7M 因此,对视频编码十分必要,下面是常见封装格式的视频编码类型[3]: 视频压缩 上述这些视频编码都是通过压缩视频的画面帧来减小视频的体积 视频码率 虽然上述视频编码方式能够极大压缩视频体积,不过影响视频质量关键因素还包括码率。如果采用固定码率进行编码,如果视频太过复杂,比如很多随机粒子,就会让视频看起来非常模糊。 可变码率是指码率按需进行分配,简单场景码率低,复杂场景码率高,用的最多,在PR中,还提供了VBR2次编码的选项,即包含一个目标码率和一个最大码率,因此VBR被广泛使用。 OpenCV视频编码 了解完上述基础知识后,不难发现,在视频分辨率和帧率固定的基础上,视频体积的大小主要取决于视频的编码格式和码率。 虽然OpenCV可以自定义编码方式,但无法直接修改码率,这导致有些视频输出之后,码率变得极大,比如这段12秒中的1080p视频,码率达到71150kps,整个文件110M大小。
视频在我们生活中应用越来越广了,不可避免的,我们在使用视频时,会遇到一些最常见的专业术语:视频编码格式、视频码率、视频帧率、视频分辨率,这些专业术语在一个视频文件中,到底是指的什么呢?听阿酷来说说吧。 编码格式:一个视频文件本身,通常由音频和视频两部分组成。 例如上图的视频文件,就是由avc视频编码+AAC音频编码组成的,常见的视频编码格式有Xvid,AVC/H.264,MPEG1,MPEG2 等,常见的音频编码有MP3、AAC等。 视频码率:是指视频文件在单位时间内使用的数据流量,也叫码流率。码率越大,说明单位时间内取样率越大,数据流精度就越高,这样表现出来的的效果就是:视频画面更清晰画质更高。 视频标清、高清、全高清的分类分辨率码率帧率参考(附图)?
文章第一部分会介绍4K/8K超高清视频的特点以及这些超高清视频广泛应用面临哪些问题。之后第二部分会介绍我们在编码器方面所做的优化,来使编码器更适配超大码率、超高分辨率的视频。 4K/8K超高清视频的特点就是它的分辨率和清晰度非常高,同时视频码率极高。超高的分辨率和码率对下游系统带来了新的挑战。 以直播系统来说,直播转码过程的处理速度和性能消耗,与视频输出的分辨率及码率息息相关,要支持实时的8K转码系统,无论在编码内核上,还是在系统架构上,都需要新的设计方案。 当前也有很多专属硬件的方式来支持4K/8K分辨率的实时编码,虽然其能满足实时编码的需求,但压缩率相对软编较差,若要保持4K/8K的清晰度,往往需要几十兆甚至上百兆的码率。 如果和硬件编码器相比,可以有70%以上的压缩率提升。也就是说通过前面的系统方案,直播4K/8K超高清视频在同样的画质下,所需要的编码码率只是硬件编码码率的30%左右。
,带宽)的设定及解释 1、扩频因子(SF) 2、编码率(CR) 3、信号带宽(BW) 4、LoRa信号带宽BW、符号速率Rs和数据速率DR的关系 5、LoRa信号带宽、扩频因子和编码率的设定 6、空中速率 LoRa学习系列链接汇总: 博主热门文章推荐: ---- LoRa学习:LoRa关键参数(扩频因子,编码率,带宽)的设定及解释 1、扩频因子(SF) 2、编码率(CR) 3、信号带宽(BW) 4、 (CR) 编码率,是数据流中有用部分的比例。 编码率(或信息率)是数据流中有用部分(非冗余)的比例。也就是说,如果编码率是k/n,则对每k位有用信息,编码器总共产生n位的数据,其中n-k是多余的。 由此,编码率(抗干扰性能)可以随着信道条件的变化而变化,可以选择在报头加入编码率以便接收端能够解析。。。
Per-Title编码是指以节省码率、存储空间及传输带宽成本为目的,为每部电影(基于其空间和时间属性及复杂度)调整合适的码率阶梯(Bitrate Ladder)。 对大多数视频而言,在码率受限的情况下,这种一刀切的固定Bitrate Ladder可以实现高质量编码,然而在某些情况下,如卡通动画或静态访谈节目,采用高达5800kbps的码率来编码1080P视频,无疑是码率上的浪费 微帧Per-Title编码技术微帧Per-Title编码技术的目标,就是为每一个视频或视频片段量身定制,找到最优的凸包,精准锁定既满足画面清晰度要求,又符合主观观看敏感度标准的最低码率点,以达到节省带宽的目的 2) 为每个分辨率选择最合适的码率或者CRF值传统的CRF策略通常在单一分辨率下工作,而微帧的Per-Title通过分析每个分辨率下的画面质量与码率之间的关系,自动调整CRF值及最优码率,使视频在不同分辨率下都能展现出色的质量和编码效率 微帧的Per-Title技术通过优化编码算法、并行处理技术以及智能任务调度,大幅度提升了其处理速度;这样多维度、多层次的深度优化,提升了视频编码效率和输出质量,不仅在分辨率和码率的选择上更加智能化,还实现了更为精确的编码控制
随着视频直播不断向着超高清、低延时、高码率的方向发展, Apple Vision的出现又进一步拓展了对3D, 8K 120FPS的视频编码需求,视频的编码优化也变得越来越具有挑战性。 低延时:能够采用单一设备,最高支持到8K,60fps,无需分布式,将编码延时控制到最低。 高性能:即使在8K 60pfs下, 压缩性能仍然明显高于X265 medium档,并有近9倍的加速。 流程优化 针对超高清、高码率、高帧率的视频编码特性,进一步优化流程。 第二个问题,在超多核设备上,8K视频速度无法提升。通过整体分析对比发现,预分析成为整个编码过程的瓶颈,限制了编码速度。这里有多种优化手段,从输入到预分析编码都进行了优化。 算法优化 8K场景下一些加速算法的优化同样会出现的新问题。比如,在8K中,变换过程占比更加突出,影响编码速度。因此尝试了使用非标准DCT来简化DCT过程进行加速。
根据最近的论文中的对比实验,VVC 参考软件可以在同等质量下比 HEVC 节省 41.54% 的码率,但编码复杂度比 HEVC 高 8 倍,AV1 则比 HEVC 节省 19.89% 的码率,编码复杂度则为它的 表 3:编码器性能对比 哪一个编解码标准更适合 8K 实时内容,需要考虑的不仅仅是压缩效率(在保证高质量的前提下维持较低的码率),还有计算复杂度(能否实时编码),以及是否有可用的编解码器生态(编解码器是否广泛部署 首先,它具有较好的压缩效率,可以在 50-80 Mbps 的码率下保持一个较好的质量,而且它的编码复杂度对于 8K 内容也是可接受的,而且最重要的是,其对应的编解码器很多厂商都有实现和部署。 这些编码器都是介于 HEVC 编码标准的,它们也有一些共同的基本特性,比如说可以实现 8K/60FPS 的实时编码、支持 HLG 或 PQ 的 HDR 标准等等。 8K 直播服务并不是最近才提出来的,早在 2008 年,NHK 和 BBC 就用 MPEG-2 编码器以 600 Mbps 的码率实现了从伦敦到阿姆斯特丹的 8K 服务。
来源:8K Association 作者:Ben Schwarz 内容整理:胡经川 本文从 8K 内容的编码、质量评价以及码率和质量的权衡对 8K 内容的实时编码现状进行了分析,并进一步展望了 8K 内容的码率会达到一个什么样的水平 目录 编码标准 视频质量标准 客观指标 主观衡量标准 编码权衡 案例1:NHK STRL: 8K广播频道 案例2:8K互联网直播流 超越HEVC 参考 在我们对 8K 视频编码这一新兴领域永无止境的探索中 编码权衡 没有恒定不变的标准,凡事都要有一个权衡,8K 视频的编码也是如此,如何实现码率和质量的权衡是十分重要的。 编码器包括哪些技巧和优化,可以在较低的比特率下实时制作高质量的视频。 感知优化编码使用人类视觉模型提高视觉质量,该模型可以实时编码 8K/60Hz 的内容。 综合来看,Spin Digital 目前建议在使用 HEVC 时,8Kp60/10bit/HDR 直播内容的码率为 48 Mbit/s,而且编码器仍有改进的余地,但在 HEVC 上的改进余地不大。
优势: 在 8K、VR/AR、云渲染等高码率场景中大幅降低带宽成本。 更适配 AI 视频处理链路,对后续超分辨率、目标检测等算法更友好。 H.266 理论上可在相同延迟下显著降低码率,但在缺乏硬件支持的阶段,实时编码延迟较高。 适合对带宽极为敏感的高码率内容(8K、VR),但短期内多用于高端设备与云端处理链路。 2. 4K 工业巡检:H.265 + 硬件编码,减少带宽压力同时保留细节。 8K VR 演示(实验阶段):等协议规范成熟,慢慢推进H.266 + 云端硬编码,极致压缩率。 2. H.265 优先场景 高分辨率与弱网结合:远程医疗、4K/8K 工业巡检、长距离传输。 H.266 尝试场景 带宽成本极高的高码率内容:8K 转播、AR/VR 沉浸式体验、云渲染视频。 4. 编解码与 AI 的融合 智能编码:利用 AI 模型进行编码参数自适应调节,例如针对画面动态区域提高码率、对静态背景降低码率。
放大状态下支持8K/16K高品质 为了满足本次5G超高清赛事直播对于超高清直播点播的需求,腾讯明眸极速高清在视频编码层面进行大量优化,其中一个主要内容便是实现多tile宫格方式编码:多tile宫格编码在 8K/tile 16x16宫格式编码 2 腾讯明眸全新升级,发布极速高清2.0 腾讯明眸作为腾讯音视频AI产品解决方案,能够实时识别视频流,并进行AI化处理,有效节省带宽资源,提升用户体验。 其中腾讯明眸极速高清具有智能动态编码功能,能够基于业界领先的音视频编码、图像深度学习与画质增强、ROI区域编码等技术积累,通过实时的智能场景识别,对视频进行动态感知编码和画质增强处理,以更低的码率为直播 +)及4K/8K/16K 直播、点播视频业务场景,对视频编码算法进行升级,并进一步实现视频编码算法性能、工程编码框架及前处理优化,提高视频编码效率,在保证流畅度的同时提升画面质量,优化视频观看体验。 凭借此次合作,腾讯云率先实现在海外5G网络环境下对8K/16K超高清视频编码、CDN传输及解码播放的全业务流程的特定优化及适配工作。
在讨论的最开始,主持人Chris Chinnock介绍了8k联盟和他们最近的一些进展。 Thierry Fautier谈到关于8k内容的编码格式:HEVC、VP9和AV1均有应用。 我们可以给8K视频搭配各种级别的音频,但最重要的是反映创作者的意图。 Thierry Fautier谈内容感知编码,指编码器会根据内容复杂度动态地决定比特率。 使用基于人类视觉特性的感知编码以及基于AI的技术等,可以将码率减小一半。他提到“也许你不需要EVC,因为你可以使用更好的方法,不要忘记在压缩领域的所有进展总是开始于一个技术步骤。 这项技术被用于在广播传输时降低分辨率传输,到电视端再将分辨率提高到原始水平,重建的画面与原始图像在VMAF上几乎没有损失,实际应用中,这项技术可以带来50%的码率节省。 Thierry Fautier对此的评价是,目前有一些值得注意的在8K电视上播放4K内容的盲测,也许在8K电视上播放4K,而不需要8K内容的生产会成为一种现实。
商业差异化卖点:通过智能动态编码、AI增强及自动化流程,实现不损伤画质下节约50%以上码率(来源:自研编码内核说明),市占率超50%(来源:市占率统计),满足从内容生产到分发的全链路需求。 、8K实时编码; AI音画增强:大模型画质增强、老片修复、超分辨率、插帧、杜比全景声/视界、语音降噪、音频分离、音质增强、音量均衡; 媒体AI:AIGC生成(文生图/视频、图生图/视频、多图参考生成 · 硬核指标 编码能力:支持VP8、H.264、VP9、H.265、AV1、AVS3、H.266等最全面音视频编码标准(来源:产品编码标准说明); 码率优化:自研编码内核不损伤画质下节约50%以上码率 (来源:自研编码内核说明),智能动态编码节省超50%带宽成本且VMAF值提高3-5分(来源:智能动态编码技术测试); 分辨率支持:8K高分辨率视频实时编码(来源:专业可靠编码模块); 转码效率: CNTV 背景:CNTV需满足传统广电视频规范的4K/8K超高清转码服务。 解决方案:使用MPS 4K/8K超高清转码服务、倍速转码功能。
腾讯云极速高清(Top Speed Codec, TSC)通过智能动态编码技术,重构了视频流处理逻辑,以“更低码率、更高画质、更强适配”为核心优势,成为行业技术标杆。 例如,足球比赛中快速镜头切换与观众席特写可被精准区分,为差异化编码提供依据。 动态参数优化系统 结合视频源特性(分辨率、帧率、纹理复杂度)与设备负载,动态调整CTU/行/帧三级码率分配。 二、核心突破:从“静态压缩”到“动态感知” (一)码率控制革命 传统H.264/H.265编码采用固定率失真模型,而极速高清引入时序动态补偿因子: 场景级参数匹配:根据分类结果选择最优QP值与码率分配策略 帧级实时优化:对关键帧(I帧)采用高精度编码,P/B帧则动态降低冗余,实测码率较友商降低8%-10%。 (三)超高清实时编码能力 支持8K/30fps实时转码,压缩耗时低于50ms,较传统方案效率提升30倍。
8K视频编解码 2K视频 典型码率范围:5Mbps - 15Mbps 带宽需求:适合于大多数家庭宽带和移动网络,一般需要10 Mbps左右的带宽即可流畅播放。 4K视频 典型码率范围:20Mbps - 50Mbps 带宽需求:需要更高的带宽来支持高清的4K视频播放,推荐35 Mbps以上的带宽以获得最佳体验。 8K视频 典型码率范围:50Mbps - 100Mbps(甚至更高) 带宽需求:对于8K视频,需要更大的带宽来传输,建议至少100Mbps的带宽以保证流畅播放。 RK3588工业核心板支持8K@60fps H.265、8K@30fps H.264视频硬件解码,支持8K@30fps H.265/H.264视频硬件编码,可提供出众的超高清视频解决方案。 gst_dec_display案例分享 案例说明 本案例使用GStreamer API通过ARM从本地导入8K视频文件(H.264编码格式或H.265编码格式),然后进行H.264或H.265(NV12
其核心商业价值在于通过底层技术革新实现“降本增质”:在兼容业内最全面音视频编码标准的基础上,利用智能动态编码技术,在不损伤画质的前提下节省 50% 以上的码率成本,同时树立了集 AIGC、LLM(大语言模型 硬核指标 码率节省: 在不损伤画质情况下可节约 50% 以上 码率。 画质评分: 智能动态编码技术可将 VMAF 值提高 3-5 分。 转码速度: 分布式集群与分片并行技术支持最高倍速 30+。 编码标准: 全面支持 VP8、H.264、VP9、H.265、AV1、AVS3、H.266。 分辨率支持: 支持高达 8K 的高分辨率视频实时编码。 新技术支持: 支持 Vision Pro MV-HEVC 标准(节省 20% 码率)。 3. 产品优势 全面的协议支持: 业内支持最全面的音视频编码标准,包括 H.266、AV1 等前沿格式。 CNTV (中国网络电视台) 背景: 需要满足传统广电视频技术规范,且涉及 4K/8K 超高清内容。 解决方案: 使用 MPS 提供的 4K 和 8K 超高清转码服务及倍速转码功能。
找到最佳码率 根据最佳分辨率率后,还要根据帧率的大小找到最佳码率。计算公式为: min(list([frameRate - cap[i].frameRate]));
各大视频平台纷纷上线4K专区,冬奥会等大型活动的8K直播更是让观众充分感受到了超高清的魅力。 4K/8K超高清视频在分辨率与清晰度大幅提升的同时也带来了超高的码率,这对传输、处理、播放整条链路都是很大的挑战。 腾讯云实时超高清全链路解决方案最高可实现8K/144FPS超高清视频的实时处理及分发。 低延迟流媒体传输方案 更低码率,更优画质 无论是H.264、H.265,还是AV1、H.266,腾讯内部均自研了相应的编码内核,在压缩性能、编码速度、码率控制、主观视觉等方面相比业界广泛采用的x264/ H.265、AV1等编码格式搭配极速高清,同等分辨率下码率更优、画质更好,在节省50%带宽的基础上,提升主观画质,实现超高清视频实时处理服务。
新版本支持了更加完善的编码工具并可以灵活地开关,编码效率大大提升,最佳质量下相比x265平均可节省30%码率,针对1080p和4K视频可节省35%以上(注1),在点播类应用场景下相比x265可节省20% 码率。 码率视频码速度达到每秒编码60帧。 ,探索块划分方式选择、快速模式选择、预分析、码率控制及自适应参考结构等,在保持复杂度不变的前提下进一步提升各个编码档次的压缩效率和编码质量。 AVS3是AVS工作组制定的第三代音视频编解码技术标准,也是全球首个已推出的面向8K及5G产业应用的视频编码标准。同时,AVS3是一款Royalty-Free的编码标准,在商业上非常友好。