- 综合排序
- 最热优先
- 最新优先
- 来自专栏陈磊的专栏
Google Guetzli图片压缩算法预研报告
本文将通过比较libjpeg, Guetzli,webp的压缩率、压缩延时、压缩资源、解压性能，评估Guetzli可用性。 （此原理描述摘自文章《Guetzli：谷歌家的东西可能也没有想像的辣么美》） 压缩率 压缩率：描述压缩文件的效果名，是文件压缩后的大小与压缩前的大小之比 质量系数：图片压缩级别，质量系数1表示最低图像质量和最高的压缩 优20%左右 guetzli在高质量系数下，压缩率表现更好 图片肉眼观察质量 对于相同质量系数压缩的图片，各算法肉眼是看不出区别 压缩延时 模型：这里假设业务需要转5档图，这里压缩延时计算模型是一张图片转换成业务需要的五档图的总延时 OMG的yajunwang同学最近用guetzli算法跑了一个不同大小图片，范围是1k到4M，转换成图表如下：横坐标是图片大小，纵坐标是耗时 （此原理描述摘自文章：《谷歌开源图片压缩算法Guetzli实测体验报告 看一下真实测试的效果 输入：相同的图片源，转换成五档不同的大小 机型：andirod选8核、4核、单核三种机型，ios选择iphone5s、iphone6p、iphone7 下面第一张表是不同机型的解码耗时
4K00发布于 2017-03-31 - 来自专栏图与推荐
近期必读 ICLR 2021 【模型压缩】&【预训练】相关论文】
本期的关注焦点是【模型压缩】&【预训练】的7篇论文。点击文末“阅读原文”，获取正在接受盲审的论文列表。 模型压缩 Task-Agnostic and Adaptive-Size BERT Compression 本文的目标是通过压缩可以得到模型对不同大小和延迟的限制下的小模型；另外压缩后的模型是任务不可知 为了实现这个目标，本文使用的方法是基于NAS架构搜索的方法，由于待搜索的空间非常大，对于预训练任务难度较大，本文提供了3种策略来优化。 ? id=wZ4yWvQ_g2y¬eId=wZ4yWvQ_g2y Data-Aware Low-Rank Compression for Large NLP Models 本文的目标是对BERT id=5ip8nV7F4Qn K-PLUG: KNOWLEDGE-INJECTED PRE-TRAINED LANGUAGE MODEL FOR NATURAL LANGUAGE UNDERSTANDING
81650发布于 2020-11-10 - 来自专栏深度学习自然语言处理
近期必读 ICLR 2021 【模型压缩】&【预训练】相关论文】
模型压缩 Task-Agnostic and Adaptive-Size BERT Compression 本文的目标是通过压缩可以得到模型对不同大小和延迟的限制下的小模型；另外压缩后的模型是任务不可知 为了实现这个目标，本文使用的方法是基于NAS架构搜索的方法，由于待搜索的空间非常大，对于预训练任务难度较大，本文提供了3种策略来优化。 ? id=wZ4yWvQ_g2y¬eId=wZ4yWvQ_g2y Data-Aware Low-Rank Compression for Large NLP Models 本文的目标是对BERT id=5ip8nV7F4Qn K-PLUG: KNOWLEDGE-INJECTED PRE-TRAINED LANGUAGE MODEL FOR NATURAL LANGUAGE UNDERSTANDING 在本文中，我们提出了K-PLUG，一种基于编解码转换器的知识注入的预训练语言模型，它既适用于自然语言理解任务，也适用于生成任务。
1.5K10发布于 2020-11-11 - 来自专栏coding for love
4-3~8 code-splitting，懒加载，预拉取，预加载
这里一般使用默认的四个条件即可（至于作用的模块我们可以改为 all）： 新的 chunk 可以被共享，或者是来自 node_modules 文件夹 新的 chunk 大于30kb(在 min + gz 压缩之前 ) 当按需加载 chunk 时，并行请求的最大数量小于或等于 6 初始页面加载时并行请求的最大数量将小于或等于 4 4. 预拉取和预加载 我们考虑一下这个问题，懒加载虽然减少了首屏加载时间，但是在交互操作或者其他异步渲染的响应。我们该如何解决这个问题呢？ webpack 4.6.0+增加了对预拉取和预加载的支持。 预加载块具有中等优先级，可以立即下载。在浏览器空闲时下载预拉取的块。 一个预加载的块应该被父块立即请求。预拉取的块可以在将来的任何时候使用。 浏览器支持是不同的。 webpack4 splitChunks的reuseExistingChunk选项有什么作用
1.9K20发布于 2020-02-25 - 来自专栏用户4782617的专栏
PNG图片如何压缩，4款图片压缩神器你值得拥有
1、迅捷压缩软件 这是一款智能的图片压缩软件，但不仅仅是对图片压缩，还可以完成PDF压缩，及视频压缩，能批量压缩，帮你减轻工作量。 ▼▼ ①一次性可批量压缩最多不超过6张PNG图片 ②压缩之后PNG格式不变支持JPG和PNG两种格式 ③数量超过6张就要收费 压缩之后，会显示压缩图片之后的大小，及压缩率，让你清楚的看到压缩之后的效果 ，当压缩显示输出完成，就是压缩成功了。 ▼▼ ①一次可批量上传压缩最多10张JPG、PNG和GIF图片，会员可单次上传60张 ②支持JPG、PNG图片格式 ③压缩等级可以自由选择，压缩等级越大，压缩后清晰 ④压缩后的图片可选格式为jpg、png ▼▼ ①一次可批量上传4张图片 ②支持JPG、PNG图片格式 ③压缩类型及输出格式可自由选择 4、TinyPNG 打开 TinyPNG 网站后，直接把要压缩优化的图片图片拖曳进来，也可以点击网页中虚线框区域选择你要压缩的图片
1.7K20发布于 2019-05-31 - 来自专栏AI那点小事
CCF考试——201612-4压缩编码
例如，文字E A E C D E B C C E C B D B E中， 5个单词A、B、C、D、E出现的频率分别为1, 3, 4, 2, 5，则一种可行的编码方案是A:000, B:001, C:01 , D:10, E:11，对应的编码后的01串为1100011011011001010111010011000111，对应的长度L为3×1+3×3+2×4+2×2+2×5=34。 样例输入 5 1 3 4 2 5 样例输出 34 样例说明 这个样例就是问题描述中的例子。如果你得到了35，说明你算得有问题，请自行检查自己的算法而不要怀疑是样例输出写错了。
44520发布于 2020-04-20 - 来自专栏linux命令
linux常用命令（4）——压缩命令
今天来分享一下linux常用命令——压缩 linux常用命令——压缩 1. tar 文件打包/解压 tar 本身是 打包工具（将多个文件 / 目录合并为一个 .tar 归档文件），不直接压缩。 但它可以结合 gzip、bzip2、xz 等压缩算法，实现 “打包 + 压缩” 一体操作，生成 .tar.gz、.tar.bz2 等常见压缩包。 tar -xjvf logs.tar.bz2 # 解压 （3）xz 压缩（.tar.xz，压缩率最高，适合大文件） tar -cJvf video.tar.xz movie.mp4 基本语法：zip [选项] [压缩文件名.zip] [要压缩的文件/目录] 核心选项 选项 含义 -r 递归 压缩目录（必须加，否则只压缩目录本身，不包含内容） -q 安静模式（不显示压缩过程） - m 压缩后 删除原文件（move，慎用） -u 向已有的 zip 压缩包中 添加新文件 -d 从已有的 zip 压缩包中 删除文件 -9 最高压缩级别（默认是 -6，级别越高，压缩率越高，速度越慢）
1.1K10编辑于 2026-01-13 - 来自专栏AustinDatabases
PostgreSQL 数据压缩 LZ4 OR PGLZ 为什么都说要用新的压缩方式
首先从数据压缩的角度上来说，对于PG 数据库 TOAST 数据存储方式是对于一些大的字段的数据进行压缩和存储的一种模式。默认这样数据压缩的模式是PGLZ的模式。 我们通过下面的示例可以看到，两个表在数据插入之间的区别，一个是使用LZ4 来进行数据压缩处理的，一个是使用PGLZ方式来进行数据处理的。 可以看到明显的使用 LZ4 压缩方式的比 PGLZ 方式数据插入的速度快了 2.5倍。 后，来查看两个不同压缩方式后的表的大小，可以明显的看出，使用LZ4的表大小是由 119MB 而 使用PGLZ的压缩方式的表的大小为238MB 。 写到最后，在数据库安装时如果你将默认的压缩模式变为LZ4 那么上面的部分你都不用担心，他默认会选择LZ4作为数据压缩的方案，而不是PLGZ，但如果你没有改，那么你就需要在建立表格的时候，来重新对字段进行设置
1.1K10编辑于 2024-04-17 - 来自专栏圆圆的算法笔记
ACL 2022 杰出论文：华为&港大提出SOTA预训练语言模型量化压缩方法
3 量化压缩在PLM中的问题 将以前在BERT上取得成功的量化压缩方法应用到预训练语言模型（PLM）上，会存在比较明显的效果下降。 下图是之前的PACT、LSQ等量化压缩方法随着压缩后的bit减少困惑度的变化。可以看到压缩到2-bit时出现非常明显的效果折损。 为什么之前的量化压缩方法应用到预训练语言模型上效果会这么差的？ 对比学习的架构使用了Momentum Encoder，即动量更新的方式，可以参考之前的文章对比学习中的4种经典训练模式，有详细介绍。 6 总结 本文以ACL 2022杰出论文——量化压缩预训练语言模型为出发点，首先介绍了经典的量化压缩方法，包括BinaryConnect、PACT等，又进一步介绍了在BERT上的量化压缩工作。 通过以上工作在预训语言模型上应用的不足，带大家理解了本文面临的难点和核心解法。
82710编辑于 2022-12-19 - 来自专栏林德熙的博客
dotnet 使用 lz4net 压缩 Stream 或文件
在 dotnet 可以使用 LZ4 这个无损的压缩算法，这个压缩算法的压缩率不高但是速度很快。 K4os.Compression.LZ4 是使用 C# 写的，里面也有版本使用了 C++ 代码 因为很多时候都是对 Stream 压缩，所以重点告诉大家如何进行 Stream 压缩 注意这个压缩算法不是 zip 或 rar 压缩，也就是压缩文件不能使用现在的 zip 压缩软件打开，同时压缩的内容也不是文件 使用 NuGet 安装 K4os.Compression.LZ4.Streams 很简单就可以使用 LZ4 压缩 如我需要压缩一个字符串到文件 using K4os.Compression.LZ4.Streams; using (var stream = LZ4Stream.Encode 传入 stream 对返回的 stream 写入将会压缩到传入的 stream 如上面代码 在解压缩是 LZ4Stream.Decode 方法，如解压缩上面的文件 using
1.9K30发布于 2019-04-22 - 来自专栏开源部署
4种常用压缩格式在Hadoop中的应用
目前在Hadoop中用得比较多的有lzo，gzip，snappy，bzip2这4种压缩格式，笔者根据实践经验介绍一下这4种压缩格式的优缺点和应用场景，以便大家在实践中根据实际情况选择不同的压缩格式。 2 lzo压缩 优点：压缩/解压速度也比较快，合理的压缩率；支持split，是hadoop中最流行的压缩格式；支持hadoop native库；可以在linux系统下安装lzop命令，使用方便。 应用场景：一个很大的文本文件，压缩之后还大于200M以上的可以考虑，而且单个文件越大，lzo优点越越明显。 3 snappy压缩 优点：高速压缩速度和合理的压缩率；支持hadoop native库。 4 bzip2压缩 优点：支持split；具有很高的压缩率，比gzip压缩率都高；hadoop本身支持，但不支持native；在linux系统下自带bzip2命令，使用方便。 最后用一个表格比较上述4种压缩格式的特征（优缺点）： 压缩格式 split native 压缩率 速度 是否hadoop自带 linux命令 换成压缩格式后，原来的应用程序是否要修改 gzip 否 是
1.6K20编辑于 2022-07-01 - 来自专栏散尽浮华
Linux下lz4解压缩命令小结
lz4是一个让"人见人爱、花见花开"的压缩算法，能够在多核上很好的扩展。lz4在压缩率上略微逊色, 但是在解压速度上有着惊人的优势 (大概是gzip的3倍(多次测试对比))。 因为压缩时高效的多核利用，再加上惊艳的解压，lz4已经在非常多重要场合使用了! 对于需要频繁压缩、实时快速解压的场景来说，lz4非常适合；lz4 解压缩的对象是文件而不是目录。 1）lz4工具安装 # yum install -y lz4 lz4-devel 2）lz4解压缩命令格式 压缩 (默认解压之后的名称filename.lz4) # lz4 filename -1: 快速压缩（默认） -9: 高压缩 -d: 解压缩（默认为.lz4扩展名） -z: 强制压缩 -f: 覆盖输出而不提示 -k: 保留源文件（默认） --rm: 成功地解除/压缩后删除源文件 -m: 多个输入文件（表示自动输出文件名） -r: 在目录上递归操作（也设置为-m） -l: 使用旧格式压缩（Linux内核压缩） 4）lz4解压缩示例 [root@MGR-node3 ~]#
10K30发布于 2019-05-25 - 来自专栏本地缓存
压缩算法选型(gzipsnappylz4)及性能对比
常见压缩算法对比:Gzip/Snappy/Lz4性能对比 0 Gzip方式 1 Snappy方式 2 Lz4方式 0 Gzip方式 import java.io.ByteArrayInputStream ，压缩后的数据没有magic header 通过SnappyInputStream进行压缩，压缩后的数据有固定的header(多20个字节) @Slf4j public class SnappyUtil //github.com/lz4/lz4 官网lz4号 https://bbs.pediy.com/thread-197445.htm （snappy压缩速度要快于lz4,但是lz4解压缩速度快了snappy 一大截）:各有优点 3.2 自己压测 压缩算法 原始数据大小 压缩后数据大小 解压缩次数 耗时 gzip 3260 590 10000 171/163/152/146/148 lz4 3260 1103 对压缩比更看重,而耗时可以接受的情况,优先考虑Gzip
19.8K51发布于 2021-11-21 - 来自专栏Java知识图谱
Nginx网络压缩 CSS压缩 图片压缩 JSON压缩
1、网络压缩原理 网络压缩的原理是消耗CPU资源，减少文件在公网传输的大小，提高响应速度。 二、网络压缩 此部分所有的压缩内容在浏览器端都会还原，特别需要指出的是图片，图片在网络间是压缩状态传输的，到达浏览器后是会被还原的。 技术实现依托gzip压缩，仅仅在服务器与客户端网络传输时对静态资源进程压缩，文件的大小在压缩前与还原后保持不变。 图片压缩分为两类：一是等比压缩；二是固定宽高压缩。根据应用场景的不同也分为两类：一是固定参数；二是动态参数。 此部分图片压缩后到达浏览器不会被还原。 (\d+)x(\d+)$ { image_filter crop $3 $4; image_filter_buffer 10M; try_files /$1.$2 /default.png;
6.7K41编辑于 2022-02-08 - 来自专栏ReganYue's Blog
生成式预训练Transformer的演化预测（GPT-4 & 5）
生成式预训练Transformer的演化预测（GPT-4 & 5） GPT-4是一种颠覆性的自然语言处理模型，可以进行连贯而又引人入胜的对话（无论什么主题都行，虽然有时是一本正经的胡说八道）。 GPT-4基于深度神经网络，通过在互联网上的大量文本语料库上进行训练，包括书籍、新闻文章、社交媒体帖子、博客等等，它可以理解和使用多种语言，如英语、西班牙语、意大利语、法语或德语。 然而GPT-4并不完美，个人认为仍有很大的改进空间。例如，它可能有时会生成难以发现的错误或出现前后逻辑不一致的内容。可能也缺乏一些人类之间进行交流所必需的常识或情感。 因此，大家可能会想知道GPT-4及其未来出现的后继版本会是什么样子。**会不会有一个GPT-5版本，可以在各方面超越GPT-4？GPT-5将具有哪些新功能和新能力？它将如何影响我们的社会和文化？ GPT-5可能比GPT-4拥有更大的model size和vocabulary（词汇量），达到了数万亿个参数和tokens。
62230编辑于 2023-04-06 - 来自专栏林德熙的博客
dotnet 使用 lz4net 压缩 Stream 或文件
在 dotnet 可以使用 LZ4 这个无损的压缩算法，这个压缩算法的压缩率不高但是速度很快。 K4os.Compression.LZ4 是使用 C# 写的，里面也有版本使用了 C++ 代码 因为很多时候都是对 Stream 压缩，所以重点告诉大家如何进行 Stream 压缩 注意这个压缩算法不是 zip 或 rar 压缩，也就是压缩文件不能使用现在的 zip 压缩软件打开，同时压缩的内容也不是文件 使用 NuGet 安装 K4os.Compression.LZ4.Streams 很简单就可以使用 LZ4 压缩 如我需要压缩一个字符串到文件 using K4os.Compression.LZ4.Streams; using (var stream = LZ4Stream.Encode 和 Decode 里面还可以传入参数，用于配置更高性能的压缩 lz4/lz4: Extremely Fast Compression algorithm K4os.Compression.LZ4 所有代码都在
72710编辑于 2022-08-04 - 来自专栏用户4782617的专栏
如何把MP4视频压缩到最小，热门视频压缩软件推荐
如何把MP4视频压缩到最小？这是很多人在下载过视频之后，发现视频比较大才会考虑的问题，那么想要将视频压缩变小怎么操作呢？ 今天就来给大家分享一个热门视频软件压缩的推荐，教你两种方法轻松搞定MP4视频压缩哦，一起来看看吧。 一、软件压缩 辅助软件：迅捷压缩软件 准备文件：MP4视频 操作步骤： 1、打开电脑然后将视频压缩软件下载到桌面上，然后点击进入到软件的操作页面，选择“视频压缩”。 4、点击开始压缩之后等待一会就压缩成功了，这时在软件的界面上可以看到“输出完成”。就是压缩成功了。 4、等待一会就压缩成功了，然后点击“立即下载”就可以把已经压缩好的视频下载到桌面上了。
2.8K30发布于 2019-06-12 - 来自专栏DotNet NB && CloudNative
K4os.Compression.LZ4：.NET 平台的快速无损压缩库
引言 数据压缩技术常用于减少存储空间和网络传输负载。LZ4 是一种快速无损压缩算法，速度快，适合高性能场景。 解压速度 50 MB/s，压缩率 37% • lz4：压缩速度 280 MB/s，解压速度 520 MB/s，压缩率 57% LZ4 速度远超传统算法，压缩率稍低，但在高吞吐量场景表现优异。 它提供三种功能包： 包名 NuGet 链接 功能描述 K4os.Compression.LZ4 NuGet 块压缩 K4os.Compression.LZ4.Streams NuGet 流压缩 K4os.Compression.LZ4 .Legacy NuGet 兼容旧版 lz4net 格式 使用方式 K4os.Compression.LZ4 支持块压缩和流压缩，适用于不同场景。 LZ4Pickler LZ4Pickler 适合快速压缩小数据块，如网络消息。自动存储原始数据长度，处理不可压缩数据。
77510编辑于 2025-07-17 - 来自专栏奔跑的人生
MVC4脚本压缩 BundleTable bundles 404错误
在发布网站的时候，因为使用了MVC4的新特性BundleTable，造成访问的时候js和css报了404错误， ?
51120发布于 2019-09-11 - 来自专栏h5学习笔记
预解析
1.预解析的相关概念 JavaScript 代码是由浏览器中的 JavaScript 解析器来执行的。 JavaScript 解析器在运行 JavaScript 代码的时候分为两步：预解析和代码执行。 预解析会把变量和函数的声明在代码执行之前执行完成。 2. 变量预解析 预解析也叫做变量、函数提升。 变量提升（变量预解析）： 变量的声明会被提升到当前作用域的最上面，变量的赋值不会提升。 函数预解析 函数提升： 函数的声明会被提升到当前作用域的最上面，但是不会调用函数。 4.
96020发布于 2020-09-30
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号