- 综合排序
- 最热优先
- 最新优先
Java性能调优：利用虚拟线程与作用域值，重构百万级并发系统降低80%内存开销
在Java的世界里，线程昂贵是一个根深蒂固的共识。每个操作系统线程都消耗数MB的栈内存，导致百万级并发场景下，传统线程池要么内存溢出，要么频繁切换引发CPU风暴。 本文将结合一个网关系统的重构案例，深入讲解如何利用虚拟线程配合全新的作用域值（ScopedValues），替代传统的ThreadLocal，在实现百万级并发的同时，将内存占用降低80%以上。 这种“一平台多虚拟”的模型，使得创建数百万个虚拟线程成为可能，其创建和上下文切换的成本几乎与普通Java对象无异。然而，虚拟线程带来一个副作用：传统的ThreadLocal可能不再适用。 而采用虚拟线程+ScopedValues的方案，我们轻松创建了100万个虚拟线程，内存占用稳定在4.2GB左右，GC仅为几毫秒级的YoungGC。 总结虚拟线程与作用域值是Java平台近十年来最激动人心的演进之一。它们联手终结了“昂贵线程”的时代，让Java能够优雅地处理过去只有Go、Erlang等语言才能驾驭的百万级并发。
2100编辑于 2026-04-26- 来自专栏IT技术精选文摘
EMQ百万级MQTT消息服务
在正常业务使用下对于客户端的行为可以使用ACL进行限制,比如A客户端只能订阅 /A/get 队列消息和向 /A/set 发布内容 但是在MYSQL里面处理这样的鉴权就需要写入两条记录,如果设备量有一百万数据库就要承担两百万条鉴权数据量会大大影响数据库的性能
2.7K40发布于 2018-06-22 - 来自专栏凯哥Java
MySQL 百万级分页优化(Mysql千万级快速分页)
一般刚开始学SQL的时候，会这样写 SELECT * FROM table ORDER BY id LIMIT 1000, 10; 但在数据达到百万级的时候，这样写会慢死 SELECT * FROM By:jack Mysql limit分页慢的解决办法（Mysql limit 优化，百万至千万条记录实现快速分页） MySql 性能到底能有多高？ MySql 这个数据库绝对是适合dba级的高手去玩的，一般做一点1万篇新闻的小型系统怎么写都可以，用xx框架可以实现快速开发。可是数据量到了10万，百万至千 万，他的性能还能那么高吗？ 可以快速返回id就有希望优化limit ， 按这样的逻辑，百万级的limit 应该在0.0x秒就可以分完。看来mysql 语句的优化和索引时非常重要的！ 小小的索引+一点点的改动就使mysql 可以支持百万甚至千万级的高效分页！ 通 过这里的例子，我反思了一点：对于大型系统，PHP千万不能用框架，尤其是那种连sql语句都看不到的框架！
3.4K10编辑于 2022-12-15 - 来自专栏凯哥Java
MySQL 百万级分页优化(Mysql千万级快速分页)
一般刚开始学SQL的时候，会这样写 SELECT * FROM table ORDER BY id LIMIT 1000, 10; 但在数据达到百万级的时候，这样写会慢死 SELECT * FROM By:jack Mysql limit分页慢的解决办法（Mysql limit 优化，百万至千万条记录实现快速分页） MySql 性能到底能有多高？ MySql 这个数据库绝对是适合dba级的高手去玩的，一般做一点1万篇新闻的小型系统怎么写都可以，用xx框架可以实现快速开发。可是数据量到了10万，百万至千 万，他的性能还能那么高吗？ 可以快速返回id就有希望优化limit ， 按这样的逻辑，百万级的limit 应该在0.0x秒就可以分完。看来mysql 语句的优化和索引时非常重要的！ 小小的索引+一点点的改动就使mysql 可以支持百万甚至千万级的高效分页！ 通 过这里的例子，我反思了一点：对于大型系统，PHP千万不能用框架，尤其是那种连sql语句都看不到的框架！
4.4K30发布于 2019-06-28 - 来自专栏程序员阿常
写了个百万级的生产 bug ！！！
比如我们的app有几百万用户，但是增量拉取失败的就有几万，那么对于这几万用户，命中了 bug 的实验的话，体验就会非常不好，而且万一用户投诉，也挺难搞。尝试了热修之后，效果不好，所以关了实验。 4、技术栈本身的缺陷 技术栈本身的缺陷是指，热修成本高，特别是这种一级页面，假设实验无法控制，要挂全部挂。甚至可能需要出一个新包来更正这个错误。那可能就是一级事故了。 但是 RN 的性能相比 flutter 会差一些，这应该也是前人选 flutter 的原因吧～ 总结 啰啰嗦嗦说了这么多，主要是出生产 bug 的时候有点慌的，毕竟百万级别的用户，百分之一也有几万了，就算影响面小
57930编辑于 2022-12-20 - 来自专栏生信技能树
百万级单细胞GSVA如何提速？
细胞亚群中细胞数大于100的取100个，小于100的为原来的细胞数： 得到为单个细胞水平的打分，单细细胞数已经是降采样后的： 抽样还可以解决的另外一个问题是计算机资源限制，现在的单细胞数据集很容易达到几十万甚至上百万的细胞数量
68510编辑于 2025-01-01 - 来自专栏菜鸟成长学习笔记
如何快速导出百万级 Excel 数据
今天分享一个 PHP 最好的一个 Excel 导出扩展。在日常的开发工作中，导出大量的 Excel 文件是必不可少的情况。之前做数据导出一般都是导出 csv 文件，或者使用 PHPexcel 扩展，导出 Excel 常见的问题就是，数据量大、内存消耗高。今天的这个扩展就很好的解决了这个问题。
2.7K21发布于 2021-01-04 - 来自专栏云时代Java开发：原理、实战与优化
Java 21 虚拟线程（Virtual Threads）实战：百万并发、性能翻倍，Project Loom如何颠覆传统并发模型？
这使得传统的Java应用在面对高并发I/O场景（如Web服务器处理成千上万的HTTP请求）时，其并发能力被牢牢地限制在数千级别。 其核心成果——VirtualThreads（虚拟线程），通过在JVM层面引入一种轻量级的线程实现，让开发者能够以简单、同步的代码风格，轻松驾驭百万级别的并发任务，从而重塑Java高并发编程的未来。 虚拟线程（VirtualThread）：由JVM在用户态管理和调度的轻量级线程，数量可以极其庞大（百万级）。一个虚拟线程在其生命周期中，并不会独占一个载体线程。 ,载体线程可复用适用场景CPU密集型任务I/O密集型高并发任务数量级数千百万+第二章：VirtualThreads的核心API与使用方式2.1基础创建方式虚拟线程的设计哲学之一是无缝兼容。 虚拟线程（例如10,000+并发）：吞吐量可以轻松达到数十万甚至上百万RPS，性能提升可达10倍至100倍。
33721编辑于 2026-04-07 - 来自专栏王磊的博客
面试官：什么是虚拟线程？为什么要有虚拟线程？
Java 中的虚拟线程，也叫做协程或“轻量级线程”，它诞生于 JDK 19（预览 API），正式发布于 JDK 21，它是一种在 Java 虚拟机（JVM）层面实现的逻辑线程，不直接和操作系统的物理线程一一对应 操作系统线程、普通线程（Java 线程）和虚拟线程的关系如下：虚拟线程使用虚拟线程的创建方式，主要有以下 4 种：Thread.startVirtualThread(Runnable task)Thread.ofVirtual (()->{ System.out.println("Do virtual thread.");});// 运行虚拟线程vt.start();3.factory先创建虚拟线程工厂，然后再使用工厂创建虚拟线程 普通线程默认创建的是用户线程（而守护线程），而虚拟线程是守护线程，并且其守护线程的属性不能被修改，如果修改就会报错，如下图所示：虚拟线程由 JVM 调度和使用，避免了普通线程频繁切换的性能开销，所以相比于普通的线程来说 小结线程是轻量级的进程，而虚拟线程则是轻量级的线程，虚拟线程是 JVM 层面实现的逻辑线程，不直接和操作系统的物理线程一一对应，因此使用它可以减少线程上下文切换所带来的性能开销。
1.1K10编辑于 2023-12-20 - 来自专栏JAVA 框架/源码学习
如何快速创建百万级测试数据
进行SQL优化或查询性能测试时,我们需要大量数据测试来模拟,这个时候引出一个问题:数据的创建
1.6K20发布于 2021-01-14 - 来自专栏Java项目实战
百万并发！Java虚拟线程源码大揭秘：高并发场景实战指南，性能飙升百倍
⚡️ 百万并发！Java虚拟线程源码大揭秘：高并发场景实战指南，性能飙升百倍！ ⚡️ 警告：阅读本文可能导致传统线程池彻底失业！ 1. 高并发实战场景：百万级HTTP服务场景背景需求：电商大促时处理10万+ QPS的订单请求痛点：传统线程池（500线程）导致99%请求排队超时虚拟线程解决方案// Spring Boot 源码级调优技巧避免线程固定（Pinning）// ❌ 错误示例：synchronized导致线程固定public class PaymentService { private double HTTP服务Tomcat线程池+异步回调虚拟线程Per Request数据库访问连接池+阻塞调用虚拟线程+同步JDBC微服务调用CompletableFuture链虚拟线程+同步调用链批处理任务分片+线程池每任务独立虚拟线程 它让开发者用同步代码的简洁性，获得异步框架的高性能，彻底解决高并发场景的三大痛点：资源消耗：从MB级线程 → KB级虚拟线程编程复杂度：从回调地狱 → 同步直出可观测性：完整线程堆栈
52110编辑于 2025-09-19 - 来自专栏技术趋势
秒级达百万高并发框架-Disruptor
Disruptor框架的特点和优势包括： 高性能：Disruptor框架能够通过无锁的方式提供非常高的并发性能和吞吐量，比如在大规模消息发布订阅场景下，能够每秒处理数百万个消息。 可扩展性：Disruptor框架支持多线程处理消息，可以根据实际需求设置线程数，以提高处理效率。 Disruptor解决了什么问题？ 所以这个框架总体性能单体百万是不考虑具体业务逻辑的，当然我的电脑是M1，上面还跑了大量的软件，仅达到了33万/s,可能因为配置所限~，有兴趣同学可以自行测试~ Disruptor的核心设计原理 Disruptor 是一款高性能内存队列框架，它采用了一些独特的设计原理，通过利用Java虚拟机的内存模型和CPU缓存等硬件特性来实现高效的数据传输和处理。 内存屏障 Disruptor利用了Java虚拟机的内存模型和CPU缓存等硬件特性来实现高效的数据传输和处理。
3.3K20编辑于 2023-09-01 - 来自专栏技术开源分享
苏宁百万级商品爬取 简述
代码下载链接 苏宁百万级商品爬虫 目录 思路讲解 类别爬取 思路讲解 类别页数爬取 商品爬取 3.1 思路讲解 商品爬取1 3.2 思路讲解 商品爬取2 3.3 代码讲解 商品爬取 索引讲解 ，主要用在苏宁百万数据爬取时。 多线程爬取，多线程存储。 Lucene索引和分词 简单使用，并未深入。主要时对爬取的百万数据建立索引库，做一个简单的查询。 对很多技术的生疏，异步多线程在工作中不长使用，没有踩过坑，所以一定会跌的很惨。 产品有那么多属性，取哪些字段，百万的数据量应该如何存储，同样的百万数量应该如果查询，这都是在前期应该考虑好的问题。不然等开始编码再修改就很麻烦
99220发布于 2018-10-31 - 来自专栏大数据生态
快速构建Mysql百万级测试数据
本文描述问题及解决方法同样适用于 腾讯云 云数据库 MySQL（TencentDB for MySQL，CDB）。
3.2K2317发布于 2021-03-21 - 来自专栏程序猿的大杂烩
线程优先级
线程优先级： 线程在同时争抢cpu资源的时候，如果没有设置优先级执行顺序是比较乱的。如果设置了优先级则当线程碰撞在一起的时候，优先级高的就会先执行。 不设置优先级代码示例： ? 设置优先级代码示例： ? 线程的优先级只有在线程碰撞在一起的时候才能看出效果，需要在执行次数较多的情况下就能明显看出来。执行次数少比较难看出效果，因为线程碰撞到一起的几率比较小。 notify方法： notify方法是用来激活进入等待状态的线程，此方法只能激活最开始进入等待状态的那个线程。 notifyAll方法： notifyAll方法也是用来激活进入等待状态的线程，不过此方法能够激活所有进入等待状态的线程。 线程应用例题之买馒头： 想要买馒头首先需要消费者、店铺、还有做馒头的厨子，所以我们需要三个类，其中厨子和消费者是线程，店铺则是对象。
1.2K10发布于 2020-09-23 - 来自专栏await
线程优先级
线程优先级被线程调度用来判定何时每个线程允许运行。理论上，优先级高的线程比优先级低的线程获得更多的CPU时间。 举例来说，当低优先级线程正在运行，而一个高优先级的线程被恢复（例如从沉睡中或等待I/O中），它将抢占低优先级线程所使用的CPU。 理论上，等优先级线程有同等的权利使用CPU。但你必须小心了。 一个线程通过Thread.NORM_PRIORITY设置了高于普通优先级两级的级数，另一线程设置的优先级则低于普通级两级。两线程被启动并允许运行10秒。每个线程执行一个循环，记录反复的次数。 线程优先级被线程调度用来判定何时每个线程允许运行。理论上，优先级高的线程比优先级低的线程获得更多的CPU时间。 一个线程通过Thread.NORM_PRIORITY设置了高于普通优先级两级的级数，另一线程设置的优先级则低于普通级两级。两线程被启动并允许运行10秒。每个线程执行一个循环，记录反复的次数。
1.4K30发布于 2021-09-09 - 来自专栏互联网底层的我们
话说 用户线程&守护线程&线程组&线程优先级
用户线程&守护线程&线程组&线程优先级 如果把公司比喻成进程， 那么你和我就是用户线程， 后勤部门就是守护线程（负责给你订水，打扫办公环境等）， 每个项目组就是一个线程组， 程序员等级就是优先级（高级程序员 ( g.activeCount()); // 输出线程组包含线程信息 //g.list(); // 获取线程组所有线程的最大优先级 //int max = g.getMaxPriority(); // 还有一些其他的 读者阔以自己去看看 了解为主 } 三、 优先级 在”一“中我们看源码的时候看到了，优先级默认是获取的父线程的优先级 上边说了 线程优先级高了获取cpu的概率高 但是不一定肯定比低优先级的线程先获取到cpu 只是概率高 下边有一个例子测试优先级获取cpu的概率 public class ProTest02 { 5的线程累加：2140 优先级为7的线程累加：2294 优先级为3的线程累加：431 优先级为1的线程累加：139 欢迎关注公众号： [公众号二维码.jpg]
1.2K00发布于 2021-04-05 - 来自专栏Java项目实战
百万并发零压力！Java虚拟线程实战手册：从原理到源码，高并发场景碾压式优化
⚡️ 百万并发零压力！Java虚拟线程实战手册：从原理到源码，高并发场景碾压式优化！ ⚡️ 1. 什么是Java虚拟线程？颠覆传统的并发革命！ 与传统线程（平台线程）相比，其核心优势在于：极致轻量：单虚拟线程内存占用仅几百字节，可创建数百万个；零阻塞代价：I/O阻塞时自动挂起，JVM将其从载体线程卸载，释放资源给其他任务；同步式编码 ，异步级性能：用同步代码风格实现高并发，告别回调地狱。 虚拟线程 vs 线程池：降维打击的四大区别特性传统线程池虚拟线程资源开销每线程占用MB级内存，数量受限每线程仅几百字节，可百万级创建阻塞代价阻塞占用OS线程， 高并发实战：三大场景 + 完整代码 + 源码解析场景1：Spring Boot万级HTTP请求处理问题：传统线程池在QPS>10000时，线程阻塞导致响应延迟飙升。
1.5K10编辑于 2025-06-09 - 来自专栏LanceToBigData
内核级虚拟化技术
软件虚拟化也可以理解成进程级虚拟机，其他虚拟化成为系统级虚拟机。 在进程级虚拟机中负责虚拟化的软件成为运行时软件，而系统级虚拟机中负责虚拟化的软件成为VMM(Virtual Machine Monitor) 硬件虚拟化：硬件虚拟化基本上就是在一台宿主机上虚拟了整个系统 这会很明显导致很多重复的线程和重复的内存页出现，性能上肯定会有影响。所以采用这种技术，一台宿主机上虚拟机的个数肯定会有一定限制。 2.2、平台虚拟化与软件虚拟化 ? Linux操作系统目录结构包含的/dev目录树下的设备对于所有User-space进程或线程(无论是在GuestOS上，还是在VMM上)来说都是通用的，但是每个打开/dev/kvm设备的不同的进程或线程 五、内核级虚拟化技术 内核级虚拟化技术：Kernel-based Virtual Machine，简称KVM 5.1、KVM优势 1）KVM Memory Page Sharing ?
2.3K50发布于 2018-01-18 - 来自专栏技术分享
JDK23--虚拟线程
传统的 Java 线程是操作系统级线程（内核线程），每个线程需要分配较大的堆栈空间和系统资源，而虚拟线程是在 JVM 内部管理的，不直接依赖操作系统线程，极大地减少了资源开销。 大规模并发 支持数百万级的并发线程，传统线程模型难以在资源有限的环境下实现如此高的并发度。 透明性 使用虚拟线程无需学习新的 API，开发者可以像使用传统线程一样简单地操作虚拟线程。 虚拟线程的核心理念在 Java 的并发编程中，传统线程模型存在以下问题： 创建开销高：操作系统级线程的堆栈内存和上下文切换成本较高。 ; }); virtualThread.start(); }}虚拟线程 vs 传统线程特性传统线程（OS线程）虚拟线程（JVM线程）创建和销毁成本高低并发数量限制受限于硬件资源数百万级阻塞操作阻塞操作占用系统资源阻塞时不占用系统资源调试和监控操作系统工具支持良好
54420编辑于 2025-01-10
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号