- 综合排序
- 最热优先
- 最新优先
- 来自专栏Java实战博客
1 Netty 网络高并发框架
Netty是当前非常流行的网络通讯开源框架，高并发和高可靠，底层就可以用Netty支撑。 端 高并发应用 本质是NIO框架，适用于服务器通讯的多种场景 什么是同步 和 异步 同步： 浏览器发送请求，等待服务端进行相应后浏览器在做操作 这个过程就叫同步 异步：浏览器发送请求，无需服务器响应出结果 ，继续浏览器渲染接下来的操作，这个过程就叫异步 Netty 结构图 Netty 是基于 JDK下的NIO 的框架 image.png Netty 场景 RPC框架 ：阿里的分布式框架Dubbo用到了 手游 I/O模型使用场景 BIO：适用于连接数目少且固定的架构，高并发不适用，是JDK1.4之前唯一选择 NIO：适用于连接数目多，但是连接短。JDK1.4 开始支持。 会利用OS惨与并发操作，编程较为复杂。
97220编辑于 2022-01-19 - 来自专栏卯金刀GG
高并发Java（4）：无锁
在高并发Java（1）：前言中已经提到了无锁的概念，由于在jdk源码中有大量的无锁应用，所以在这里介绍下无锁。 1 shift = 31 - Integer.numberOfLeadingZeros(scale); 前导零的意思就是比如8位表示12,00001100，那么前导零就是1前面的0的个数，就是4。
70420发布于 2019-07-26 - 来自专栏C++学习历程
高并发内存池框架设计
项目源码：https://gitee.com/kkkred/thread-caching-malloc 引言 在高并发场景（如百万QPS的API网关、实时游戏服务器）中，内存分配的延迟与碎片是性能瓶颈的核心来源 传统单内存池因全局锁竞争和内存碎片问题，难以满足高吞吐需求。 获取逻辑，揭示高并发场景下内存分配的「无锁化」与「高效协同」之道。 五、总结与性能优化 高并发内存池框架通过ThreadCache（本地无锁）、CentralCache（全局协调）、PageCache（系统桥梁）的三级架构，实现了： 低延迟：ThreadCache 的无锁操作+哈希桶索引的O(1)计算，将分配/释放延迟降至O(1)； 低碎片：按Size Class分类+页级对齐的设计，减少内存碎片； 高并发：线程本地存储避免了全局锁竞争，分段锁/双链表优化了多线程协作
37610编辑于 2025-07-10 - 来自专栏源码之路
「高并发通信框架Netty4 源码解读（五）」NIO通道Channel详解
throws IOException; public abstract long transferFrom(ReadableByteChannel var1, long var2, long var4) IOException; public abstract MappedByteBuffer map(FileChannel.MapMode var1, long var2, long var4) 多个进程发起的并发文件访问的语义高度取决于底层的操作系统和（或）文件系统。 一般而言，由运行在不同 Java虚拟机上的 FileChannel 对象发起的对某个文件的并发访问和由非 Java 进程发起的对该文件的并发访问是一致的。 通过内存映射机制来访问一个文件会比使用常规方法读写高效得多，甚至比使用通道的效率都高。因为不需要做明确的系统调用，那会很消耗时间。
87130发布于 2020-09-04 - 来自专栏技术趋势
秒级达百万高并发框架-Disruptor
Disruptor介绍 Disruptor是一个高性能的并发框架，主要应用于创建具有高吞吐量、低延迟、无锁（lock-free）的数据结构和事件处理系统。 它最初由LMAX公司开发的，已经成为了业界广泛使用的高性能并发框架。 Disruptor框架的特点和优势包括： 高性能：Disruptor框架能够通过无锁的方式提供非常高的并发性能和吞吐量，比如在大规模消息发布订阅场景下，能够每秒处理数百万个消息。 Disruptor 的高吞吐量、低延迟以及可扩展性好的特点，使得它成为许多高并发应用的首选方案之一。 Disruptor的基本使用 以下是用于disruptor这个框架的基本功能的学习demo。 ，只是我们很多时候不了解而以，较老一点的程序人应该都有所了解~，当然本文主要是用于了解Disruptor这个框架实现源理和基本应用以便后续一些高并发场景设计方案可以借鉴，希望能与各位共同前进~，最后可以参考下面文献还是挺不错的借鉴
3.3K20编辑于 2023-09-01 - 来自专栏半生瓜のblog
【Linux】多进程高并发设计框架示例
多进程高并发设计框架 建议根据cpu核心数量来设置子进程的数量。 建议将对应某一进程绑定到某一cpu上。(cpu亲缘性) 优点: 充分利用多核系统的并发处理能力。 spawn_process(spawn_proc_pt proc, void *data, char *name); int main(int argc,char **argv){ //调用启动工作进程-4个 start_worker_processes(4); //管理子进程 wait(NULL); } //启动子进程 void start_worker_processes(int cpu亲缘关系，将进程绑定在其中的一个核上 static void worker_process_init(int worker){ cpu_set_t cpu_affinity; //多核高并发处理
94520编辑于 2023-05-13 - 来自专栏源码之路
「高并发通信框架Netty4 源码解读（六）」NIO通道之Socket通道
在 SocketChannel 上并没有一种 connect( )方法可以让您指定超时（timeout）值，当 connect( )方法在非阻塞模式下被调用时 SocketChannel 提供并发连接： 如果返回值是 true，说明连接立即建立了（这可能是本地环回连接）；如果连接不能立即建立， connect( )方法会返回 false 且并发地继续连接建立过程。 假如某个SocketChannel 上当前正由一个并发连接，isConnectPending( )方法就会返回 true 值。 并发访问时无需特别措施来保护发起访问的多个线程，不过任何时候都只有一个读操作和一个写操作在进行中。请记住， sockets 是面向流的而非包导向的。
89320发布于 2020-09-04 - 来自专栏源码之路
「高并发通信框架Netty4 源码解读（三）」NIO缓冲区Buffer详解
我们可以这样实现： buffer.put(0,(byte)'M').put((byte)'w'); 这里通过进行一次绝对方案的 put 将 0 位置的字节代替为十六进制数值 0x4d，将 0x77放入当前位置 位置 4 和 5 不受影响，但现在正在或已经超出了当前位置，因此是“死的”。它们可以被之后的 put()调用重写。还要注意的是，位置已经被设为被复制的数据元素的数目。 4.复制缓冲区 如我们刚刚所讨论的那样，可以创建描述从外部存储到数组中的数据元素的缓冲区对象。但是缓冲区不限于管理数组中的外部数据。它们也能管理其他缓冲区中的外部数据。
1.2K30发布于 2020-09-04 - 来自专栏冰河技术
【高并发】如何使用Java7中提供的ForkJoin框架实现高并发程序？
作者个人研发的在高并发场景下，提供的简单、稳定、可扩展的延迟消息队列框架，具有精准的定时任务和延迟队列处理功能。 ForkJoin是由JDK1.7之后提供的多线程并发处理框架。ForkJoin框架的基本思想是分而治之。什么是分而治之？ 代码示例 示例代码如下： package io.binghe.concurrency.example.aqs; import lombok.extern.slf4j.Slf4j; import java.util.concurrent.ForkJoinPool log.error("exception", e); } } } 写在最后 如果觉得文章对你有点帮助，请微信搜索并关注「 冰河技术 」微信公众号，跟冰河学习高并发编程技术 最后，附上并发编程需要掌握的核心技能知识图，祝大家在学习并发编程时，少走弯路。 ?
1.1K10发布于 2020-10-29 - 来自专栏源码之路
「高并发通信框架Netty4 源码解读（七）」NIO通道之Selector选择器
如果您考虑一下需要管理大量并发的连接的网络服务器(webserver)的实现，就可以很容易地想到如何善加利用这些能力。 乍一看，好像只要非阻塞模式就可以模拟就绪检查功能，但实际上还不够。 channel.register (selector, SelectionKey.OP_READ); key.attach (myObject); 关于 SelectionKey 的最后一件需要注意的事情是并发性
76330发布于 2020-09-04 - 来自专栏源码之路
「高并发通信框架Netty4 源码解读（番外篇）」NIO实现大文件传输
服务端 package NIO.VIPIO; import java.io.FileInputStream; import java.net.InetSocketAddress; import java.nio.ByteBuffer; import java.nio.channels.*; import java.util.Iterator; import java.util.Set; public class BigFileTrans { public static void main(St
68960发布于 2020-09-04 - 来自专栏源码之路
「高并发通信框架Netty4 源码解读（二）」NIO的前世今生及核心概念
JCP 网站详细介绍了 JSR 的运作流程，以及 NIO 从最初的提议到最终实现并发布的演进历程。 天下还是没有免费的午餐：您无法使用每一种操作系统的每一种特性，但是这些新类还是提供了强大的新框架，涵盖了当今商业操作系统普遍提供的高效 I/O 特性。 典型的内存页为 1,024、 2,048 和 4,096 字节。虚拟和物理内存页的大小总是相同的。 下图显示了来自多个虚拟地址的虚拟内存页是如何映射到物理内存的。 ?
74730发布于 2020-09-04 - 来自专栏架构专题
没有预热，不叫高并发，叫并发高
大家都知道，高并发系统有三把斧子：缓存、熔断和限流。但还有一把斧子，经常被遗忘在角落里，郁郁不得志，那就是预热。 ? 现象举例 先说两个现象。这些现象，只能在并发高的系统中出现。 一、DB重启后，瞬间死亡 一个高并发环境下的DB，进程死亡后进行重启。由于业务处在高峰期间，上游的负载均衡策略发生了重分配。刚刚启动的DB瞬间接受了1/3的流量，然后load疯狂飙升，直至再无响应。 当服务重新加入集群时，却发生了大量高耗时的请求，在请求量高的情况下，甚至大批大批的失败。 引起的原因大概可以归结于： 1、服务启动后，jvm并未完全准备完毕，JIT未编译等。 如图：node4是刚启动的节点，集成在网关中的负载均衡组件，将能够识别出这台刚加入的实例，然后逐步放量到这台机器，直到它能够真正承受高速流量。 ? 4、一个极端情况，我的后端只有1个实例，根本就启动不起来。 拿SpringCloud来说，我们就要改变这些组件的行为。 1、ribbon的负载均衡策略。 2、网关的负载均衡策略。
3.2K21发布于 2019-07-10 - 来自专栏服务器优惠介绍
高并发服务器框架设计方案
简单谈一谈高并发服务器框架设计的基本思路 基本的服务器框架都是C/S结构的，请求和相应流程是这样的： 这样的框架存在一个很严重的问题，当客户端高并发请求到来，服务器需要进行大量的数据库操作，假设数据库最大连接数为 这种做法有效的降低了服务器的压力，但是没有提高处理速度， 仅仅保证了请求被缓存，处理效率仍受限于数据库的并发数。 到目前为止，这个框架可以适用于大部分服务器逻辑。为保证数据库的响应速度和处理效率，可以对数据库进行分区。 数据库分区有两种形式(分库、分表) 分库：数据库可以按照一定的逻辑把表分散到不同的数据库。 4 锁竞争，加锁解锁会造成一定的效率衰减。 到此为止，服务器框架介绍完毕。
1.6K11发布于 2019-07-11 - 来自专栏上云
高并发服务器框架设计方案
简单谈一谈高并发服务器框架设计的基本思路 基本的服务器框架都是C/S结构的，请求和相应流程是这样的： [gao1.png] 这样的框架存在一个很严重的问题，当客户端高并发请求到来，服务器需要进行大量的数据库操作 这种做法有效的降低了服务器的压力，但是没有提高处理速度， 仅仅保证了请求被缓存，处理效率仍受限于数据库的并发数。 [gao4.png] 如果有大量的业务请求到来，虽然设计了多个应用服务器，也架设了缓存服务器，完善了中间层的缓冲队列和数据库连接池， 但是数据库服务器仍然会出现瓶颈。 4 锁竞争，加锁解锁会造成一定的效率衰减。 到此为止，服务器框架介绍完毕。 高并发服务器框架设计方案用到的腾讯云产品： 腾讯云服务器：https://cloud.tencent.com/product/cvm 腾讯云数据库：https://cloud.tencent.com/product
1.7K11发布于 2019-07-08 - 来自专栏Java职业技术分享
Java异步NIO框架Netty实现高性能高并发
开发人员一般可以根据自己的需要来选择合适的模式，一般来说，低负载、低并发的应用程序可以选择同步阻塞IO以降低编程复杂度。但是对于高负载、高并发的网络应用，需要使用NIO的非阻塞模式进行开发。 但是对于高负载、大并发的应用却不合适，主要原因如下： 1) 一个NIO线程同时处理成百上千的链路，性能上无法支撑，即便NIO线程的CPU负荷达到100%，也无法满足海量消息的编码、解码、读取和发送； 2 高效的并发编程 Netty的高效并发编程主要体现在如下几点： 1) volatile的大量、正确使用; 2) CAS和原子类的广泛使用； 3) 线程安全容器的使用； 4) 通过读写锁提升并发性能。 下面我们一起看下不同序列化&反序列化框架序列化后的字节数组对比： 图2-26 各序列化框架序列化码流大小对比 从上图可以看出，Protobuf序列化后的码流只有Java序列化的1/4左右。 主要分享分布式架构、高可扩展、高性能、高并发、性能优化、Spring boot、Redis、ActiveMQ、Nginx、Mycat、Netty、Jvm大型分布式项目实战学习架构师视频。
3.2K10发布于 2018-09-28 - 来自专栏技术记录
netty框架实现websocket达到高并发
但是在实际项目中，那样的用法是不可取的，理由是tomcat对高并发的支持不怎么好，特别是tomcat9之前，可以测试发现websocket连接达到的数量很低，且容易断开。 什么是Netty Netty是业界最流行的NIO框架之一，它的健壮性、功能、性能、可定制性和可扩展性在同类框架中都是首屈一指的，它已经得到成百上千的商用项目验证，例如Hadoop的RPC框架Avro就使用了 Netty作为底层通信框架，其他还有业界主流的RPC框架，也使用Netty来构建高性能的异步通信能力。 ； 性能高，通过与其他业界主流的NIO框架对比，Netty的综合性能最优； 成熟、稳定，Netty修复了已经发现的所有JDK NIO BUG，业务开发人员不需要再为NIO的BUG而烦恼； 社区活跃，版本迭代周期短 ChunkedWriteHandler()); // 在管道中添加我们自己的接收数据实现方法 e.pipeline().addLast("handler",new MyWebSocketServerHandler()); } } 4.
10.3K110发布于 2018-01-30 - 来自专栏后台技术底层理解
redis高并发高可用
redis 实现高并发主要依靠主从架构，一主多从. 对于性能来说，单主用来写入数据，单机几万QPS，多从用来查询数据，多个从实例可以提供每秒 10w 的 QPS。 如果想要在实现高并发的同时，容纳大量的数据，那么就需要 redis 集群， 使用 redis cluster 模式，可以提供每秒几十万的读写并发。 这样也可以很轻松实现水平扩容，支撑读高并发。 Redis虽然读取写入的速度都特别快，但是也会产生读压力特别大的情况，所以为了缓解读的压力，所以进行读写分类，并对读进行扩展。 优点： 1、有效的解决了redis在分布式方面的需求 2、遇到单机内存，并发和流量瓶颈等问题时，可采用Cluster方案达到负载均衡的目的 3、可实现动态扩容 4、P2P模式，无中心化 5、通过Gossip ==怎么保证redis是高并发以及高可用的==？ sdown 和 odown 转换机制 sdown 是主观宕机，就一个哨兵如果自己觉得一个 master 宕机了，那么就是主观宕机。
3.2K10发布于 2020-08-04 - 来自专栏后台及大数据开发
【高并发】秒杀系统高并发请求排队处理
今天无意中看见了这位兄弟的文章 通过请求队列的方式来缓解高并发抢购（初探） 但文章最后说并发超过500 就会出现超发，看了下代码，的确有这个问题 抽空简单完善了下，经压力测试后发现暂无超发现象， 下面为我的代码 欢迎指正 由于是在windows下测试，并发高了就报错 java.net.BindException: Address already in use 这个初看上去很像端口被占用，其实是因为已经完成请求的
4K11发布于 2018-08-02 - 来自专栏源码之路
「高并发通信框架Netty4 源码解读（八）」NIO应用——聊天案例及Reactor线程模式
并发读写能力得到了大大的提高。 e.printStackTrace(); } } } 此时，我们将读写事件注册到其他selector中，读写事件轮询注册到不同的子selector上，实现高并发处理 e.printStackTrace(); } } } 如果第一次接触NIO，上面的代码读起来比较费劲，NIO编程确实麻烦，而且很容易出错，现实开发中不会用原生NIO库，小编都是用netty这个NIO框架进行编程
2K30发布于 2020-09-04
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号