首页
学习
活动
专区
圈层
工具
发布

YGC导致CPU负载过高的排查与解决

否则按照 cpu 核心数量计算 young 大小:64M * cpu 核心数 * 13 / 10 批量任务每次任务量过大,短时间内创建大量对象,导致 jvm 疯狂的 young gc 频繁 young...gc 导致 CPU 使用率过高,系统 一、现象 在报警群里看到 XXX 服务所在的服务器负载很高, 4 核 16G 的配置,CPU 使用率 >90% 二、排查过程 查看 GC 情况 1....,而定时任务创建大量对象而且任务有堆积,对象不能被释放,从而导致幸存区使用率过高,发生频繁的 gc。...否则按照 cpu 核心数量计算 young 大小:64M * cpu 核心数 * 13 / 10 3.批量任务每次任务量过大,短时间内创建大量对象且不释放,导致 jvm 疯狂的 young...gc 4.频繁 young gc(100 次 / 秒)导致 CPU 使用率过高,系统吞吐量下降 三、解决方案 1.显式调整新生代大小 将 newRatio 调整为 3 2.离线任务错峰执行

5.6K30
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    容器CPU使用率过高,导致宿主机load average飙升

    早上醒来已经收到多条服务器告警信息,具体是这样的,如下图:Processor load (15 min average per core) ;服务器CPU load 过高,接下来是处理过程,记录一下...登录告警的服务器,这是一台openshift容器平台的计算机节点; top查看到 load average 达到了100左右; 最高的进程占用400% ?...查看一下 这台服务器有56个逻辑c, load average达到56就算是满载了; ?...进一步分析: top所看到的CPU使用率是cpu正在处理当前进程任务所占用cpu比率; load average 显示的数值是 cpu正在处理的进程数和等待处理的进程数 因为需处理的进程过多,容器被限制了...cpu最多使用4个,导致等待处理进程堵塞,load average是 运行+等待运行的进程数,故load average 数值飙升。

    4.3K20

    Linux 服务器 CPU 占用过高排查指南

    当你的 Linux 服务器 CPU 飙高时,通常意味着有某些进程异常占用资源。 这篇文章会教你 如何快速定位 CPU 高占用的原因,以及如何用多种常见工具进行检查。...更新系统与驱动 某些旧软件或驱动会导致 CPU 异常升高。 建议定期执行: apt upgrade 或 yum update 3. 重新安装或降级应用 某些应用高 CPU 可能是软件 bug。...如果 top、ps 都没有看到“罪魁祸首”,那可能是: 机器本身性能不足 多个程序共同拉高 CPU IO、内存等待导致 load 很高 某些服务过载(MySQL、Nginx 等) 解决建议: ✔ 分离高负载应用...✔ 升级服务器配置 如: 提升 vCPU 数量 增加内存 切换更高性能实例规格 总结 排查 CPU 占用过高的顺序通常是: top 看当前谁最耗 CPU ps 按 CPU 排序确认具体进程 sar/iostat.../vmstat 判断是否是 IO、系统等待导致的假高 uptime 看负载是否持续偏高 根据情况:杀进程、更新软件、重装、扩容或重启 END

    2K11

    【排查服务器CPU过高的java应用方法】

    排查服务器CPU过高的java应用方法: 查看系统资源使用情况:使用命令top或者htop查看系统的CPU使用率和内存使用率,确认是否只有java进程占用了较高的CPU资源。...查看java进程占用的CPU:使用命令ps -ef | grep java找到java进程的PID,然后使用命令top -p 查看该进程的CPU使用率和内存使用率。...java运行参数开启GC日志,例如-Xloggc:gc.log -XX:+PrintGCDetails -XX:+PrintGCDateStamps,然后分析GC日志,查看GC情况是否正常,GC频率是否过高...分析代码:根据线程分析结果,定位到占用CPU较高的代码,检查是否存在死循环、过多的循环迭代、线程阻塞等问题。...升级软件版本:有时候,高CPU占用是由于软件版本的Bug引起的,尝试升级软件版本来解决问题。

    1.2K10

    故障分析 | 大量短时进程导致 cpu 负载过高案例一则

    测试结束后cpu负载一直维持在50%左右,而此时mongo的qps已经下降为0。...这台机器上只安装了mongo,将所有mongo实例关闭,cpu负载立即恢复正常,再将mongo实例开启,过了一会cpu负载又开始飙升。场景能复现,且确认是跟mongo实例有关系。...2、诊断 执行top命令,cpu的usr已经达到了40%,但是前几个进程的%cpu加起来远远凑不够数。 [renkun0524-1.png] 查看mongos的qps,确实没有执行用户命令了。...perf record -ag -- sleep 10 && perf report 查看cpu执行情况。...回到本文开头,top进程的cpu利用率加起来远远小于cpu总体负载,大概率是有频繁短时进程偷走了这部分CPU资源,导致top命令来不及捕获统计。

    1.3K40

    CPU占用过高定位?

    比如问你常用的5个linux命令你可以说top(整机),vmstat(CPU),free(内存),df(硬盘),iostat (磁盘IO),ifstat(网咯IO)等... ?...token=07193d87b188531f 下面来做个实战的测试,当xian线上遇到CPU占用过高怎么排查,如果是在面试的时候面试官这么问你的话,你回答查看下日志或者根据出错问题查看下百度,那么在面试官那你的印象将不会得到很好的认可...接下一个老方法和旧方法 旧方法:jstack 进程ID | grep tid(16进制线程ID小写英文) -A60(老方法) 但对我现在的服务器好像不太使用所以我使用了个新方法 新方法:jstack...当然一般的代码程序出错我们可以直接用 ps -ef|grep 启动程序名,但是对于CPU占用过高的排查还是需要一定的手段和实战经验的。 每天 进步一点点

    3.3K40

    性能分析(3)- 短时进程导致用户 CPU 使用率过高案例

    VM1:用作 Web 服务器,来模拟性能问题 VM2:用作 Web 服务器的客户端,来给 Web 服务增加压力请求 使用两台虚拟机(均是 Ubuntu 18.04)是为了相互隔离,避免交叉感染 VM2...运行 ab 命令,初步观察 Nginx 性能 简单介绍 ab 命令 ab(apache bench)是一个常用的 HTTP 服务性能测试工具 可以向目标服务器并发发送请求 运行 ab 命令 并发 100...CPU 使用率的进程了 嘶,发现 top 并没有满足我们的需求,看来得祭出另一个命令了 pidstat 查看是否有异常进程的 CPU 使用率过高 每秒取一次结果,共取 10 次 pidstat 1 10...CPU 使用率升高或 I/O 升高等问 题 分析整体思路 短时间压测,发现服务器性能低下 长时间压测,让服务器保持一个高负载的状态,从而可以慢慢分析问题所在 通过 top 命令监控系统资源情况,发现用户态的...stress 进程初始化执行失败,从而增加进程上下文切换次数增加,最终导致 CPU 使用率升高 通过 vmstat 对比压测前后的上下文切换次数,可以发现压测的上下文切换次数的确增加了 通过 pidstat

    2.1K10

    【DB笔试面试865】序列cache值过小导致CPU利用率过高

    ♣ 问题 序列cache值过小导致CPU利用率过高 ♣ 答案 1、故障环境如下表所示: 项目 source db db 类型 RAC db version 10.2.0.5.0 db 存储 ASM...OS版本及kernel版本 AIX 64位 6.1.0.0 2、故障发生现象及报错信息 有一套数据库做测试的时候,CPU利用率很高,同事已经抓取了CPU和AWR的信息。...可以看到CPU的利用率是非常高的,下边来看看AWR中的数据: ? 从等待事件中可以很明显地看出“enq: SQ - contention”和“DFS lock handle”这两个等待事件异常。...如果使用了CACHE,而此时DB崩溃了,那么序列会从CACHE值之后重新开始,在CACHE中没有使用的序列会被跳过,这样就会导致序列不连续。在创建序列时,CACHE的缺省值设定为较小的20。...● 本文作者:小麦苗,只专注于数据库的技术,更注重技术的运用 ● 作者博客地址:http://blog.itpub.net/26736162/abstract/1/ ● 本系列题目来源于作者的学习笔记,

    1.4K30

    CPU 占用过高问题排查

    方法一 第一步:使用 top命令,然后按shift+p按照CPU排序 找到占用CPU过高的进程的pid 第二步:使用 top -H -p [进程id] 找到进程中消耗资源最高的线程的id 第三步:...bc是linux的计算器命令 第四步:执行 jstack [进程id] |grep -A 10 [线程id的16进制]” 查看线程状态信息 方法二 第一步:使用 top命令,然后按shift+p按照CPU...排序 找到占用CPU过高的进程 第二步:使用 ps -mp pid -o THREAD,tid,time | sort -rn 获取线程信息,并找到占用CPU高的线程 第三步:使用 echo 'obase...占用故障排查 解决过程 1、根据top命令,发现PID为2633的Java进程占用CPU高。...找到了耗时最高的线程(TID)3626,占用CPU时间有12分钟了!

    3.5K30

    记一次线上Java程序导致服务器CPU占用率过高的问题排除过程

    2、问题定位 使用top命令查看服务器情况,发现CPU占用率过高。...2.1、定位问题进程 使用top命令查看资源占用情况,发现pid为14063的进程占用了大量的CPU资源,CPU占用率高达776.1%,内存占用率也达到了29.8% [ylp@ylp-web-01 ~...此时可以基本确定是内存不足或内存泄露导致gc线程持续运行,导致CPU占用过高。...可能存在不合理创建对象的地方 3.2、分析堆栈 使用jstack命令查看进程的堆栈情况 [ylp@ylp-web-01 ~]$ jstack 14063 >>jstack.out 把jstack.out文件从服务器拿到本地后...找到相关同事了解后,这段代码会从数据库中获取配置,并根据数据库中remain的值进行循环,在循环中会一直对HashMap进行put操作。 查询数据库中的配置,发现remain的数量巨大。 ?

    2.6K20

    Jtti:服务器CPU过高的原因及解决方案

    服务器CPU过高不仅会导致响应速度变慢,还可能影响应用程序的稳定性和用户体验。了解导致CPU过高的原因,可以帮助管理员更有效地管理和优化服务器性能。...本文将详细探讨服务器CPU过高的常见原因及其解决方案。一、应用程序问题低效的代码:应用程序中的算法效率低下、循环复杂或存在不必要的计算,都会导致CPU资源的浪费。...高并发请求:在高并发场景下,服务器同时处理大量请求,可能导致CPU负载过高。没有合理的负载均衡会使某一台服务器承受过多的请求。...服务配置不当:某些服务或守护进程(如数据库服务、Web服务器)的配置不当,可能导致它们在处理请求时消耗过多CPU。...四、系统更新和维护系统任务:定期的系统更新、备份或维护任务可能在CPU负载高峰时运行,导致性能下降。例如,数据库索引重建或日志清理任务可能会导致短时间内的CPU高使用率。

    1.2K10

    服务器cpu高导致ssh无法连接

    正文 近期ssh连不上服务器,找服务器厂商客服得知是cpu高导致的,但是没法看到进程信息,不清楚是哪个进程导致的。...分析了下,服务器上的应用都是docker部署的,而最近部署了监控服务赫兹跳动,就出现这个问题了。于是对该容器进行cpu资源限制,看看能否解决。...服务器是4核心的,通过--cpus 1限制监控服务容器最多使用“一核心”,也就是100%cpu利用率,总共是400%。...注意这里不会真的使用某一个cpu核心,操作系统会调度到每个cpu核心,也就是可能出现4个核心,每个占用25%。 如果需要指定容器使用哪些物理cpu核心,可通过cpuset-cpus指定。...再后来想监控其他应用,还有数据库。但也不想用前面那些庞大的东西(说出来你可能不信,监控服务比我的应用还占资源。。。)。

    7.5K20

    Linux CPU负载过高排查方法

    问:如何定位是哪个服务进程导致CPU过载,哪个线程导致CPU过载,哪段代码导致CPU过载?...步骤一、找到最耗CPU的进程 工具:top 方法: 执行top -c ,显示进程运行信息列表 键入P (大写p),进程按照CPU使用率排序 图示: image.png 如上图,最耗CPU的进程PID...为10765 步骤二:找到最耗CPU的线程 工具:top 方法: top -Hp 10765 ,显示一个进程的线程运行信息列表 键入P (大写p),线程按照CPU使用率排序 图示: image.png...如上图,进程10765内,最耗CPU的线程PID为10804 步骤三:将线程PID转化为16进制 工具:printf 方法:printf “%x” 10804 图示: image.png 如上图,10804...jstack/grep 方法:jstack 10765 | grep ‘0x2a34’ -C5 --color 打印进程堆栈 通过线程id,过滤得到线程堆栈 图示: image.png 如上图,找到了耗CPU

    4.3K10

    Linux CPU负载过高问题排查

    CPU负载过高异常排查实践与总结CPU负载过高异常排查实践与总结 观察各个进程资源使用情况,可以看出进程id为682的进程,有着较高的CPU占比 1.2 定位具体的异常业务 这里咱们可以使用 pwdx...CPU负载过高异常排查实践与总结CPU负载过高异常排查实践与总结 可得出结论:该进程对应的就是数据平台的web服务。...CPU负载过高异常排查实践与总结CPU负载过高异常排查实践与总结 可得出结论:是系统中一个时间工具类方法的执行cpu占比较高,定位到具体方法后,查看代码逻辑是否存在性能问题。...2、根因分析 经过前面的分析与排查,最终定位到一个时间工具类的问题,造成了服务器负载以及cpu使用率的过高。...由于实时查询、实时报警等模块大量的查询请求都需要多次调用该方法,导致了大量CPU资源的占用与浪费。 3、解决方案 定位到问题之后,首先考虑是要减少计算次数,优化异常方法。

    7.6K20

    Linux kworker 占用CPU过高情况解决

    kworker是3.x内核引入的,kworker 指工作者线程,用来执行工作队列中的work,一般由kthreadd建立,下面为大家分享一下Linux kworker 占用CPU过高情况。...在进程列表中可以有多个:kworker/0:1在第一个CPU内核上kworker/1:1是一个,在第二个CPU内核上是一个,依此类推。 为什么kworker占用您的CPU?...查看CPU回溯中经常发生的情况,希望它可以指出问题的根源。...10 然后会在当前目录下生成一个perf.data 用以下命令查看  sudo perf report 我们看到arch_cpu_idle占用大量CPU。...于是问了Fedora telegram群里的,翻了下arch/arm64/kernel/process.c 结论居然根本没有其他进程在使用CPU,Linux会自动保存CPU运作。

    27.6K30
    领券