- 综合排序
- 最热优先
- 最新优先
- 来自专栏东风微鸣技术博客
Kubernetes 疑难问题排查 - 10s 延迟
我们首先通过Chrome的F12开发工具来进行查看，发现正是上边的这个请求耗时10s，且10s都是在Waitting(TTFR) 如下图: 3. 然后就出问题了, PSH+ACK的动作是在10s后才发出的!!! 7. 第四阶段 定位¶ 和网络组老师和项目组老师沟通受益颇多: 网络组老师: 基本断定是pod A的问题 项目组老师: 是第3步(需求系统回访CAS验证)慢了10s. 我之所以知道这个事情, 是因为有次某寿险公司有一次生产DNS出故障了, 排查的时候发现海量的反向DNS解析来自weblogic. 有时间可以再来一篇相关的内容. 解决方案¶¶ 1. 则问题解决. ptr-record=XX.XX.1.10.in-addr.arpa, 10.1.XX.XX 总结¶¶ 至此, 我们完整的梳理了需求系统首次登录要等10s的问题, 分析过程信息量比较大,
1.1K40编辑于 2022-04-21 - 来自专栏数据小冰
死锁问题排查
既然已知道异常服务，那可以从这里入手进行分析，又与同事沟通一番，确定了与该服务相关的一些后台模块，接下来重点排查这些模块。 下面是出现问题的参考日志，关键点已包含其中，因为原日志不方便展示。 排查方法 日志中出现了sync. 问题本质 上面问题的根因是死锁导致的，死锁也是计算机中常见出现的问题。 往往改动代码引发的死锁问题比较容易出现，像本文中出现的问题就是代码改动导致的，添加功能需求的时候关注点集中在了业务逻辑上，容易忽视锁的问题。 time.Second) lock1.Lock() defer lock1.Unlock() fmt.Println("func2 end") }() time.Sleep(time.Second*10
1.6K10编辑于 2022-08-15 - 来自专栏后端码事
线上问题排查
8、old区实例查询： jmap -histo pid | sort -n -r -k 2 | head -10 ?
92110发布于 2020-09-10 - 来自专栏dcmickey小站
排查Maven问题
排查Maven问题 mvn dependency:tree 三大技巧 第一板斧:找到传递依赖的鬼出在哪里？ （这一步非常重要哦，经常项目组pom.xml是相同的，但是就是有些人可以运行，有些人不能运行，俗称人品问题，其实都是IDE的缓存造成的了 idea清除缓存,为了提高效率不建议采用reimport重新起开启项目的方式
77320编辑于 2022-06-09 - 来自专栏PHP开发者那些事
redis问题排查
当出现异常以后，可以从以下几个原因入手排查。 API或数据结构使用不合理 慢查询。命令slowlog get [n]。 1）使用了复杂读为O(n)的命令导致，如hgetall等。 CPU饱和的问题。 内存交换 网络问题
60920发布于 2020-06-23 - 来自专栏OSChina
线上问题排查
0 0 0 350 3513 12432 15 14 71 0 0 1 0 1024 2612088 16 633616 0 0 0 10 2846 9886 10 7 83 0 0 4 查看cpu核信息 [root@localhost ~]# mpstat -P ALL 2 Linux 3.10.0-862.el7.x86_64 (localhost.localdomain) 2019年10月07日 _x86_64_ (4 CPU) 17时14分46秒 CPU %usr %nice localhost ~]# pidstat -u 1 -p 2531(进程id) Linux 3.10.0-862.el7.x86_64 (localhost.localdomain) 2019年10 root@localhost ~]# pidstat -p 2564 -r 2 Linux 3.10.0-862.el7.x86_64 (localhost.localdomain) 2019年10
1K20发布于 2019-10-09 - 来自专栏网络工程师笔记
ping容易忽略的10点用法和排查问题技巧
10.1.1.1 10.1.1.255 # 或者用 CIDR 的方式 fping -g 10.1.1.0/24 # 或者从文件中读取 fping --file=add.txt 用法10 ：设置 TTL，检查中间网络设备情况 这条硬凑的，10看起来比较完整点。。。 如果通，继续排查第 2 步。 2. ping 本机对外的 IP 地址： 如果 ping 不通，说明本机的 网卡或网络适配器（Modem） 出现故障，如果通，继续排查第 3 步。 3. ping 本机的网关地址： ping 之前，需要先检查下网关路由器是否禁 ping，检查防火墙是否禁 ping，确定可 ping 的情况下，如果不通，说明 网线或者路由器 有问题，如果通，继续排查第 4. ping Internet上任意网站（比如baidu.com）： 如果 ping 不通，说明 DNS 设置有问题或 DNS 服务器 工作不正常，如果通，则说明网络良好。 ----
1.7K20发布于 2021-05-17 - 来自专栏解Bug之路
日常问题排查-调用超时日常问题排查-调用超时
日常问题排查-调用超时 前言 日常Bug排查系列都是一些简单Bug排查，笔者将在这里介绍一些排查Bug的简单技巧，同时顺便积累素材^_^。 Bug现场 这次的Bug是大家喜闻乐见的调用超时。 开始排查 那么这5秒钟时间到底消失在哪里呢？有3个可能的点: 1)A日志打点到真正发出请求包 2)网络上 3)B真正接收请求包到B日志打点。 再进一步用awk过滤，最高有10s的,最短有0.1s的，而他们回收的内存大小确差不多。正常Full GC应该不会有这么久,那个0.1s才感觉是正常的，难道当时机器有什么事情发生? 所以看上去是概率上出现GC慢的问题。 另一个机房没出问题 这时候巧的是，业务开发向笔者反映，另一个机房的相同应用确不会出现此问题。捞了下对应日志，发现其class unloading只有0.9s左右。 另外， 对于一个偶发性的问题，我们应该通过监控等手段去寻找规律，这样就很容易找到突破点。
1.6K30编辑于 2021-12-24 - 来自专栏Pou光明
手眼标定问题排查_圆网格数据排查
经过昨天晚上的调试，发现了一个主要问题：使用圆网格标定板标定时，不能使用cornerSubPix()函数，否则寻找角点时，会导致图一的情况(裁剪为30万像素)。就找到能参考的程序，推进还是很快的。 下次把有问题的数据列下。 上面数据均未使用图片校准。 目前这个相机标定程序比较OK，至此棋盘格和圆网格两种标定板。有需要的同志可在公众号后台留言“改进的相机标定程序”。
43410编辑于 2024-04-13 - 来自专栏运维开发故事
Docker EOF问题排查
一、前言 问题排查过程，源码部分均由我的开发同事排查和记录；在征得其同意后，由我发表在此。 二、问题 某天接到客户反馈，pod的事件中出现大量的 warning event: Readiness probe failed: OCI runtime exec failed: exec failed 080027049c65):c0" failed (failure): OCI runtime exec failed: exec failed: unexpected EOF: unknown I0507 10 经过排查，发现 runc exec 在运行期间会读取 container 的 state.json，并使用 json decode 时出现异常。 ? 此时排查 runc EOF 和 kubelet cpu-manager update container(默认每 10s 更新一次) 的时间，发现时间点刚好吻合，验证猜想。
5.7K10发布于 2021-06-24 - 来自专栏linux
网络问题故障排查
网络问题故障排查 一、服务器网络卡慢 参考文档https://cloud.tencent.com/document/product/213/14633 1、检查本地访问域名速度 https://itango.tencent.com nslookup 地址 5、使用MTR分析网络延迟及丢包 https://cloud.tencent.com/document/product/213/14638 二、CDN网络访问故障 CDN网络故障原因排查
45710编辑于 2025-07-04 - 来自专栏Windows技术交流
windows update问题排查
Get-WindowsUpdateLog执行报错的时候，可以拿日志C:\Windows\Logs\WindowsUpdate\ （压缩成.7z格式）到正常的系统使用Get-WindowsUpdateLog 加参数指定源和目标位置导出
1.1K10编辑于 2024-08-21 - 来自专栏伟大程序猿的诞生
Android 混淆问题排查
问题 近期在开发过程中，突然出现混淆后程序出现运行时异常，编译是正常的，不混淆也是正常的， 错误信息如下提示 12-07 14:10:27.056 10603-10603/? ZygoteInit.java:888) at com.android.internal.os.ZygoteInit.main(ZygoteInit.java:749) 思路 1、通过上面的错误信息首先会去排查 2、考虑到关闭混淆正常，开启混淆异常，那么就定位到时混淆的问题 3、既然是混淆问题那就查看混淆配置文件proguard-rules.pro，基本的配置都已经防混淆了 4、接下来的思路就是通过反编译来查看 BaseApplication继承的application被混淆了 那么在’proguard-rules.pro’中加入一句-keep class android.app.**{*;} 运行后报错如下： 12-10 所以以后遇到混淆的问题就按照提示一步一步排查，一定要反编译文件来分析问题，不然无法定位原因。 还有第一次混淆后建议反编译查看一下包里面的代码，有没有需要混淆的核心代码被keep掉了。
2.7K20发布于 2019-01-21 【系统问题排查方法】
常见系统问题排查方法 系统问题排查通常涉及多个层面，包括代码、数据库、网络、服务器等。以下是一些常见的排查方法： 日志分析：检查系统日志、应用日志、数据库日志等，查找异常信息或错误堆栈。 日志是排查问题的第一手资料，能够快速定位问题发生的具体位置。 数据库性能问题往往是系统瓶颈之一。 网络排查：使用ping、traceroute、netstat等工具检查网络连接是否正常，排查网络延迟或丢包问题。 排查步骤： 检查数据库连接池配置，发现最大连接数设置过低，无法应对大促期间的高并发请求。通过调整连接池配置，增加最大连接数，问题得到缓解。 总结 系统问题排查需要结合日志分析、性能监控、代码审查等多种手段，针对不同的问题场景采取相应的解决方案。通过案例分析，可以更好地理解问题排查的思路和方法，提升系统稳定性和性能。
65010编辑于 2025-08-29- 来自专栏cywhat
Java线上问题排查
1、top 查看占用资源信息以及pid top 2、查看pid下绑定线程 top -Hp pid1(进程id) 3、拿到需要查询的线程pid,转换成16进制 printf '%x' pid2(线程id) ==> 6a4 #6a4为输出结果 4、通过jstack讲java信息输出到文本 jstack pid1(进程id) > t.txt 如果jstack报错,请查看 jstack不存在 5、在t.txt文件中查找6a4 vim t.txt /6a4 6、然后找到自己的collectorl业务代码层
56610编辑于 2022-11-22 - 来自专栏第三方工具
线上问题排查方法
线上问题排查方法 1 OOM问题 1.1 堆内存OOM 1.2 栈内存OOM 1.3 栈内存溢出 1.4 GC OOM 1.5 元空间OOM 2 CPU100%问题 3 接口超时问题 4 索引失效问题 如果生产环境中，出现了这个问题，可以排查一下递归调用是否正常，有可能出现了无限递归的情况。 如果生产环境中出现了这个问题，可以通过下面的命令修改元空间大小： -XX:MetaspaceSize=10m -XX:MaxMetaspaceSize=10m link: OOM异常的4种可能分析及常见的 如果MQ生产者没有批量发送消息，则需要排查MQ消费者的业务逻辑中，哪些地方出现了性能问题，需要做代码优化。 给id指定一个区间范围，比如：id的值是0-10万，则数据存在用户表0，id的值是10-20万，则数据存在用户表1。
75010编辑于 2024-11-29 - 来自专栏运维小白
1.8 网络问题排查
1.8 网络问题排查 在NAT模式下变成为桥接模式（右下角，网络适配器） 桥接模式下的方框，不用去选择，打钩。
1K60发布于 2018-02-06 - 来自专栏苏三说技术
线上问题排查指南
前言 最近经常有小伙伴问我，遇到了线上问题要如何快速排查。 这非常考验工作经验了。 有些问题你以前遇到，如果再遇到类似的问题，就能很快排查出导致问题的原因。 如果生产环境中出现了这个问题，可以通过下面的命令修改元空间大小： -XX:MetaspaceSize=10m -XX:MaxMetaspaceSize=10m 我在这里列举了OOM问题的最常见的情况， 下面这张图中给大家列举出现了，生产环境接口突然出现超时问题时的常见原因： 如果大家想进一步了解接口超时问题，可以看看我的另一篇文章《接口突然超时10宗罪。。。》 如果索引失效了，可能是哪些原因导致的问题呢？ 下面这张图给大家列举了常见原因： 想进一步了解索引失效问题的小伙伴，可以看一下我的另一篇文章《聊聊索引失效的10种场景，太坑了》，里面有非常详细的介绍。 还有一种可能也会导致请求接口报404的问题，接口地址之前注册到了API网关中，但API网关的配置出现了问题。 优先排查接口url是否修改，然后排查网关或者Nginx配置是否有问题。
1.2K10编辑于 2024-08-14 - 来自专栏k-cloud-labs
docker hang问题排查
2.重启kubelet变更宿主状态 kubelet重启后宿主状态从Ready变为NotReady，这个问题相较docker hang死而言，没有那么复杂，所以我们先排查这个问题。 以往针对docker 1.13.1版本的排查都发现了一些线索，但是并没有定位到根因，最终绝大多数也是通过重启docker解决。 因此单纯依赖协程调用链路定位问题这条路被堵死了。 截至目前，我们已经收集了部分关键信息，同时也将问题排查范围更进一步地缩小在containerd-shim与runc之间。 接下来我们换一种思路继续排查。 3.2 进程排查 当组件的运行状态无法继续获取时，我们转换一下思维，获取容器的运行状态，也即异常容器此时的进程状态。 后续 docker hang死的原因远非这一种，本次排查的结果也并非适用于所有场景。希望各位看官能够根据自己的现场排查问题。
1.9K50编辑于 2023-03-06 - 来自专栏小白debug
502问题怎么排查？
反过来，如果是服务器有问题，就返回5xx状态码。 4xx和5xx的区别 但问题就来了。 服务端都有问题了，搞严重点，服务器可能直接就崩溃了，那它还怎么给你返回状态码？ 这种情况几乎都是程序有代码逻辑问题，崩溃一般也会留下代码堆栈，可以根据堆栈报错去排查问题，修复之后就好了。比如下面这张图是golang的报错堆栈信息，其他语言的也类似。 10.14.16.13:8145 weight=5; server 10.14.12.133:9702 weight=8; server 10.14.11.15:7035 weight=10 实例已经销毁但配置没删IP 要排查这种问题也不难。 这个时候，你可以看下nginx侧是否有打印相关的日志，看下转发的IP端口是否符合预期。 如果发现502，优先通过监控排查服务端应用是否发生过崩溃重启，如果是的话，再看下是否留下过崩溃堆栈日志，如果没有日志，看下是否可能是oom或者是其他原因导致进程主动退出。
2.5K20编辑于 2022-12-02
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号