文档建议反馈控制台
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
发布

最佳实践：TiDB 业务读变慢分析处理

本文针对读 TiDB 集群的场景，总结业务 SQL 在查询突然变慢时的分析和排查思路，旨在沉淀经验、共享与社区。一....读变慢排查思路2.1 读慢常规分析业务的 SQL 变慢后，我们在 TiDB Server 的 Grafana 面板可以看到整体的或者某一百分位的请求延迟会升高，我们根据现象先确认方向性的问题：是整体变慢...● 是否整体变慢○ 分析各个组件 TiDB、TiKV、TiPD 的响应延迟情况● 整体如果是正常的，继续分析是不是某类 SQL 变慢○ 到 Dashboard 查一查慢查询，看一看集群热力图，分析一下...接着，和写入变慢的分析一样，我们可以依次排查物理硬件环境、是否有业务变更操作等情况，直到定位清楚问题。...总结● 了解 TiDB 的读过程，有助于我们掌握数据库的底层执行原理，遇到问题时可以快速定位和分析原因，也能引导我们更好地使用数据库，发挥其最好的性能。

97420

最佳实践：TiDB 业务写变慢分析处理

作者：李文杰 数据架构师，TUG 广州地区活动组织者在日常业务使用或运维管理 TiDB 的过程中，每个开发人员或数据库管理员都或多或少遇到过 SQL 变慢的问题。...本文针对写 TiDB 集群的场景，总结业务 SQL 在写突然变慢时的分析和排查思路，旨在沉淀经验、共享与社区。...SQL 变慢后，我们在 TiDB Server 的 Grafana 面板可以看到整体的或者某一百分位的请求延迟会升高， 我们可以依次排查物理硬件环境、是否有业务变更操作、数据库运行的情况 等，定位到问题后再针对性解决...毫无疑问，这个是一个兜底的排查思路，适用范围较广，通用性较强，但是排查起来要花费更多的时间和精力，也要求管理员对数据库本身的运行原理有一定的掌握。...对于写入慢的全链路分析，我们首先在问题时段从整体上把握延迟情况，再分析 TiDB Server 和 TiKV Server 在对应时段的延迟，确认问题处于计算层还是存储层，接着再深入分析对于 TiDB

1K10
    • 您找到你想要的搜索结果了吗？
    是的
    没有找到

    MySQL 升级到 8.0 变慢问题分析

    原因分析客户线上环境有一个监控脚本，每分钟执行一次，这个脚本执行的 SQL 如下：select ... from sys.innodb_lock_waits w inner join information_schema.innodb_trx...information_schema.innodb_trx r  on r.trx_id = w.waiting_trx_id;对几个监控脚本的日志、SAR 日志、MySQL 的慢查询日志 & 错误日志，以及死锁的源码，进行了全方位无死角的分析...这个基表的名字和 MySQL 5.7 中不一样了，它的行为也发生了变化，就是这个行为的变化在某些场景下阻塞了业务 SQL，导致大量业务 SQL 执行变慢。...data_locks 表里读取数据的线程长时间持有 trx_sys->mutex 互斥量，就会长时间阻塞其它 SQL 执行，导致其它 SQL 排队等待，出现堆积，表现出来的状态就是 MySQL 整体都变慢了

    2K20

    Redis为什么变慢了？常见延迟问题定位与分析

    Redis作为内存数据库，拥有非常高的性能，单个实例的QPS能够达到10W左右。...这篇文章我们就来分析一下Redis在使用过程中，经常会遇到的延迟问题以及如何定位和分析。 使用复杂度高的命令 如果在使用Redis时，发现访问延迟突然增大，如何进行排查？...当实例的内存达到了maxmemory后，你会发现之后的每次写入新的数据，有可能变慢了。...导致变慢的原因是，当Redis内存达到maxmemory后，每次写入新的数据之前，必须先踢出一部分数据，让内存维持在maxmemory之下。...尤其是针对Redis这种高性能的内存数据库来说，如果Redis中的内存被换到磁盘上，对于Redis这种性能极其敏感的数据库，这个操作时间是无法接受的。

    1.5K20

    窥探redis为何会变慢

    [redis简介.png] 大家之言 Redis采用的是基于内存的采用的是单进程单线程模型的 KV 数据库。...对于业务场景的探讨后续可以展开讲讲，这次主要是想推演一下，在所有场景中挺常见的现象——变慢。...redis为何会变慢 随着时间的堆积，数据的累增，系统很直观的会感觉的变慢的现象，对于大型程序来说，主要是内存碎片啊、堆栈溢出啊等等这些关于垃圾回收机制导致的，另外的还是跟其他组件在配合中，网络开销导致的现象...，这次我们主要是从redis自身进行分析。...，例如网络线路质量不佳，网络数据包在传输时存在延迟、丢包等情况 Redis 本身存在问题，需要进一步排查是什么原因导致 Redis 变慢 分析问题 分析问题的三把斧，链路追踪，看日志，大胆猜测 链路追踪

    97710

    你的 Redis 为什么变慢了？

    Redis作为内存数据库，拥有非常高的性能，单个实例的QPS能够达到10W左右。...这篇文章我们就来分析一下Redis在使用过程中，经常会遇到的延迟问题以及如何定位和分析。 使用复杂度高的命令 如果在使用Redis时，发现访问延迟突然增大，如何进行排查？...当实例的内存达到了maxmemory后，你会发现之后的每次写入新的数据，有可能变慢了。...导致变慢的原因是，当Redis内存达到maxmemory后，每次写入新的数据之前，必须先踢出一部分数据，让内存维持在maxmemory之下。...尤其是针对Redis这种高性能的内存数据库来说，如果Redis中的内存被换到磁盘上，对于Redis这种性能极其敏感的数据库，这个操作时间是无法接受的。

    1.4K40

    Redis性能变慢之Checklist

    复杂度高的命令 使用复杂度高的命令：如SORT/SUION/ZUNIONSTORE/KEYS等，或一次性检索全量数据：如LRANGE key 0 N，但N很大等 分析 慢日志查看是否存在这些命令 redis...CPU） 解决 避免使用复杂度高的命令，尽量用其他方式替代，比如在客户端做聚合运算 使用渐进式遍历代替全量查询命令，scan/sscan/zscan/hscan Bigkey bigkey的操作导致阻塞 分析...slowlog出现一些key的set/delete操作变慢(bigkey 分配/释放内存缓慢) redis-cli --bigkeys扫描出很多bigkey 解决 优化业务，避免bigkey Redis...监控latest_fork_usec耗时是否变长 AOF使用awalys机制 awalys 会造成主线程堵塞 解决： everysecond机制 数据丢失不敏感则关闭aof 使用了swap 所有请求都变慢

    1.1K20

    Redis变慢了，你会怎么排查

    Redis作为内存数据库，拥有非常高的性能，单个实例的QPS能够达到10W左右。...这篇文章我们就来分析一下Redis在使用过程中，经常会遇到的延迟问题以及如何定位和分析。 使用复杂度高的命令 如果在使用Redis时，发现访问延迟突然增大，如何进行排查？...当实例的内存达到了maxmemory后，你会发现之后的每次写入新的数据，有可能变慢了。...导致变慢的原因是，当Redis内存达到maxmemory后，每次写入新的数据之前，必须先踢出一部分数据，让内存维持在maxmemory之下。...尤其是针对Redis这种高性能的内存数据库来说，如果Redis中的内存被换到磁盘上，对于Redis这种性能极其敏感的数据库，这个操作时间是无法接受的。

    1.2K20

    你的 Redis 为什么变慢了？

    来源 | http://kaito-kidd.com/2020/07/03/redis-latency-analysis/ Redis作为内存数据库，拥有非常高的性能，单个实例的QPS能够达到10W左右...这篇文章我们就来分析一下Redis在使用过程中，经常会遇到的延迟问题以及如何定位和分析。 使用复杂度高的命令 如果在使用Redis时，发现访问延迟突然增大，如何进行排查？...当实例的内存达到了maxmemory后，你会发现之后的每次写入新的数据，有可能变慢了。...导致变慢的原因是，当Redis内存达到maxmemory后，每次写入新的数据之前，必须先踢出一部分数据，让内存维持在maxmemory之下。...尤其是针对Redis这种高性能的内存数据库来说，如果Redis中的内存被换到磁盘上，对于Redis这种性能极其敏感的数据库，这个操作时间是无法接受的。

    1.1K20

    什么时候 MySQL 查询会变慢？

    接下来需要对我么传入的 SQL 进行解析，这块跟代码的执行流程其实差不多，先做词法分析，识别出各种关键字，然后再做语法分析，语法分析就是根据 MySQL 的各种语法规则，去判断 SQL 是否满足语法规则...接下来我们就来看看什么情况下查询会变慢。 2. 查询了不需要的记录 数据按需取用。...有时候我们会忽略多拿数据对查询性能的影响，然而优化是一个锱铢必较的事情，需要多少数据就查询多少，要尽量避免数据库查询 100 条，结果前端只展示 10 条这种情况。...如有需要，可以通过 limit 来限制数据库查询出来的数据总量。...恰到好处的缓存 这里举一个 TienChin 项目的例子，用户登录成功之后，在后续的流程中，经常会用到当前登录用户的信息，如果每次都去数据库查询，每次查询返回结果都是一致的，没有必要，此时我们可以将用户信息存入到

    66420

    快查询是怎么突然变慢的?

    用 wal_inspect 分析PG WAL日志, 结合pgBadger找出快查询是怎么突然变慢的 这篇文章记录了一位国外的up主用 wal_inspect 分析PG WAL日志, 结合pgBadger...找出快查询是怎么突然变慢的....大家可以提前了解一下几个知识点, 对理解本文会有作用: wal 日志是数据库操作的预写日志, 记录了用户对数据库的变更带来的page变化, 由很多record type组成, 通过wal inspect...插件可进行分析. pg_stat_activity中显示的query仅仅是某个事务最后执行/执行中的query, 而此事务之前执行了什么请求, 如果没有打印SQL审计日志的话, 是不知道的 在一个事务中...PG WAL日志, 结合pgBadger找出快查询是怎么突然变慢的 这个问题已经持续了好几个月：Postgres 数据库的一个 WAL 文件系统以惊人的速度增长，比数据库本身的速度快很多倍。

    19510

    Redis 突然变慢了如何排查并解决？

    大量的流量没了 Redis 的缓存响应，直接打到了 MySQL，最后数据库也宕机了…… 于是各种更改最大连接数、连接等待数，虽然报错信息频率有所缓解，但还是持续报错。...今天「码哥」跟大家一起来分析下如何确定 Redis 有性能问题和解决方案。...当 Redis 出现性能波动的时候，比如达到几秒到十几秒，这个很明显我们可以认定 Redis 性能变慢了。 有的硬件配置比较高，当延迟 0.6ms，我们可能就认定变慢了。...如何解决 Redis 变慢？ Redis 的数据读写由单线程执行，如果主线程执行的操作时间太长，就会导致主线程阻塞。 一起分析下都有哪些操作会阻塞主线程，我们又该如何解决？...当写的指令比较多的时候就会导致大量的拷贝，导致性能变慢。

    1.1K50

    一个访问cdn页面变慢的例子

    但有时候我们也会遇到这样的用户，反馈打开CDN网站变慢了。打开CDN网站变慢有各种原因， 但也未必就一定是网络和链路的问题。...下面我们一起看下下面这个例子 问题描述 某客户反馈网站接入cdn以后一直正常，今天突然变慢了，并且源站访问速度正常。...诊断与分析 打开浏览器，并打开开发者页面复现客户问题，观察现象 发现这个页面加载了很多js，cs等这种文件， 其中有一个文件返回了200，但一致在pending image.png 2....request和response先看下和源站有没有什么区别 这里特别明显的看到，同样的这个css资源， 节点缓存和源站的资源etag不一样， 也就是不一致的资源 image.png image.png 分析

    1.9K91

    如何诊断处理生产环境服务器变慢

    当服务器变慢时，可能会对企业的运营产生重大影响，包括客户满意度下降，工作效率降低，甚至可能导致整个系统崩溃。为了解决这些问题，我们需要深入了解生产环境服务器变慢的原因，并掌握有效的诊断和处理方法。...如果问题出在GC上，则考虑是不是内存不足，然后根据垃圾对象的特点进行参数调优，使用更适合的垃圾收集器，用jstack命令分析各个线程的状态。...如果问题比较隐蔽，则考虑是否开启JMX，使用 visualmv 等可视化工具进行远程监控与分析。 四、总结 通过本文的学习，我们了解到服务器变慢的原因有很多种，需要逐一排查。...同时，对应用程序进行调优也是解决服务器变慢的重要手段之一。最后，预防服务器变慢需要定期检查、备份数据、优化代码等措施。...同时，也需要不断优化应用程序的代码和数据库，提高服务器的响应速度和吞吐量。

    1K10
    点击加载更多

    相关资讯

    热门标签

    更多标签

    活动推荐

      运营活动

      活动名称
      广告关闭

      腾讯云开发者

      扫码关注腾讯云开发者

      扫码关注腾讯云开发者

      领取腾讯云代金券

      热门产品

      热门推荐

      更多推荐

      Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有

      深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 粤公网安备44030502008569号

      腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号

      领券