今天有一个朋友问我一个MySQL的建表问题,问题的现象是创建表失败,根据他的反馈,问题比较奇怪, CREATE TABLE XXX ..此处省略260多个字段 `xxxxIsAllowIn` varchar...*'/,/g' 所以省事了不少,我就来继续分析这个问题。一般来说这个错误看起来是单行的数据超出限制了,因为MySQL里面每行的数据有一个65535的限制,想必是这个原因吧。...共享表空间的格式为Antelope,在5.5中默认就是这个格式。 解决方式2; 这个问题我做了一些测试。对比了字符集,row_format的设置。...在创建表,更改表和创建索引时,如果写法有错误,不会有警告信息,而是直接抛出错误,这样就可直接将问题扼杀在摇篮里。 当然这个里的这个问题现象确实比较纠结。...解决方法3: 从表结构设计入手,尽可能拆分这个表的逻辑,把它拆分为多个表。一个表的字段数尽可能不要太多。
背景 将测试环境的表同步到另外一个数据库服务器中,但有些表里面数据巨大,(其实不同步该表的数据就行,当时没想太多),几千万的数据!! 步骤 1....那么问题来了,是不是死锁了呢?那怎么判断死锁呢? SHOW PROCESSLIST; ? 执行这个命令可以查看数据库当前的进程 3....查看当前的事物 #当前运行的所有事务 mysql> SELECT * FROM information_schema.INNODB_TRX; #当前出现的锁 mysql> SELECT * FROM...可以通过kill命令来干掉一些数据库的进程 ? kill 2; 这样既可,这样只是解决了卡死的问题,执行同样的命令还是会卡死的 ; 5. 那就想想为什么会卡死呢 ?...那么就比较下 drop,truncate,delete的区别吧 a. drop是整个表都没有了的,表结构也没没有了的,truncate和delete的表结构还在; b. delete可以指定where
这是学习笔记的第 2186 篇文章 读完需要 2 分钟 速读仅需1分钟 今天和同事处理了一个MySQL慢日志的问题,从这两天开始频繁收到一些报警信息,但是查看数据库端却没有任何异常。...最开始定位问题的方向是有一些业务的SQL没有使用索引,但是执行时间很短,可能导致被判别为慢查询,可以通过修改参数 log_queries_not_using_indexes 进行调整。...我甚至怀疑,是不是MySQL的一个bug导致了这种奇怪的抖动现象。 从这个业务来看,本身的访问频率其实是不高的,数据写入也不多。...所以这个问题就充分说明尽管你已经做得很好了,但是还是可能有其他环节会严重影响到你,记的第 2186 篇文章 读完需要 2分钟 速读仅需1分钟 今天和同事处理了一个MySQL慢日志的问题,从这两天开始频繁收到一些报警信息...我甚至怀疑,是不是MySQL的一个bug导致了这种奇怪的抖动现象。 从这个业务来看,本身的访问频率其实是不高的,数据写入也不多。
场景:mysql统计一个数据库里所有表的数据量,最近在做统计想查找一个数据库里基本所有的表数据量,数据量少的通过select count再加起来也是可以的,不过表的数据有点多,不可能一个一个地查 记得在...在mysql里是可以查询information_schema.tables这张表的 SELECT table_rows,table_name FROM information_schema.tables...') ORDER BY table_rows DESC; OK,本来还以为已经没问题了,然后还是被反馈统计不对,后来去找了资料 https://dev.mysql.com/doc/refman/8.0...大概意思是对于MyISAM才是正确的统计数据,但是对于InnoDB引擎的,可能与实际值相差 40% 到 50%,所以只是一个大概的统计 所以针对这种情况,要更改存储引擎,肯定是不太合适,因为InnoDB...是默认的存储引擎,能支持事务外健,并发情况性能也比较好 所以,根据网上的做法,重新analyze 对应表,在mysql8.0版本是不管用的,发现查询数据还是不对,估计是mysql版本太高,mysql5版本没验证过
前言 前几天,有位客户提了一个慢查询问题,需要这边帮忙分析一下;整个排查过程还是非常有趣,涉及到一些值得关注的知识点,因此在这里记录一下。...MySQL没有类似Oracle存储ASH和历史执行计划等信息,因此没有办法直接定位,但我们可以通过其它方式来排查;这里需要我们了解以下几个知识点(在问题排查中,有些知识点也是有些模糊,后面会通过实验进行验证...,该表非常大,扫描到1400w行记录左右,超过30s应用超时断开,SQL被回滚,因此binlog没有记录,慢日志记录的Rows_examined只有1400万,而不是2亿;至于为什么SQL走的执行计划不对...SQL (1)手动rollback回滚的SQL,在语句执行完之后,就被记录在慢日志中;后续rollback并不会影响它,且rollback这个语句本身并不会记录在慢日志中 mysql> begin; Query...,该表非常大,扫描到1400w行记录左右,超过30s应用超时断开,SQL被回滚,因此binlog没有记录,慢日志记录的Rows_examined只有1400万,而不是2亿;至于为什么SQL走的执行计划不对
从一个问题说起 在刚工作的时候,发现分页场景下,当offset变大,MySQL处理速度非常慢!...在数据量这么少的情况下,走索引还这么慢,这完全不能接受,我就问我导师为什么,他反问“索引场景,MySQL中获得第n大的数,时间复杂度是多少?”...回到我们最初的问题,总结一下:问题的本质其实就是让offset找到第n大的数,再通过链表遍历,在数据量很大的情况下,确实会慢。 但是即使是O(n),也不至于仅有几万数据就慢得令人发指。...注意,即使这10000个节点会被扔掉,MySQL也会通过二级索引上的主键id,去聚簇索引上查一遍数据,这可是10000次随机IO,自然慢成哈士奇。...问题的解决 针对分页性能问题,《高性能MySQL》中提到了两种方案,让我们一起来看看: 方案一:产品上绕过 根据业务实际需求,看能否替换为上一页、下一页的功能,这样子就可以通过和上次返回数据进行比较,
本人遇到的问题是sendmail启动和发送邮件都特别慢,可能发一次邮件都需要卡几分钟,绝对的是不正常。在网上搜相关问题,基本可以确定应该是DNS解析主机名时遇到问题了。...我服务器的主机名自己改过,通过hostname这个命令可以查看当前的主机名,我的是:hangzhou。...然后打开hosts文件:vi /etc/hosts,看到现在的内容是: 127.0.0.1 localhost ::1 localhost localhost.localdomain...更改后的内容是: 127.0.0.1 localhost ::1 localhost localhost.localdomain localhost6 localhost6.localdomain6
自定义监控脚本,监控mysql的慢查询日志,每分钟超过60条日志需要告警,需要仔细分析慢查询日志的规律,确定日志条数。 #!
MySQL的慢查询日志是MySQL提供的一种日志记录,它用来记录在MySQL中响应时间超过阀(fá)值的语句。...如果不是调优需要的话,一般不建议启动该参数,因为开启慢查询日志会或多或少带来一定的性能影响。慢查询日志支持将日志记录写入文件,也支持将日志记录写入数据库表。...本文中该工具的路径是:/usr/local/mysql/bin/mysqldumpslow 3.1、mysqldumpslow常用选项参数 -s 按照那种方式排序 c:访问计数 l:锁定时间...Creating tmp table 创建临时表。copy数据到临时表,用完再进行删除。 Copying to tmp table on disk 把内存中临时表复制到磁盘,危险操作!!...-- 此后所编写的sql语句将会记录到mysql库里的general_log表中 5.2、去表里面查看所有记录的执行sql(select * from mysql.general_log) select
---- 使用慢查询获取慢SQL 慢查询的相关参数 slow_query_log 是否开启了慢查询 默认关闭 mysql> show variables like 'slow_query_log';...> ---- slow_query_log_file 指定慢查询日志的存储路径及文件 默认存储在MySQL的数据目录中,建议日志文件和数据文件分开存储。...> ---- 慢查询日志的分析工具 慢日志涨这个样子: ?...因为慢查询日志比较大,靠肉眼很难分析,所以需要依赖第三方工具 mysqldumpslow 官方 mysqldumpslow可以汇总除查询条件外其他完全相同的SQL,并将分析结果按照参数中所指定的顺序输出...---- pt-query-digest 第三方的工具, 用法如下: pt-query-digest \ --explain h=ip.1,u=用户,p=密码\ slow-mysql.log 这个工具生成的慢查询分析日志
大家好,我是数据库小学妹我踩过的坑,你别再踩。去年清历史订单,我写了一条DELETE,圈了一千万行。我想着删数据嘛,减法,跑完就轻了。结果它跑了半个多小时还没完。先来的是慢查询告警。...别的查询走MVCC时,要顺着更长的版本链找可见版本。链越长,扫得越慢。你删的是历史数据,被拖慢的却是线上查询。更麻烦的是回滚。...要是条件字段没索引,问题更大。InnoDB锁的是扫描到的索引记录。全表扫一遍再删,锁的范围会远超你想象的几行。RR隔离级别下还有间隙锁,锁住的不只是行,还有行之间的空隙。...很多人习惯DELETEFROMt,删得慢,undo和binlog还全记一遍。TRUNCATE是重建表,快得多,日志也少。前提是这张表没有外键引用,也没人正拿着它的数据。还有一类最容易被忽略。...所以大表删除这道题,考的不是SQL写得对不对。考的是你会不会把一个巨大事务拆开。拆成能停、能看、能收手的节奏。数据可以分批走。代价不能一笔勾销。你们清理历史数据,是一次删完还是分批?有没有被回滚坑过?
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
现在起,所有执行时间超过1秒的sql都将被记录到慢查询文件中(我这里就是 /data/mysql/mysql-slow.log)。...说明: 可以看到,我这里设置为了file,就是说我的慢查询日志是通过file体现的,默认是none,我们可以设置为table或者file,如果是table则慢查询信息会保存到mysql库下的slow_log...表中 4、查询慢查询日志的开启状态和慢查询日志储存的位置 show variables like '%quer%'; ?...(4)如何通过pt-query-digest 慢查询日志发现有问题的sql 1)查询次数多且每次查询占用时间长的sql 通常为pt-query-digest分析的前几个查询 2)IO消耗大的sql 注意...4、数据库表的垂直拆分 5、数据库表的水平拆分 七、系统配置优化 1、数据库系统配置优化 2、Mysql配置文件优化 3、第三方配置工具使用 八、服务器硬件优化
是我在“新SQL”演讲中的开篇问题。在我提出这个问题后,竟然有大部分观众坦承仍在使用25年前的技术。...重要的是,一个功能具有定义明确的语义并解决一个真正的问题。学术方法已经让位于实用的方法。如今SQL标准为几乎所有的数据处理问题提供了一个实用的解决方案。其中一些留在关系域内,而另一些则没有。...你可以在YouTube上的MySQL WAT演讲中看到一些存在问题的SQL解释示例。请注意,该视频是2012年的,使用MySQL 5.5(当时的GA版本)。...我必须承认:在过去的10年中,这可能是SQL发生的最好的事情,而我就是指SQL而不是MySQL。 我认为单个数据库版本会对整个SQL生态系统产生巨大影响的原因很简单:MySQL是链中最薄弱的一环。...那时候,MySQL有一个CTE测试版,但没有窗口功能。MariaDB正在迅速改进。 在10.3中,MariaDB被设置为发布“系统版本化表”。
《大表删除字段为何慢?》的案例中,提到删除一张大表的字段,产生了很多等待,但是测试环境模拟的现象,看起来和生产,略有区别。...产生在删除字段的表上。...这些问题,还要感谢dbsnake的指教,他还指出,像PG,和Oracle不同的是,他的DDL,是需要显示commit,因此就能回滚DDL。...关于大表删字段,有些老师朋友,提供了他们碰见的问题,以及建议, 1. kill删除字段的会话,再次查询表会报ORA-12986,需要truncate表才能继续,此时要是没备份,就凉凉了。 ?...如果有停机时间,可以采用CTAS重建表,间接删除字段。 针对这个问题,我们采用的,算是第五种方法,即不动这字段,作为备份字段,未来新需求要增加字段,就直接改这字段,当然这是有些前提的, 1.
Gradle下载慢主要分为2类问题: 1.新建项目下载gradle慢 2.下载依赖jar包慢 新建项目下载gradle慢 打开用户主目录: linux平台:/home/用户名/.gradle windows.../gradle/wrapper/dist/gradle-版本号-bin目录,去官方网站下载这个版本号对应的安装包。...下载依赖jar包慢 在build.gradle文件中添加国内镜像: repositories { maven{ url'http://maven.aliyun.com/nexus/content/groups.../public/'} } 【参考】 https://blog.csdn.net/chenhaifeng2016/article/details/78654469 解决gradle下载慢的问题
1.修改android studio的使用堆内存,根据自己电脑的内存,尽量设置的大一点,点击help->如下图: 2.接下来设置使用离线gradle构建,一开始就是使用了内置的默认路径gradle...,勾选offline这个选项,编译的速度快的不止一点点,在.gradle的离线位置,建立一个gradle.properties的文件,设置精灵后台一直编译,这样提高了很多的速度,如下图:
/gradle/wrapper/dist/gradle-版本号-bin目录 去官方网站下载这个版本号对应的安装包 http://services.gradle.org/distributions/ 把下载下来的文件存放到这个目录下面的子目录
网站打开慢是运营中的高频痛点,不仅会导致用户流失、搜索引擎降权,还会直接影响转化效果。解决该问题的核心逻辑是:先定位问题根源,再针对性优化,避免盲目操作浪费时间。...第一步:先排查,精准找到“慢”的根源网站打开慢的原因分为四大类:服务器问题、资源加载问题、网络链路问题、本地设备问题。先通过简单操作排查,锁定问题方向,再对症解决,操作无需专业技术,新手可轻松上手。...排查是否是“网站本身问题”(所有人访问都慢)若多人反馈网站慢,或不同网络、不同设备访问均卡顿,说明问题出在网站本身,可通过2种方式测速定位,精准锁定问题核心,符合平台内容规范:专业测速工具:可使用常见网站测速工具进行检测...解决方法:开启浏览器缓存:在网站后台配置静态资源缓存(如图片、脚本、样式表),设置缓存有效期(如7天、30天),用户第二次访问时,浏览器可直接调用本地缓存,无需重新加载,基础操作建议,无敏感内容;配置服务器缓存...总结:解决网站打开慢的问题,关键是“先定位、再解决、后维护”。
1.明确要clone的github地址. 例如:https://github.com/gloomyson/games 2.注册登录gitee账号 3.导入仓库到gitee.