今天例行查看日志,发现有个sql在本地查询速度较快,在服务器环境下查询速度较慢,达到了6s之多。说下优化思路,原本事先将子查询优化下,后来排查下,发现是mysql缓存问题。为以后排查问题涨了点知识。...优化sql语句优化mysql配置、一、sql优化优化前SELECTspace_id,max_temp,min_temp,avg_temp,create_time FROM( SELECT space_id...variables like 'innodb_buffer_pool%';image.png在线调整InnoDB缓冲池大小SET GLOBAL innodb_buffer_pool_size = 3221225472sql...C:\ProgramData\MySQL\MySQL Server 5.7\my.ini路径图片修改my.ini搜索 innodb_buffer_pool_size注意:用记事本保存的话,要注意保存的文件的编码...必须是ANSI图片修改后,重启mysql即可。
Mysql慢sql优化 index 1.MySQL的执行过程 2.索引的定义 3.MySQL执行计划explain or desc 4.索引使用/创建规则 5.弊端 6.设计规范 7.SQL建议 1...Using index condition:表示 SQL 操作命中了索引,但不是所有的列数据都在索引树上,还需要访问实际的行记录。...主键 我们应该为数据库里的每张表都设置一个ID做为其主键,而且最好的是一个INT型的(推荐使用UNSIGNED),并设置上自动增加的AUTO_INCREMENT标志 MySQL查询可以启用高速查询缓存。...可以在执行sql前调用begin,多条sql形成一个事物(即使autocommit打开也可以),将大大提高性能。 小表 数据库中的表越小,在它上面执行的查询也就会越快。...数据记录限定:当只要一行数据时使用 LIMIT 1 MySQL数据库引擎会在找到一条数据后停止搜索,而不是继续往后查下一条符合记录的数据。
慢查询日志主要用来记录在MySQL数据库中执行时间超过指定阈值时间的查询语句。通过慢查询日志查找出效率底下的SQL语句,并根据需要进行优化。...慢查询日志是排查SQL语句性能问题的工具,如果非优化需求不建议开启,开启后会对数据库的性能带来一定影响。----1....默认情况下慢查询日志关闭的,可以使用以下命令来查看慢查询日志的状态、位置及记录阈值。.../VM-4-4-centos-slow.log |+---------------------+---------------------------------------+# 慢查询日志的记录阈值mysql...在当前实例中开启慢查询日志(重启数据库会失效)# 开启慢查询日志mysql> set global slow_query_log = on;Query OK, 0 rows affected (0.01
company_id和odds_typeid的值并不够散列(company_id表少于1k条就表示不够散列)不必要创建索引。 出现慢sql警告,排查语句是否有问题。...mysql> SELECT * FROM `basketball_ls_match_odds` WHERE `match_id` = 3554260 AND `company_id` = 15 order...create_time: 2020-07-23 17:43:37 update_time: 1970-12-31 08:00:00 1 row in set (0.50 sec) 复制代码 sql...mysql> explain SELECT * FROM `basketball_ls_match_odds` WHERE `match_id` = 3554260 AND `company_id...company_id和odds_typeid的值并不够散列(company_id表少于1k条就表示不够散列),不必要创建索引。
一、概述 MySQL的慢查询日志是MySQL提供的一种日志记录,它用来记录在MySQL中响应时间超过阀值(long_query_time,单位:秒)的SQL语句。...库下的slow_log表中。...SQL 语句 重启MySQL服务 重启MySQL后会看到/var/lib/mysql/slow-query.log文件。...可以看到上述慢查询的SQL语句被记录到日志中。 四、慢查询分析工具 mysqldumpslow mysqldumpslow是MySQL自带的分析慢查询的工具。该工具是Perl脚本。...若要检查慢查询,需要我们手动设置这个参数。一般情况下,若非调优需要,不建议启动该参数,因为开启慢查询日志或多或少会带来一定的性能影响。慢查询日志支持将日志记录写入文件,也支持将日志记录写入数据库表。
1、显示慢日志是否开启 show variables like ‘%slow_query_log%’ 2、查询超过多少秒才记录 show variables like ‘%long_query_time...配置分全局配置和配置文件的配置 全局配置 1) 将 slow_query_log 全局变量设置为“ON”状态 set global slow_query_log=‘ON’; 2) 查询超过1秒就记录...set global long_query_time=1 3) 设置慢查询日志存放的位置 set global slow_query_log_file=’/usr/local/mysql/data.../slow.log’; 配置文件设置 [mysqld] slow_query_log = ON slow_query_log_file = /usr/local/mysql/data/slow.log...long_query_time = 1 重启MySQL服务 service mysqld restart 4、mysqldumpslow简单使用方法-mysqldumpslow详细用法 慢查询日志分析工具
概述 在业务型java项目中最大的隐患项之一就是慢SQL,它影响到服务的稳定性,也是日常工作中经常导致程序的最大隐患,在日常开发中如何避免出现慢SQL,出现了慢SQL应该按照什么思路去解决是我们必须要知道...在项目的初期由于数据量少,不会对数据库造成太大的压力,但慢慢的随着业务的发展和时间的积累这些sql就会渐渐的成为慢sql,对数据库性能产生一定的影响,甚至影响程序正常运行。...all:全表扫描,性能最差。...后者 MySQL 需要创建一个临时表来保存结果。...2.4 rows 表示sql所查询的行数 2.5 extra 该列显示 MySQL 在查询过程中的一些详细信息。
很多时候,都需要对数据表进行历史记录。比如每修改一次表单,之前的表单数据都需要计入历史。当表单比较多的时候,记录历史是一件比较麻烦的事情。又要建日志表,又要写存储过程,又要写页面逻辑等等。...最近做项目时碰到了,要求每次审核、退回等操作时就要记录表历史。于是,笔者就想到了以下方案。在此与大家分享了,如果有更合适的或合理的建议,请回复本帖。...1)创建日志表 一个一个建表是一件烦躁的事,而且还容易出错。那么,以下存储过程就能批量建表了,还添加了LogCreateDate、LogDefaultFlag、LogPTID这3个字段。...SQL里面实现遍历数据集不方便,不想用游标,于是采用了以下方式。具体存储过程如下: USE [NbShop] GO /****** Object: StoredProcedure [dbo]....3)记录日志 日志表有了,还得记录日志呢。为每个表写个存储过程会过于繁琐,而且改动了就得跟着改动。就是码农也吃不消。
这篇文章主要是就在公司实习的时候,对SQL优化工作作出的一些整理。 在公司实习的时候,导师分配了SQL慢查询优化的任务,任务是这样的:每周从平台中导出生产数据库的慢查询文件进行分析。...进行SQL优化的手段也主要是修改SQL写法,或者新增索引。 现在从记录项目中的一点点做起。...(1)数据库中设置SQL慢查询 一、第一步.开启mysql慢查询 方式一: 修改配置文件 在 my.ini 增加几行: 主要是慢查询的定义时间(超过2秒就是慢查询...),以及慢查询log日志记录( slow_query_log) 方法二:通过MySQL数据库开启慢查询: (2)分析慢查询日志 直接分析mysql慢查询日志...查询慢的原因都是:引起filesort (5)分析具体的SQL语句 1、两个表选哪个为驱动表,表面是可以以数据量的大小作为依据,但是实际经验最好交给mysql查询优化器自己去判断。
为何对慢SQL进行治理 从数据库角度看:每个SQL执行都需要消耗一定I/O资源,SQL执行的快慢,决定资源被占用时间的长短。假设总资源是100,有一条慢SQL占用了30的资源共计1分钟。...执行次数多的SQL优先治理 如果有一类SQL高并发集中访问某一张表,应当优先治理。 Mysql执行原理 绿色部分为SQL实际执行部分,可以发现SQL执行2大步骤:解析,执行。...执行 执行:检查用户、表权限->表上加共享读锁->取数据到query cache->取消共享读锁 image.png 影响因素 如不考虑MySQL数据库的参数以及硬件I/O的影响, 则影响SQL执行效率的因素主要是...> select @@long_query_time; # 默认十秒才记录慢日志 mysql> show variables like 'slow_query_log%'; mysql> show...19)禁止使用 order by rand(). 20)禁止单条 SQL 语句同时更新多个表。 21)不在业务高峰期批量更新或查询数据库,避免在业务高峰期alter表。
可以用查询sys.schema_table_lock_waits这张表,我们就可以直接找到阻塞的process id ,把这个连接用kill命令断开即可(mysql启动的时候设置performation_schema...等待行锁 首先,我们看看下面sql语句 mysql> select * from t where id=1 lock in share mode; 要执行上面语句的时候,这个记录就会要加读锁,如果这个时候已经有一个事物在这行记录上持有一个写锁...这个问题并并不难分析,问题是如何查出谁占着这个写锁,如果你用的mysql5.7,可以使用下面语句 mysql> select * from t sys.innodb_lock_waits where...第二类:查询慢 我们执行下面语句 select * from t where c=50000 limit 1; 有字段c没有索引,这个语句只能全表扫描,因此要扫描5万行,再看看慢日志的记录. ?...按照上面操作我们再看看对应的慢查询日志 ? ? 我们发现lock in share mode加锁操作居然时间比没有加锁的查询块了,超出了我们的预期,我们再看看每个sql查询结果 ?
在n条记录里,存在着些相同的记录,如何能用SQL语句,删除掉重复并保留一条呢?...方法如下: 1、查找表中多余的重复记录,重复记录是根据单个字段(peopleId)来判断 [sql] view plain copy select * from people where peopleId...in (select peopleId from people group by peopleId having count(peopleId) > 1) 2、删除表中多余的重复记录...,重复记录是根据单个字段(peopleId)来判断,只留有rowid最小的记录 [sql] view plain copy delete from people where peopleId in...from vitae group by peopleId,seq having count(*) > 1) 4、删除表中多余的重复记录(多个字段),只留有rowid最小的记录 [sql] view
PHP MySQL向数据库表中插入新记录 向数据库表插入数据 INSERT INTO 语句用于向数据库表添加新记录。...> ========来自web表单的数据插入数据库======== 现在,我们创建一个 HTML 表单,这个表单可把新记录插入 "Persons" 表。...insert.php"文件连接数据库,并通过 $_POST 变量从表单取回值。然后,mysql_query() 函数执行 INSERT INTO 语句,一条新的记录会添加到数据库表中。...php $conn=mysql_connect('127.0.0.1','root','root')or die("数据库连接错误:".mysql_error()); //连接数据库 mysql_select_db...;window.location.href='add.php';"; mysql_free_result($sql); mysql_close($conn);} ?
在运营网站的过程中,可能会遇到网站突然变慢的问题,一般情况下和 MySQL 慢有关系,可以通过开启慢查询,找到影响效率的 SQL ,然后采取相应的措施。...下面介绍一下如何开启慢查询: 1、开启慢查询 找到 MySQL 的配置文件 ,my.cnf (Windows 为 my.ini ),在 [mysqld]下增加下面几行: long_query_time=...2 log-slow-queries= /usr/var/slowquery.log 上面的 2 是查询的时间,即当一条 SQL 执行时间超过2秒的时候才记录,/usr/var/slowquery.log...然后重新启动MySQL服务 注意,mysql 5.6版本,记录慢查询日志的配置方式有修改为: long_query_time=2 slow_query_log=1 slow_query_log_file...:log=文件名 例:log=/tmp/mysqlquery.log 重启mysqld,即会把所有相关操作日志都记录下来 注意:log记录的位置,mysql要有写权限; 注意,mysql 5.6版本,记录所有操作日志的配置方式有修改为
那么如果有一个文件能够将这些使用过程中比较慢的SQL记录下来,定期去分析排查,那该多美好啊。这种情况MySQL也替我们想到了,它提供了SQL慢查询的日志,本文就分享下如何使用吧。 什么是慢查询日志?...MySQL的慢询日志,提供了记录在MySQL中响应时间超过指定阈值语句的功能,比如设定阈值为3秒,那么任何SQL执行超过3秒都会被记录下来。...默认情况下,MySQL数据库没有开启慢查询日志,因为多多少少会带来一定性能的影响。我们可以在开发测试环境、或者生产环境做调优的时候开启,那怎么查看是否开启了呢?...long_query_time=3 # 设置慢查询的阈值为3秒,超出此设定值的SQL即被记录到慢查询日志 log_output=FILE 复制代码 慢查询日志在哪里呢?...前面讲解了如何开启MySQL的慢查询日志,那么它把日志记录在哪里了呢?
Mysql慢查询设置 分析MySQL语句查询性能的方法除了使用 EXPLAIN 输出执行计划,还可以让MySQL记录下查询超过指定时间的语句,我们将超过指定时间的SQL语句查询称为“慢查询”。...Mysql5.0以上的版本可以支持将执行比较慢的SQL语句记录下来。...语句和返回记录集最多的20个sql。...mysql慢查询日志对于跟踪有问题的查询非常有用,可以分析出当前程序里有很耗费资源的sql语句,那如何打开mysql的慢查询日志记录呢?...Windows: 当你是第一次开启mysql的慢查询,会在你指定的目录下创建这个记录文件,本文就是mysqlslowquery.log,这个文件的内容大致如下(第一次开启MYSQL慢查询的情况下) E:
作者 | 高鹏(网名八怪) 出品 | 《深入理解MySQL主从原理32讲》 本文并不准备说明如何开启记录慢查询,只是将一些重要的部分进行解析。...如何记录慢查询可以自行参考官方文档: 5.4.5 The Slow Query Log 本文使用了Percona 版本开启来了参数log_slow_verbosity,得到了更详细的慢查询信息。...二、慢查询记录的依据 long_query_time:如果执行时间超过本参数设置记录慢查询。 log_queries_not_using_indexes:如果语句未使用索引记录慢查询。...1、MySQL层utime_after_lock的记录方式 不管是 MDL LOCK等待消耗的时间还是 MyISAM表锁消耗的时间都是在MySQL层记录的,实际上它只是记录在函数mysql_lock_tables...慢查询的相关的知识,主要解释了慢查询是基于什么标准进行记录的,同时输出中各个指标的含义,当然这仅仅是我自己得出的结果,如果有不同意见可以一起讨论。
# --查看结果 select from test 查找表中多余的重复记录,重复记录是根据单个字段(peopleId)来判断 select from people ...peopleId in (select peopleId from people group by peopleId having count(peopleId) > 1) 2、删除表中多余的重复记录...rowid not in (select min(rowid) from people group by peopleId having count(peopleId )>1) 3、查找表中多余的重复记录...and rowid not in (select min(rowid) from vitae group by peopleId,seq having count()>1) 5、查找表中多余的重复记录...“name”,而且不同记录之间的“name”值有可能会相同, 现在就是需要查询出在该表中的各记录之间,“name”值存在重复的项; Select Name,Count() From A Group
在MySQL数据库中,想了解数据库运行情况的重要指标之一是慢SQL。而并非如某些人所说的所有运行慢的SQL都会被记录在慢SQL日志(或日志表)里,抑或是没有慢SQL就代表没有运行慢的SQL。...另外为了后续进行慢SQL测试,此时先创建一张测试表并清空慢SQL日志表。 1.1 创建测试表及数据 创建测试表及测试数据,便于后续测试。...日志表 测试前先清空慢SQL日志表mysql.slow_log,清空方法如下: mysql> select count(*) from mysql.slow_log; +----------+ |...slow_query_log=0; Query OK, 0 rows affected (0.00 sec) # truncate 方式清空慢SQL日志表 mysql> truncate table...扫描记录少于阈值的SQL MySQL中扫描记录少于阈值由min_examined_row_limit参数控制,默认值为0,即如果SQL扫描的行数少于此值时,将不会被记录在慢SQL日志中,否则将会被记录。
Druid提供的SQL Parser可以在JDBC层拦截SQL做相应处理,比如说分库分表、审计等。 log4j2:这个就是 日志记录的功能,可以把sql语句打印到log4j2 供排查问题。...,比如 发出的 sql 语句,sql 执行的时间、请求次数、请求的 url 地址、以及seesion 监控、数据库表的访问次数 等等。...# 开启慢sql监控,超过2s 就认为是慢sql,记录到日志中 log-slow-sql: true slow-sql-millis: 2000...记录 有时候,系统中有些SQL执行很慢,我们希望使用日志记录下来,可以开启Druid的慢SQL记录功能 spring: datasource: druid: filter:...log-slow-sql: true # 开启慢SQL记录功能 slow-sql-millis: 2000 # 默认3000毫秒,这里超过2s,就是慢,记录到日志