- 综合排序
- 最热优先
- 最新优先
- 来自专栏创作是最好的自我投资
一条SQL语句的执行历程
SQL执行历程在数据库管理系统中，每当你敲下一条SQL，按下执行键的时候，不管这条SQL是简单还是复杂，从按下执行键到返回数据结果展现出来这个过程都是一致的，每一步都有其存在的必要意义。 解析优化在正式执行 SQL 查询语句之前， MySQL 会先对 SQL 语句进行解析，解析包括词法解析，语法解析等，验证你执行的这条 SQL 可以被执行。 SQL执行那么经过解析优化之后，那么你的 SQL 就算进入执行状态了，接着就要进入执行 SQL 查询语句的流程了，每条SELECT 查询语句流程主要可以分为下面这三个阶段：预处理阶段、执行阶段，在这一阶段同样会执行优化 SQL 执行过程的剖析，整个过程包括一下SQL执行的全部历程信息在整个SQL 执行过程中，从你敲下SQL 点击【执行】命令的那一刻，SQL 的历程就开始了starting。 整个 SQL的执行过程可以通过执行过程中涉及到的命令做一个详细的分析，感兴趣的可以自己尝试看看 SQL 执行过程。
39620编辑于 2024-11-21 - 来自专栏IT码农
Yii2 SqlDataProvider 原生sql 执行sql
=:status ', [':status' => 1])->queryScalar(); $dataProvider = new SqlDataProvider([ 'sql
1.4K31发布于 2019-09-29 - 来自专栏大数据
hive执行引擎的发展历程
一、历史与现状Hive的执行引擎经历了几个重要阶段：MapReduce时代（早期默认）最初，Hive将SQL语句转换为MapReduce作业来执行这是Hive的经典执行方式，但MapReduce执行速度较慢 Spark时代（现代选择）从Hive 1.1.0版本开始，Hive正式支持Apache Spark作为执行引擎这确实意味着Hive可以将SQL查询转换为Spark作业来执行Spark基于内存计算，通常比 使用MapReduce（传统但较慢）SET hive.execution.engine=mr;-- 2. 使用Tez（性能较好）SET hive.execution.engine=tez;-- 3. (解析SQL) → Hive 优化器 (逻辑优化) → 物理执行计划 → Spark 转换器 (将计划转为Spark的RDD/DataFrame操作) → Spark Job (在YARN上运行) → 结果返回Hive# Hive on MapReduce的工作流程HiveQL (SQL) → Hive Driver → 优化器 → MapReduce
19110编辑于 2025-12-11 - 来自专栏ShanSan的云原生之路
博客搭建历程（2）
2.部署到GitHub repo 生成ssh keys ssh-keygen -t rsa -C "邮件地址@youremail.com" #生成新的key文件，邮箱地址填注册Github时用的 ?
43920发布于 2020-07-07 - 来自专栏鸿的学习笔记
一条SQL生命历程
1.一条SQL的诞生首先需要通过某种方式传递给数据库。 数据库会有一个客户端用来与外界交流，而作为提交SQL的一方，可以通过ODBC或者是JDBC协议直接将SQL提交给数据库，除此以外，还可以通过Web服务等第三方服务将SQL提交给数据库。 2.数据库接受SQL语句后，会根据现有的情况预先计算相应的算力，决定是不是应该立即执行这条SQL以及是否有足够的资源执行完这句SQL。一般这个任务被称为“Process Manager”。 3.当这条SQL获得相应的算力后，SQL就会开始进行计算了，首先会调用语句处理器，检查调用者是否有足够权限执行这条SQL，接下来编译这条SQL文本成内部执行计划。 内部执行计划会包含各种“算子”，例如聚合，投影，选择以及join。 4.在执行计划中会存在很多算子，这时需要一个事务处理器帮忙决定数据的增删改查。
39440发布于 2018-08-06 - 来自专栏IT码农
yii2 执行原生态的sql语句
你执行的SQL语句返回的不是结果集，只是状态值,例如：INSERT ，UPDATE，DELETE.则用execute() $this->command->execute(); //使用事务的一种常见情形 )->execute(); $connection->createCommand($sql2)->execute(); ……… $transaction->commit(); } catch(Exception $e){ // 如果有一条查询失败，则会抛出异常 $transaction->rollBack(); } Yii 直接执行SQL语句的几种使用方法 1. ->createCommand($sql); 2. SQL语句的执行 CDbCommand对象有两个（种）方法来执行SQL语句。
1.8K21发布于 2019-09-02 - 来自专栏编程教程
如何使用pymysql和psycopg2执行SQL语句
在Python中，pymysql和psycopg2是两个非常流行的库，用于与MySQL和PostgreSQL数据库进行交互。本文将详细介绍如何使用这两个库来执行SQL查询、插入、更新和删除操作。 执行SQL操作 3.1 查询操作 3.1.1 MySQL查询 with connection.cursor() as cursor: sql = "SELECT * FROM your_table column2) VALUES (%s, %s)" cursor.execute(sql, ('value1', 'value2')) connection.commit() 3.3 错误处理 在执行数据库操作时，可能会遇到各种错误，如连接失败、SQL语法错误等。正确的错误处理可以确保程序的健壮性。 总结 本文介绍了如何使用pymysql和psycopg2连接MySQL和PostgreSQL数据库，并执行SQL查询、插入、更新和删除操作。
35310编辑于 2025-08-28 - 来自专栏DBA随笔
一条SQL的心路历程
一条SQL的心路历程 今天在极客时间上学习丁奇大佬的《MySQL 45讲》的时候，看到了一条高质量的评论，结合我自己的理解，将它分享出来。 当我们在客户端执行一条SQL的时候，例如： update table set a=a+1 where id=1； 此时在MySQL内部到底发生了哪些事情？ 1.首先客户端通过TCP/IP协议发送一条update的SQL语句到Server层的SQL接口组件。该过程会经历连接的三次握手。 2.SQL 接口组件接到该请求后，先对该条语句进行解析，验证权限是否匹配，此处验证的是用户账号的权限。 4.接下来是优化器器生成相应的执行计划，优化器会对比多个执行计划，最后选择最优的执行计划 5.之后会是执行器根据执行计划执行这条语句。
57410发布于 2020-05-18 - 来自专栏PostgreSQL实战
2. 一条更新SQL是如何执行的
通过上面的描述，我们知道一条查询SQL执行的主要过程，客户端执行一条SQL前需要先经过连接数据库、解析器、优化器、执行器等阶段，再由执行器返回查询结果，具体过程可以参考下面的简图。 查询SQL是对已有数据的访问和返回，一般情况下不会涉及到数据存储的更新，那么有数据更新的场景是怎么执行的呢？ 接下来我们以一条UPDATE SQL来举例，下面的表有一个主键ID1和一个整型字段ID2，两个字符字段C1和C2，下面是更新SQL操作： postgres=> update t10 set id2=id2 +2 where id1=156; 对于一条更新SQL来说，它和查询SQL一样要经过SQL解析、优化、执行等阶段，同时会多出来写WAL（Write Ahead Logging）日志的步骤。 以上面的UPDATE操作为例，执行器从存储读入ID1=156的数据到内存中，并在内存中做ID2+2计算，完成计算后并不马上把这条记录刷新到硬盘，而是先记录一条日志，就告诉客户端这个操作已经完成，继续处理其他任务
77341编辑于 2022-02-26 - 来自专栏SQL实现
SQL 的执行顺序
了解 SQL 的执行顺序非常有价值，它可以让我们写出语法正确的 SQL，帮助我们简化编写新查询的过程。 本文将在 MySQL 的基础上，介绍查询语句的执行顺序。 ： FROM / JOIN 和所有 ON 条件 WHERE GROUP BY HAVING SELECT ORDER BY LIMIT 以上是 SQL 标准定义的执行顺序。 clause'”SELECT CONCAT(ename, '|', job) AS ename_job FROM emp WHERE ename_job = 'KING|PRESIDENT' 2. 比如下面这条 SQL ，看起来像是 SELECT 子句的别名被 GROUP BY 子句引用。 SELECT CONCAT(job, '|', deptno) AS job_dept, COUNT(*) FROM emp GROUP BY job_dept 那是不是说这条 SQL 破坏了前面定义的执行顺序呢
3.1K31发布于 2020-07-18 - 来自专栏python3
python执行sql文件
最近遇到一对需要执行的sql文件，sql文件内是insert 语句。 但是实施人员给过来的sql文件，一张表的数据根据数据量硬生生生成了近10个文件。文件多了，若手动执行，很容易出现遗漏或者重复操作，造成错误。 由于文件内结构比较单一，故用脚本实现。 代码如下： def execute_sql(conn, cur, path=r"D:\个人"): """执行指定目录下的.sql文件""" os.chdir(path) for count = 1 # 当读取完毕文件，不到2000行时，也需对拼接的sql 执行、提交 if sql: cur.execute(sql) conn.commit() 以上execute_sql函数，会默认执行入参path路径下，所有文件名包含“.sql”文件。
3.5K20发布于 2020-01-08 - 来自专栏算法channel
SQL|语句执行逻辑
01 SQL SQL，脚本查询语言，处理代码的顺序不是按照脚本语言的顺序，这点是不同于其他编程语言的最明显特征。 SQL语言常见的比如，Mysql，HiveQL，Oracle等，虽然语法上存在一些差异，但它们在解释查询脚本上，尤其是在解析语句执行顺序上具有共性。 如果将脚本语言分解为一系列的语句，那么这些语句的先后执行顺序是怎样的呢？ 这篇文章，主要总结SQL语句的执行顺序。 02 Select语句执行顺序 select查询语句的执行顺序，可以看出首先执行FROM子句，最后执行ORDER BY 执行顺序： (1) FROM (2) ON (3) JOIN (4) WHERE FROM：对FROM子句中的前两个表执行笛卡尔积(交叉联接)，生成虚拟表VT1，选择相对小的表做基础表。 ON：对VT1应用ON筛选器，只有那些使为真才被插入到VT2。
3.8K80发布于 2018-04-02 - 来自专栏python3
Python执行hive sql
该python脚本是用于执行hive脚本的，需要设置hive的可执行环境变量，其实质转化为shell下命令 hive -e 'sql语句’ 的方式执行，然后把结果重定向到控制台显示。 注：由于该脚本是直接调用shell中的hive命令，所以需要在安装hive的服务器上执行。 使用前置条件：（1）安装hadoop和hive，并启动完hadoop；（2）已配置好hive的环境变量，确保在shell中能正常执行hive。 #! /usr/bin/python #-*-coding:utf-8 -*- import subprocess import traceback sql = """ # 书写hql脚本 ; """ cmd = 'hive -e """'+sql.replace('"', "\'")+'"""' print cmd try: p = subprocess.Popen(cmd, shell=True
4.5K10发布于 2020-01-07 - 来自专栏不想当开发的产品不是好测试
java 执行sql文件
# 背景 用例执行完毕，期望回滚数据，因此希望执行sql来回滚数据 # 步骤 直接show代码，借助的是mybatis的ScriptRunner /** * 执行xx库下的表备份脚本 runner.setAutoCommit(true); String fileName = String.format("src/main/resources/db/%s.sql File file = new File(fileName); try { if (file.getName().endsWith(".sql
2.9K80发布于 2018-04-10 - 来自专栏用户画像
linux 执行.sql文件
连接到mysql: mysql -u用户名 -p用户密码 2. 在MySQL下执行： source /home/jiangxingqi/DB/hello world.sql
6.3K00发布于 2018-08-24 - 来自专栏进击的程序猿
orm 系列 之 Eloquent演化历程2
is_null($sql = $grammar->$method($this, $command))) { $statements = array_merge($statements this->repository->getRanMigrations($package); // 比较不同 $migrations = array_diff($files, $ran); // 执行未执行的 Eloquent：是前一篇讲的对于Active Record模式中Model的功能，包括了Model、Builder和Relation功能，忘记的可以去看前一篇orm 系列 之 Eloquent演化历程 1的内容 Query：包含了最基本的Sql的操作和语法逻辑，类似于自定义了一个DSL语言，提供了面向对象的操作方式 Schema：这也是本篇讲migrations or database modification 让外界尽可能简单的使用Eloquent，于是就出现了Manager，记得网上搜索过关键字Using Eloquent outside Laravel，我们可以看到一篇Vivek Kumar Bansal写的文章，文章从2方面介绍了怎么使用
3.6K30发布于 2018-08-23 - 来自专栏白安全组
ecshop 2.x3.x sql注入任意代码执行漏洞
前言： 该漏洞影响ECShop 2.x和3.x版本，是一个典型的“二次漏洞”，通过user.php文件中display()函数的模板变量可控，从而造成SQL注入漏洞，而后又通过SQL注入漏洞将恶意代码注入到危险函数 eval中，从而实现了任意代码执行。 |a:2:{s:3:"num";s:107:"*/SELECT 1,0x2d312720554e494f4e2f2a,2,4,5,6,7,8,0x7b24617364275d3b706870696e666f0928293b2f2f7d787878,10 |a:2:{s:3:"num";s:107:"*/SELECT 1,0x2d312720554e494f4e2f2a,2,4,5,6,7,8,0x7b24617364275d3b706870696e666f0928293b2f2f7d787878,10 Upgrade-Insecure-Requests: 1 点击send发送 我们看到代码执行后，出现了phpinfo页面，证明注入成功了。
1.7K20编辑于 2022-12-01 - 来自专栏小工匠聊架构
MySQL- SQL执行计划 & 统计SQL执行每阶段的耗时
---- 某些SQL查询为什么慢 要弄清楚这个问题，需要知道MySQL处理SQL请求的过程， 我们来看下 MySQL处理SQL请求的过程 客户端将SQL请求发送给服务器 服务器检查是否在缓存中是否命中该 SQL，未命中的话进入下一步 服务器进行SQL解析、预处理，再由优化器生成对应的执行计划 根据执行计划来，调用存储引擎API来查询数据 将结果返回给客户端 ---- 查询缓存对SQL性能的影响 query_cache_type 预处理及生成执行计划 接着上一步说，查询缓存未启用，或者 未命中查询缓存 ， 服务器进行SQL解析、预处理，再由优化器生成对应的执行计划 。 ---- 造成MySQL生成错误的执行计划的原因 存储引擎提供的统计信息不准确 执行计划中的估算不等同于实际的执行计划的成本 MySQL不考虑并发的查询 MySQL有时候会基于一些特定的规则来生成执行计划 120 Warnings: 0 mysql> update setup_consumers set enabled = 'YES' where name like 'events%'; # Step2
3.6K20发布于 2021-08-17 - 来自专栏技术赋能学术
Sql Server 查询正在执行的sql信息
er.status, [Wait] = wait_type, [Individual Query] = SUBSTRING(qt.text, er.statement_start_offset / 2, (CASE WHEN er.statement_end_offset = - 1 THEN LEN(CONVERT(NVARCHAR(MAX), qt.text)) * 2 ELSE er.statement_end_offset END - er.statement_start_offset) / 2), [Parent Query] = qt.text, sys.dm_exec_requests er INNER JOIN sys.sysprocesses sp ON er.session_id = sp.spid CROSS APPLY sys.dm_exec_sql_text (er.sql_handle) AS qt WHERE session_Id > 50 /* Ignore system spids.*/ AND session_Id NOT IN (@@SPID
4.9K30发布于 2021-01-08 Mysql-SQL执行顺序
SQL的执行顺序事实上，sql并不是按照我们的书写顺序来从前往后、左往右依次执行的，它是按照固定的顺序解析的，主要的作用就是从上一个阶段的执行返回结果来提供给下一阶段使用，sql在执行的过程中会有不同的临时中间表 order by s.create_time limit 5;1、from 第一步就是选择出from关键词后面跟的表，这也是sql执行的第一步：表示要从数据库中执行哪张表。 通过from 和 join on 选择出需要执行的数据库表T和S，产生笛卡尔积，生成T和S合并的临时中间表Temp1。 on：确定表的绑定关系，通过on产生临时中间表Temp2. 实例说明：找到表S，生成临时中间表Temp1，然后找到表T的id和S的id相同的部分组成成表Temp2，Temp2里面包含着T和s.id相等的所有数据3、where where表示筛选，根据
1.3K10编辑于 2024-03-10
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号