首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏全栈程序员必看

    数据库4索引类型_数据库索引类型

    以MKVCache为例,使用的哈希算法在如下文件中: MKHash.h MKHash.cpp DCache在内存中将数据分为索引区和数据区: 数据区用于存储真实的数据 索引区只记录索引的值和对应数据区的地址 unsigned int uHash = HashRawString(key); return uHash; } 一致性哈希的原理不在这里阐述,大家可以自行搜索,这个算法可以解决数据迁移和数据库扩缩容过程中 DCache采用了这个算法,在数据迁移或数据库横向扩缩容时,最多只会影响到相邻的2个数据节点,而不是需要所有节点都重新分布数据。这个原理跟Redis-Cluster的实现类似。 哈希区 这里定义了2种哈希索引结构: 主key的索引 联合key的索引 在 tc_multi_hashmap_malloc.h文件中,主key的哈希结构定义: /** * 主key HashItem * 现在可以把索引的图补全了: 哈希冲突 前面提到DCache采用链表方式处理哈希冲突,具体如何处理的呢?感兴趣的同学可以去研究一下源码(ps:源码比较难懂,需要下功夫)。

    1.2K30编辑于 2022-11-03
  • 来自专栏从零开始的Code生活

    数据库索引

    什么是索引 索引是对数据库表中一个或多个列(例如,employee 表的姓名 (name) 列)的值进行排序的结构。 为什么使用索引 从上面的例子可以看出来使用索引的一大好处就是可以大大提高查询速度,如果把使用索引的MYSQL比作一辆兰博基尼,没使用索引的MYSQL就相当于一辆马车。 索引分单索引和组合索引,单列索引就是一个索引只包含一个列,一个表可以包含多个单列索引。 组合索引是一个索引包含多个列。 使用索引的优点是可以大大提高查询速度,缺点就是更新表的速度会变慢。 数据库索引有哪些 1.聚簇索引(主键索引):主键上的索引,表的所有字段都会根据主键排序 2.非聚簇索引:普通字段的索引 3.联合索引:一个索引包含多个字段 key 'name_age_sex' ('name =不走索引索引都不使用索引 F:name走索引,后面的不走,理由同上 什么情况不使用索引 key 'age' (age) key 'name' (name) LIKE like后面的值%在前面的不使用索引

    51020编辑于 2022-01-13
  • 来自专栏国产程序员

    数据库索引

    适当的使用索引可以提高数据检索速度,可以给经常需要进行查询的字段创建索引 oracle的索引分为5种:唯一索引,组合索引,反向键索引,位图索引,基于函数的索引 索引的创建 Oracle和MySQL创建索引的过程基本相同 `+10=30;--不会使用索引,因为所有索引列参与了计算 SELECT `sname` FROM `stu` WHERE LEFT(`date`,4)<1990;--不会使用索引,因为使用了函数运算, 5条记录,采用索引去访问记录的话,那首先需访问索引表,再通过索引表访问数据表,一般索引表与数据表不在同一个数据块,这种情况下ORACLE至少要往返读取数据块两次。 数据重复且分布平均的表字段:假如一个表有10万行记录,有一个字段A只有T和F两种值,且每个值的分布概率大约为50%,那么对这种表A字段建索引一般不会提高数据库的查询速度。 对千万级MySQL数据库建立索引的事项及提高性能的手段: l 对查询进行优化,应尽量避免全表扫描,首先应考虑在 where 及 order by 涉及的列上建立索引

    79830发布于 2019-07-04
  • 来自专栏程序员奇点

    数据库索引

    数据库索引 数据库索引,在日常工作中会经常接触到,比如某一个 SQL 查询比较慢,分析原因后,经常会说 “给某个字段加个索引”,索引又是如何工作的? image 搜索指定 key 值的场景 图中,User2 和 User4 根据身份证号算出的值都是 N,但是没关系,后面有个列表,假设,这个是要查 ID_card_n2 对应的名字是什么,将 ID_card_n2 image 树可以是二叉树,也可以是多叉树,多叉数是每个阶段多个儿子,儿子从左到右保持递增,但是实际上大多数的数据库存储用的不是二叉树,索引不止存储在内存中,还要写到磁盘上。 其中 ID 是主键, 普通索引为 k; ? 普通索引和主键索引有啥区别? 主键索引的叶子节点存的是整行数据,在 InnoDB 里主键索引也被称为是聚簇索引(clustered index)。 image 什么场景适合用业务字段做主键索引? 只有一个索引索引必须是唯一索引 如果没有其他索引,所以也就不用考虑其他索引的叶子节点大小的问题。

    88531发布于 2020-05-29
  • 来自专栏java初学

    数据库索引

      在数据量非常大的情况下,在数据库中加入索引能够提升数据库查找的性能,常见的mysql索引分为以下几类: ①普通索引 可以直接创建索引:CREATE INDEX indexName ON table :DROP INDEX indexName ON table ②唯一索引 与普通索引类似,不同的就是:索引列的值必须唯一,但允许有空值(注意和主键不同)。 如果是组合索引,则列值的组合必须唯一,创建方法和普通索引类似。 注意多个单列索引与单个多列索引的查询效果不同,因为执行查询时,MySQL只能使用一个索引,会从多个索引中选择一个限制最为严格的索引。   虽然我们可以删除lname列上的索引,再创建fname或者age 列的索引,但是,不论在哪个列上创建索引搜索效率仍旧相似。     

    1.3K170发布于 2018-05-14
  • 来自专栏日常笔记

    数据库索引

    最左匹配 建立这样的索引相当于建立了索引a、ab、abc三个索引。一个索引顶三个索引当然是好事,毕竟每多一个索引,都会增加写操作的开销和磁盘空间的开销。 覆盖(动词)索引。 那么MySQL可以直接通过遍历索引取得数据,而无需读表,这减少了很多的随机io操作。减少io操作,特别的随机io其实是dba主要的优化策略。 所以,在真正的实际应用中,覆盖索引是主要的提升性能的优化手段之一 索引列越多,通过索引筛选出的数据越少。 有1000W条数据的表,有如下sql:select * from table where a = 1 and b =2 and c = 3,假设每个条件可以筛选出10%的数据,如果只有单值索引,那么通过该索引能筛选出 1000W*10%=100w 条数据,然后再回表从100w条数据中找到符合b=2 and c= 3的数据,然后再排序,再分页;如果是复合索引,通过索引筛选出1000w *10% *10% *10%=1w

    87730发布于 2020-08-05
  • 来自专栏云计算与大数据

    数据库索引

    数据库索引 索引是应用设计和开发的一个重要方面,如果索引太多,就会影响Insert,Update,Merge和Delete等数据修改语句的性能, 索引太少,又会影响Select,Insert,Update 开发人员必须了解索引,清楚如何在应用中使用索引,而且知道何时使用索引(以及何时不使用索引)。 DBA则需要考虑索引的增长,空间使用以及其他物理特性,并考虑到索引对系统总体性能的影响。 B*Tree 聚簇索引(B*Tree cluster index): 这是传统B*Tree索引的一个近似变体。B*Tree聚簇索引是对聚簇建立的索引。 降序索引(descending index) 反向键索引(reverse key index) 位图索引(bitmap index) 位图联结索引(bitmap join index) 基于函数的索引( function-based index) 应用域索引(application domain index) B*Tree索引(所说的“传统”索引)是数据库中最常用的一类索引结构,其实现与二叉查找树很相似

    52820编辑于 2023-03-18
  • 来自专栏python-爬虫

    数据库索引

    07.21自我总结 数据库索引 1.什么是索引? 即搜索引导,索引是一个特殊的数据结构,其存储的关键信息与详细信息的位置对应关系,加速索引 索引的影响: - 正确使用索引才能加速查询; - 索引需要额外的占用数据空间; - 索引的加入,使数据的crud 变慢 索引的应用场景: ​ 查询操作较多,写入较少;本质原理是尽可能减小搜索范围 2.磁盘IO 数据库的数据最终存储到了硬盘上,当一次IO时,不光把当前磁盘地址的数据,而是把相邻的数据也都读取到内存缓冲区内 聚集索引中存储了所有的数据 辅助索引 除了聚集索引之外的索引都称之为辅助索引或第二索引,包括 foreign key 与 unique 辅助索引的特点: 其叶子节点保存的是索引数据与所在行的主键值,InnoDB 用这个 主键值来从聚集索引中搜查找数据 覆盖查询 覆盖索引指的是需要的数据仅在辅助索引中就能找到: 回表查询 如果要查找的数据在辅助索引中不存在,则需要回到聚集索引中查找,这种现象称之为回表 也就是说搜索字段为非索引字段时

    80520发布于 2019-07-23
  • 来自专栏Kevin-ZhangCG

    数据库索引

    数据库中,索引也允许数据库程序迅速地找到表中的数据,而不必扫描整个数据库。   我们通过一个简单的例子来开始教程,解释为什么我们需要数据库索引。 局部性原理与磁盘预读,预读的长度一般为页(page)的整倍数,(在许多操作系统中,页得大小通常为4k)   4数据库怎么知道什么时候使用索引?    通常来说, 你不会告诉数据库什么时候使用索引 - 数据库自己决定。然而,值得注意的是在大多数数据库中(像Oracle 和 MYSQL), 你实际上可以制订你想要使用的索引。 同样的,就像一本书的索引包含页码一样,数据库索引包含了指针,指向你在SQL中想要查询的值所在的行。 使用数据库索引会有什么代价?   那么,使用数据库索引有什么缺点呢?   

    1.4K00发布于 2018-09-20
  • 来自专栏python-爬虫

    数据库索引

    数据库索引 1.什么是索引? 即搜索引导,索引是一个特殊的数据结构,其存储的关键信息与详细信息的位置对应关系,加速索引 索引的影响: 正确使用索引才能加速查询; 索引需要额外的占用数据空间; 索引的加入,使数据的crud变慢 索引的应用场景 : ​ 查询操作较多,写入较少;本质原理是尽可能减小搜索范围 2.磁盘IO 数据库的数据最终存储到了硬盘上,当一次IO时,不光把当前磁盘地址的数据,而是把相邻的数据也都读取到内存缓冲区内,因为局部预读性原理告诉我们 聚集索引 聚集索引中包含了所有字段的值,如果拟制定了主键,主键就是聚集索引; 如果没有则找一个非空且唯一的字段作为聚集索引; 如果也没有这样的列,innoDB会在表内自动产生一个聚集索引id,它是自增的 聚集索引中存储了所有的数据 辅助索引 除了聚集索引之外的索引都称之为辅助索引或第二索引,包括 foreign key 与 unique 辅助索引的特点: 其叶子节点保存的是索引数据与所在行的主键值

    64830发布于 2019-07-22
  • 来自专栏python、mysql、go知识点积累

    MySQL数据库4Python操作mysql、索引、慢查询日志

    host配置的是IP地址,若果是本机则用localhost,user配置用户权限,之后配置账户和密码,这里的账户密码指登录数据库的账户和密码,database配置需要操作的数据库,之后是配置要链接的数据库的编码 2.设置默认返回的数据类型 3.发送SQL指令 4.获取返回的数据 import pymysql #连接数据库的参数 conn = pymysql.connect(host='localhost', 2.1索引的本质 数据库索引本质是一个特殊的文件,可以提高数据的查找速度。 情况4 排序条件为索引,则select字段也必须是索引字段,否则无法命中。 如下例 index(a,b,c,d) where a=1 and b=2 and c=3 and d=4 #命中索引 where a=1 and c=3 and d=4 #命中索引 2.6.2查看索引是否命中的方法

    2.4K20发布于 2019-12-12
  • 来自专栏宇宙之_一粟

    数据库索引

    为什么要使用使用索引? 最简单的方式--全表扫描,普遍认为很慢。索引类似于字典,通过索引快速查询数据。 2. 什么样的信息能成为索引? 主键、唯一键以及普通键等。 3. 索引的数据结构? 生成索引,建立二叉查找树进行二分查找 生成索引,建立B树结构进行查找 生成索引,建立B+树结构进行查找 生成索引,建立Hash结构进行查找 优化你的索引结构 二叉查找树上阵 二分查找 O(logn) 缺点是退化成链表 : B+树的磁盘读写代价更低 B+树的查询效率更加稳定 B +树更有利于对数据库的扫描 适合范围查询 Hash索引也可以考虑一下 遇到大量Hash值相等的情况后性能并不一定就会比B-Tree索引高 BitMap 索引是个神器 Oracle使用,锁粒度非常大,不适合高并发系统 4. 密集索引和稀疏索引的区别 密集索引文件中的每个搜索码值都对应一个索引值 稀疏索引文件只为索引码的某些值建立索引项 .frm .ibd .frm .MYI .MYD 1. 如何定位慢查询?

    48210编辑于 2022-05-13
  • 来自专栏素履coder

    数据库索引

    所以有序数组索引只适用于查询的情况 搜索树 二叉查找树 平衡二叉树 N叉树 实际上大多数的数据库存储并不使用二叉树。原因是,索引不止存在内存中,还要写到磁盘上。 那么,我们就不应该使用二叉树,而是要使用“N叉”树,N叉树由于在读写上的性能优点,以及适配磁盘的访问模式,已经被广泛应用在数据库引擎中了。 ,普通索引占用的空间也就越小,所以,从性能和存储空间方面考量,自增主键往往是更合理的选择 适用业务字段直接做主键的场景:只有一个索引,该索引必须是唯一索引 4.覆盖索引 image.png 语句select k=5,取得ID=500 再回到ID索引树查到ID=500对应的R4(第二次回表) 在k索引树取下一个值k=6,不满足条件,循环结束。 比如,要插入(4,400)这个记录,就要先判断现在表中是否已经存在k=4的记录,而这必须要将数据页读入内存才能判断。

    64320编辑于 2022-02-17
  • 来自专栏全栈程序员必看

    es数据库索引_sql 创建索引

    dimensionValues":"string", "stock":"string", "salesNum":"string" } } } } } index — 索引名称 type — 索引type 版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。

    1.2K20编辑于 2022-10-04
  • 来自专栏changxin7

    4.MySQL索引原理

    如果知道数据的使用,从一开始就应该在需要处添加索引。开发人员往往对数据库的使用停留在应用的层面,比如编写SQL语句、存储过程之类,他们甚至可能不知道索引的存在,或认为事后让相关DBA加上即可。 数据库也是一样,但显然要复杂的多,因为不仅面临着等值查询,还有范围查询(>、<、between、in)、模糊查询(like)、并集查询(or)等等。数据库应该选择怎么样的方式来应对所有的问题呢? 这就是为什么每个数据项,即索引字段要尽量的小,比如int占4字节,要比bigint8字节少一半。 四 聚集索引与辅助索引数据库中,B+树的高度一般都在2~4层,这也就是说查找某一个键值的行记录时最多只需要2到4次IO,这倒不错。 数据库中的B+树索引可以分为聚集索引(clustered index)和辅助索引(secondary index), 聚集索引与辅助索引相同的是:不管是聚集索引还是辅助索引,其内部都是B+树的形式,即高度是平衡的

    80410发布于 2019-09-10
  • 来自专栏大数据学习笔记

    Neo4J:索引

    本文链接:https://blog.csdn.net/chengyuqiang/article/details/102685464 创建索引 create index on :Dude(name) ? 使用索引查询 MATCH (n:Dude) WHERE n.name IN ["A1","C1"] RETURN n ? 显式使用索引 match (d:Dude{name:"B2"}) using index d:Dude(name) return d ?

    90210发布于 2019-10-24
  • 来自专栏小工匠聊架构

    MySQL-索引优化篇(4)_索引的维护

    ---- 删除重复索引 举个例子 ,对id 建立了多个索引 ,重复索引 primary key(id) 【主键索引】, unique key(id) 【唯一索引】, index(id)【普通索引】 主键上 MySQL会自动创建索引的,所以就么有必要再对主键建立 唯一索引,更没有必要建立普通索引了。 ---- 删除冗余索引 举个例子 index(a) , index(a,b) 在a上建立普通索引 , 在a 、b 建立了联合索引。 这种情况是冗余的, 只需要保存 那个联合索引中就行了,删除 对a 单独建立的普通索引即可。 因为 a 都在左侧, 所以 查询a, 也是可以走那个联合索引的。 ---- primary key(id), index(a, id) 这种情况是冗余的,因为Innodb中对于二级索引会自动增加 主键索引,所以 也是没必要对a 和 主键id 建立联合索引的。

    51030发布于 2021-08-17
  • 来自专栏不想当开发的产品不是好测试

    数据库索引问题

    # 解决 原因就是因为limit不同,导致走了不同的索引 走的索引不一样,决定了要检索的数据量多少 1、当你要取的数据很少的时候,mysql认为走start_time的索引很快就能找够满足条件的数据,结果实际上满足条件的数据按照 2、而当你limit20的时候mysql认为按照其他索引可能需要扫描很多的记录才能找到你要的结果,所以走了city_id的索引。 强制使用一个索引,try,可以解决,但不够灵活 2. order by 后面的时间做个空运算,干扰下优化器, <!

    89420发布于 2018-10-09
  • 来自专栏Devops专栏

    Mysql数据库-索引

    Mysql数据库-索引 2.1 索引概述 MySQL索引(index): 是帮助MySQL高效获取数据的数据结构,所以索引的本质就是数据结构! 在表数据之外,数据库系统还维护者满足特定查找算法的数据结构,这些数据结构以某种方式指向数据, 这样就可以在这些数据结构上实现高级查找算法,这种数据结构就是索引。 一般来说索引本身也很大,不可能全部存储在内存中,因此索引往往以索引文件的形式存储在磁盘上。索引数据库中用来提高性能的最常用的工具。 2.2 索引优势劣势 2.2.1 优势 1) 类似于书籍的目录索引,提高数据检索的效率,降低数据库的IO成本。2) 通过索引列对数据进行排序,降低数据排序的成本,降低CPU的消耗。 通常使用在数据库和操作系统中的文件系统, 特点是能够保持数据稳定有序. # 要理解BTree索引原理,我们需要依次学习 1. 磁盘存储的特点 2. BTree的特点 3.

    2.7K10编辑于 2022-01-17
  • 来自专栏程序员奇点

    数据库索引原理

    |D索引树查到|D=500对应的R4 在k索引树取下一个值k=6,不满足条件,循环结束 在这个过程中,回到主键索引树搜索的过程,我们称为回表。 可以看到,这个查询过程读了k索引树的3条记录(步骤1、3和5),回表了两次(步骤2和4)。 如何进行索引优化,避免回表? 什么是覆盖索引? 如何使用覆盖索引 创建联合索引,可以使用上覆盖索引。 为了直观地说明这个概念, 我们用(name, age) 这个联合索引来分析 ? image 当你的逻辑需求是查到所有名字是“张三”的人时, 可以快速定位到ID4, 然后向后遍历得到所有 需要的结果。 在建立联合索引的时候, 如何安排索引内的字段顺序。 索引复用能力 这里我们的评估标准是, 索引的复用能力。

    86130发布于 2020-05-29
领券