- 综合排序
- 最热优先
- 最新优先
- 来自专栏大数据生态
Elasticsearch 普通索引切换自治索引方案
创建新索引点击创建自治索引：进行如下配置：2. 切换写入索引将EMR各组件配置的ES索引名称由ranger_audits修改为：ranger_audits_new3.
28530编辑于 2024-10-30 - 来自专栏大数据生态
ES自治索引功能测试与介绍
随机刷新功能 开启后默认设置是不刷新 高频写入时 1500条/s写入, 在写入数据doc数量2w，数据量在6-700MB间时进行落盘刷新。 5-6分钟后会进行刷新。 综合来说，随机刷新功能通常情况下不建议开启，数据落盘慢，不适合即写即查。 在长时间有大量数据写入且对即时查询要求低的情况下可以开启，落盘次数的减少有利于数据写入。 故障自动转移功能 自治索引在单点故障时会对索引进行滚动，避免阻塞写入。 持续不断对3号索引写入(写入速度几千文档/s) 当前正在写入的3号后备索引大小3.48G，文档数323550 2. 3. 15分钟后有新的后备索引滚动产生，此时3号索引仅4.37G数据，新增0.9G数据，新的4号索引2分钟新增的数据量就超过了。 结论:自治索引单点故障场景下，会拒绝大部分写入请求，导致大量写入失败。 直到新索引被滚动出来，写入恢复正常。 发生节点故障时，滚动出新的自治索引所需要的时间默认是5分钟。 时序裁剪 时序裁剪功能默认关闭，需要手动开启。
48740编辑于 2023-11-13 - 来自专栏腾讯云大数据
独家特性 | 腾讯云大数据ES：一站式索引全托管，自治索引大揭秘！
Datastream写入示意图 自治索引概述 我们针对目前业界在日志分析、运维监控等场景中使用ES遇到的索引分片设置难题、索引生命周期管理开销大、平台运维成本高等问题，自研了自治索引，作为一站式的索引全托管解决方案 自治索引与传统方案对比 基本概念 自治索引是基于Elasticsearch的Datastream内核进行增强实现的，内部关联了一个或多个backing index，即后备索引，我们可以把后备索引理解为自治索引的子索引 自治索引优势特性 整体而言，自治索引围绕索引从 索引创建-数据写入-分片调优-查询-运维管理等索引使用全流程操作，均提供了相应的特性帮助我们更好进行使用与管理。 优势特性1：高效创建与管理 自治索引的创建和管理相较原生索引以及Datastream更为高效，自治索引内置索引生命周期管理策略、索引模版等，我们只需通过一条命令，即可完成所有配置，无需额外管理ILM、索引模版以及别名等的成本 业务无感知，全部由自治索引自动完成。
94310编辑于 2022-11-18 - 来自专栏话梅糖のAndroid学习
什么是自治系统（AS）？
什么是自治系统（AS）？ 自治系统（AS，Autonomous System）是由一个独立的组织机构（如大学、企业或互联网服务提供商）所管辖和控制的一组网络集合。 邮政系统的比喻 为了更好地理解，我们可以把整个互联网想象成全球的邮政系统，那么一个自治系统（AS）就相当于一个国家的邮政系统，比如“中国邮政”或“美国邮政服务”。 这个过程只在中国邮政这个“自治系统”内部完成。 国际邮件（外部网关协议 - EGP/BGP）: 当你需要从中国寄一封信到美国时，中国邮政（一个AS）并不需要知道美国国内的每一条具体街道。 它只需要知道如何把这封信送到美国邮政（另一个AS）的“边境口岸”（即自治系统边界路由器 ASBR）。
64410编辑于 2025-07-19 - 来自专栏大数据学习笔记
ElasticSearch 6.x 学习笔记：6.索引
6.1 创建索引 （1）简单方式 PUT test { "acknowledged": true, "shards_acknowledged": true, "index": "test" } （2）索引名不能包含大些字母 PUT Test （3）重复创建 PUT test （4）指定参数 PUT blog { "settings": { "number_of_shards （1）查看指定索引的配置信息 GET blog/_settings { "blog": { "settings": { "index": { "creation_date 1515459619703", "number_of_shards": "3", "number_of_replicas": "1", "uuid": "6x9RQQ5KRoStK57T88VhmA DELETE test { "acknowledged": true } 6.4 索引的打开与关闭 （1）关闭索引 POST blog/_close { "acknowledged": true
31010编辑于 2022-05-06 - 来自专栏腾讯云大数据
行业独家 | 腾讯云ES：PB日志查询大提速，自治索引查询裁剪详解！
作者：腾讯云大数据ES团队 背景概述 日志场景一般具有明显的冷热特点，比如保留7天的日志数据，但P90查询都集中在近12小时，并且在查询日志时一般使用索引前缀查询，比如filebeat-*，这种查询比指定索引名查询 search的搜索操作，搜索任务会被分为两个阶段执行，即query then fetch，这里需要两个阶段才能完成搜索的原因在于，通过search执行搜索任务，在查询的时候无法提前知道文档位于哪些分片，因此索引的所有分片 分布式搜索流程 查询裁剪概述 从对search流程的分析来看，我们发现耗时主要集中在query阶段，由于索引前缀查询匹配到的索引的分片数量大，遍历这些分片的网络请求总耗时很高。 为了降低查询延迟，结合日志场景中查询行为冷热明显的特点，我们在自治索引上做了查询裁剪优化，在查询时，协调节点可根据查询条件中指定的时间范围，结合后备索引元数据中记录的时间范围信息，提前进行数据预过滤，降低分片发送请求的数量 欢迎大家使用腾讯云ES与自治索引～ 您可能需要的链接； 腾讯云ES：一站式索引全托管，自治索引独家特性大揭秘！ 腾讯云ES：自治索引常见使用方式介绍 腾讯云ES：一站式接入，数据链路可视化重磅来袭！
83620编辑于 2022-11-22 - 来自专栏机器学习/数据可视化
6种方式创建多层索引
6种方式创建多层索引MultiIndex pd.MultiIndex即具有多个层次的索引。通过多层次索引，我们就可以操作整个索引组的数据。 本文主要介绍在Pandas中创建多层索引的6种方式： pd.MultiIndex.from_arrays()：多维数组作为参数，高维指定高层索引，低维指定低层索引。 pd.MultiIndex.from_tuples()：元组的列表作为参数，每个元组指定每个索引(高维和低维索引)。 (array4) m4 Out[6]: MultiIndex([('xiaoming', 22), ( 'guanyu', 25), ('zhangfei = pd.MultiIndex.from_arrays(array6,names=["姓名","性别","年龄"]) m6 Out[8]: MultiIndex([('xiaoming', 'male
77820编辑于 2023-08-23 - 来自专栏腾讯云大数据
腾讯云 ES 重磅推出，一站式全托管的自治索引终于来了！
为了解决这些问题，腾讯云Elasticsearch自研了自治索引，自治索引是针对日志分析、运维监控等时序数据场景的一站式索引管理解决方案，您只需要通过简单的步骤创建自治索引，读写请求时指定单个自治索引对象即可 优势与特性 易使用：只需一条命令即可完成自治索引的创建，读写操作仅需关注单个自治索引，内置索引滚动、冷热数据搬迁、过期删除等功能，您只需在自治索引上配置即可，无需额外管理ILM策略和索引模版的成本。 前提条件 自治索引适用于2022年6月1日之后创建的7.14.2版本集群，早于此时间创建的7.14.2版本集群滚动重启后可支持，低于7.14.2版本的集群需升级至7.14.2版本。 写入到自治索引中的每个文档要求包含一个时间类型的字段，时间类型字段名称需与自治索引定义里的时间字段名称一致。如果创建自治索引时未指定时间字段名称，默认为@timestamp。 滚动更新 滚动更新将为自治索引新建一个新的后备索引，当前支持以下两种滚动方式： （1）自动滚动更新：通过自治索引内置功能实现，当满足自治索引配置的滚动周期条件或者当前提供写入的后备索引所在节点故障时，自动滚动新的后备索引
73210编辑于 2022-06-08 - 来自专栏Postgresql源码分析
Oracle自治事务详解
相关 《Oracle11g自治事务手册》 1 Oracle自治事务是什么？ active autonomous transaction detected and rolled back ORA-06512: at "SYS.AUTONOMOUS_INSERT", line 6 orcl11g>select * from t; MSG ------------------------------ SAVEPOINT S_A Autonomous Insert Commit 6 外层事务无法通过Savepoint回滚调自治事务 自治事务完全脱离外层事务，外层事务回滚、savepoint回滚都无法影响自治事务。 AS SELECT * FROM employees; -- Log table: DROP TABLE log; CREATE TABLE log ( log_id NUMBER(6)
1.3K30编辑于 2022-09-19 - 来自专栏iSharkFly
设置 Confluence 6 外部索引站点 原
但是你还是有下面 2 个可选的方案： 嵌入外部页面到 Confluence 替换 Confluence 查找 嵌入外部页面到 Confluence 如果你有少量的外部页面内容需要你的 Confluence 站点进行索引 这个要求删除你 Confluence 内部索引中的所有页面，将你 Confluence 的内部索引结果替换为你自己的 crawler 前段。 https://www.cwiki.us/display/CONF6ZH/Setting+Up+Confluence+to+Index+External+Sites
1K20发布于 2019-01-30 - 来自专栏大数据和云计算技术
MongoDB系列6：MongoDB索引的介绍
2、MongoDB支持的索引类型 在MongoDB主要支持以下几种索引类型： ·单列索引 ·复合索引 ·多键索引 ·全文索引 ·地理空间索引 ·哈希索引 2.1 单列索引 在MongoDB中，每个集合都会默认创建一个唯一索引列 2.3 多键索引 如果索引字段的值为数组，MongoDB会创建数组中的每个元素的索引键（即多键索引），不需要明确指定多键型。 像上面创建的全文索引，默认的索引名称为content_text_name_text_sex_text。 ? 由于索引名称长度的限制，以及删除索引的方便，可以在创建索引给索引命令。 2.4.3 全文索引的权重 对于全文索引，索引字段的权重表示相对于全文索引中的其他索引字段的重要性。索引列的默认权重为1。 ·不能在哈希索引列或指定哈希索引唯一约束字段上创建复合索引；但是，在同一个字段上，可以创建哈希索引和非哈希索引。MongoDB会使用标量索引范围查询。
3.6K101发布于 2018-03-30 - 来自专栏iSharkFly
Confluence 6 查看内容索引概要 原
内容索引，通常也被称为查找索引，这个索引被用来在 Confluence 中支持查找。 Gliffy plugin 插件其中的一些功能也使用了索引。 基于系统性能的考虑，Confluence 不会马上将修改的内容更新到索引中。 查看内容索引概要 希望查看有关你 Confluence 站点内容的索引信息： 在屏幕的右上角单击 控制台按钮 ? ，然后选择 General Configuration 链接。 在左侧面板的 管理（Administration）下面，选择 内容索引（Content Indexing）。 屏幕截图：索引摘要 ? https://www.cwiki.us/display/CONF6ZH/Content+Index+Administration
85420发布于 2019-01-30 - 来自专栏iSharkFly
Confluence 6 配置索引语言 原
修改你 Confluence 的索引语言将有助于你提高搜索的准确性，如果你网站使用的主要语言是除了英语以外的其他语言。 Confluence 可以支持下面语言的的内容索引： Arabic Brazilian Chinese CJK Czech Custom Japanese English (default) French German Greek Persian Russian 希望配置索引的语言： 进入 ? 在 格式和国际化设置（Formatting and International Settings）部分，选择 索引语言（Indexing Language）。 选择 保存（Save）。 https://www.cwiki.us/display/CONF6ZH/Configuring+the+Server+Base+URL
70450发布于 2019-01-30 - 来自专栏分布式｜微服务｜性能优化｜并发编程｜源码分析
6.索引数据的基本操作
基本操作 创建索引结构 PUT lglbc_crud { "mappings": { "properties": { "age":{ "type": "integer 我们都是使用静态mapping，用了一段时间后，业务需求有变动，我们需要更新字段类型或者数据量太大，我们需要扩展分片数量，但是经过前面的学习，大家都知道，这些都是无法修改的，所以我们的解决办法通常是重建索引 ，然后将老数据给merge过去，那我们来看下ES如何实现这个功能 创建旧索引 PUT lglbc_reindex_old/_doc/1 { "name":"乐哥聊编程", "count":"10 ，指定分片2个，副本2个，name：keyword,count:long 创建新索引 PUT lglbc_reindex_new { "mappings": { "properties": source：旧索引信息 dest：目标索引信息 POST _reindex { "source": {"index": "lglbc_reindex_old"}, "dest": {"index
27120编辑于 2023-09-11 - 来自专栏iSharkFly
Confluence 6 查看索引和提示 原
查看索引 Confluence 使用被称为 Lucene 的搜索引擎。如果你希望在你的 Confluence站点中查看更多有关索引的细节，你可以下载并且运行 Luke。 Luke 是一个开发和诊断工具，这个工具针对已经存在的 Lucene 索引，能够允许你对这个索引查看和修改。 View Space Activity 使用索引来对数据进行分类。如果你删除了索引文件，那已经存在的活动数据将会消失。 针对开发社区的小提示：如果你已经有了 Confluence 的源代码，你可以参考 SmartListManager 来找到内容索引的界面和列表。 https://www.cwiki.us/display/CONF6ZH/Content+Index+Administration
74540发布于 2019-01-30 - 来自专栏cwl_Java
快速学习ES6-操作索引
（indices) indices是index的复数，代表许多的索引， 类型（type） 类型是模拟mysql中的table概念，一个索引库下可以有不同类型的索引，比如商品索引，订单索引，其数据格式不同 不过这会导致索引库混乱，因此未来版本中会移除这个概念 文档（document） 存入索引库原始的数据。 2.3.查看索引设置 语法 Get请求可以帮我们查看索引信息，格式： GET /索引库名 ? 或者，我们可以使用*来查询所有索引库配置： ? 2.4.删除索引 删除索引使用DELETE请求 语法 DELETE /索引库名 示例 ? 再次查看heima2： ? 当然，我们也可以用HEAD请求，查看索引是否存在： ? 2.5.3.2.index index影响字段的索引情况。 true：字段会被索引，则可以用来进行搜索。
1.8K20发布于 2020-02-11 - 来自专栏云计算D1net
云计算如何实现自治系统
企业需要为获得更多自治IT资源做好准备。 由于各国发布了与冠状病毒疫情相关的出行禁令，很多企业被迫更多使用云计算服务以开展业务。 自治系统是利用机器学习和人工智能的高度自动化系统 全球专业服务商Genpact公司首席数字官Sanjay Srivastava说：“企业流程正在从自动化过渡到自治。 人们关于自治系统的一个误解是，它们可以自动执行所有操作。 Frank说，“企业经常需要花费时间在这些自治系统上进行设置，以确保它们正常运行，并且还需要意识到它们在其功能上的局限性以及潜在的弊端。 企业及其IT部门需要非常清楚采用自治系统的方式。 如果正确实施，自治功能可以将这些优势提升到新的水平。但是，要实现这一目标，企业可能需要在人才和培训方面进行更多的投资。 自治系统往往非常复杂，因此理解和考虑与目标用例相关的所有问题非常重要。
1.5K10发布于 2020-06-17 - 来自专栏数据和云
自治时代:Oracle 公有云离我们很近，自治数据库离我们还远
Andy Mendelsohn的自治未来 在数据库大会上，当一段 Andy Mendelsohn 先生的视频播放之后，『自治数据库』的基调已经非常明确，Oracle 已经将数据库的研发全面转向了自治时代 Oracle 的第一个自治数据库产品，是『自治数据仓库』，早已在公有云上提供，其敏捷和性能为很多用户广泛信赖： ? 很多人更关心的是基于 OLTP 的自治数据库，据 Andy 透漏，同样在 8月，自治事务处理数据库即将推出，注意，在中国的云中心是不会看到的，自治数据库要在中国数据中心上线，可能至少要等到 2019 年 Oracle自治数据库云初体验 Oracle 已经在公有云上提供了自治的数据仓库，简单来说，自治的数据仓库可以将数据库的安装、部署、备份等基础工作，全部自动、简化完成，极大的降低了技术工作量。 自治的云数据库极大提高了服务提供的过程，简化了 IT 基本操作。这就是云时代的变革。 下一节我们再继续探索，云上的自治数据库。
98840发布于 2018-08-09 - 来自专栏陈琛的Redis文章
MongoDB入门系列——6.全文索引
目录 ⊙ 背景 ⊙如何使用 ⊙准备工作：插入数据 ⊙建立全局索引 ⊙查询结果 ⊙使用中存在哪些问题 ⊙英文存在停止词 ⊙ 中文无法采用全文索引 前面了解了多种索引方式 ，比如单键索引，多键索引，复合索引等，这些感觉都太空，咱今天学习一下实用的索引——全文索引。 2 建立全局索引 下图的意思是在name字段上建立全文索引，注意index type为text，意思是建立全文索引。 ? 如果字段选择了$**，即表示全部字段。 如果搜索引擎要将这些词都索引的话，那么几乎每个网站都会被索引，也就是说工作量巨大。可以毫不夸张的说句，只要是个英文网站都会用到a或者是the。那么这些英文的词跟我们中文有什么关系呢？ 感觉MongodB的中文全文索引沒有想象中的强大。
1K20发布于 2020-06-12 - 来自专栏Python基础、进阶与实战
Python90-6 使用解包替代索引
第6条：使用解包替代索引 Item 6: Prefer Multiple Assignment Unpacking Over Indexing Python内置的tuple可以创建不变的、有序序列。 可以用解包替代索引方式取tuple中的值。 每个元素是一个元组(计数值，迭代对象) 这就是Pythonic的循环写法：简短易读，通常不需要使用索引。Python为list结构提供了更多解包功能（后面的章节介绍）。 合适地使用解包可避免索引，使代码简洁易读。 Things to Remember • Python有一种特殊语法叫解包(unpacking)，可在一个语句内进行多个赋值。 • 通过解包避免索引，可以减少多余，提升可读性。
70820编辑于 2022-12-06
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号