首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏Web_xy

    腾讯Elasticsearch

    最近是腾讯ES三周年,为了嫖一波福利,所以今天水一篇文章~(bushi) ---- 前言 众所周知,腾讯Elasticsearch(简称ES)是一款分布式搜索引擎,可以帮助开发者构建高性能、可伸缩的搜索应用 而最近的一段日子,是腾讯ES合作三周年的时间,我也来凑波热闹吧~ ---- 初体验 先说说我对于Elasticsearch的印象吧,在我看来,腾讯Elasticsearch是一种基于开源搜索引擎Elasticsearch 换句话说,我们在腾讯的每个角落都能发现Elasticsearch的影子。 大概是两年以前吧,我初次接触腾讯Elasticsearch的相关服务,当时就给我留下了深刻的印象。 那时的腾讯就像现在一样,提供了一个很直观的面板控制台,对于初学者的我们非常的友好与便捷;其次,在使用腾讯Elasticsearch的过程中,我注意到其强大的搜索和分析功能。 下面我将从个人角度阐述我与腾讯的渊源以及浅浅分析一下腾讯Elasticsearch的优化方向,帮助开发者更好地理解和应用这个服务。

    25.1K20编辑于 2023-02-23
  • 来自专栏云ES简单处理

    腾讯 Elasticsearch 购买建议

    image.png Elasticsearch 版本 腾讯 Elasticsearch 目前提供5个版本:5.6.4、6.4.3、6.8.2、7.5.1、7.10.1版本。 大版本的差异性参考: https://cloud.tencent.com/document/product/845/36106 高级特性 腾讯 Elasticsearch 目前提供3个版本:基础版、 可用区部署模式 腾讯 Elasticsearch 目前仅有部分大地域如北上广提供3个选择:单可用区、双可用区、三可用区,其他地域暂时只提供单可用区,后续会随着腾讯机房的建设而开放。 腾讯es支持灵活调整配置,在确定配置远高于需求的时候可以调低配置。 注:1核2g配置的机型只适用于测试,不可用于生产环境; 单节点数据盘 只有标准型、内存型才能调整数据盘类型和大小。 如果没有看到磁盘块数的调整,需要联系腾讯开通白名单。 购买建议: 如果业务对查询时间比较敏感,选择SSD 硬盘,避免磁盘IO性能影响业务。

    20.4K30发布于 2021-03-24
  • 来自专栏大数据生态

    腾讯 Elasticsearch RAG 案例

    说明本文描述问题及解决方法同样适用于 腾讯 Elasticsearch Service(ES)。什么是RAG? 本篇文章,将手把手教你基于腾讯ES与HAI平台,搭建专属AI知识库与DeepSeek大模型,让你快速拥有一个更安全、更懂你、且不会“服务器繁忙,请稍后再试”的AI助手。为什么选择腾讯ES? 通过腾讯ES,你可以根据自身需求,灵活定制知识库的内容与功能, 打造更懂你、更安全、更可控的专属AI助手。AI 助手构建购买ES 集群1、登录腾讯ES控制台。 可见,使用腾讯ES与HAI构建基于DeepSeek的RAG应用,可同时结合DeepSeek强大的推理与内容生成能力、腾讯ES一站式RAG方案以及HAI平台高效的模型部署能力,显著提高答案生成的准确性 总结本文介绍如何通过结合腾讯ES 与DeepSeek大模型,快速构建RAG 应用。

    8177979编辑于 2025-06-30
  • 来自专栏用户3005970的专栏

    【玩转腾讯】搭建ElasticSearch

    下载ElasticSearch wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.6.2-linux-x86 _64.tar.gz wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.6.2-linux-x86_64 .tar.gz.sha512 检查下载的包,并解压 shasum -a 512 -c elasticsearch-7.6.2-linux-x86_64.tar.gz.sha512 tar -xzf elasticsearch -7.6.2-linux-x86_64.tar.gz cd elasticsearch-7.6.2/ 启动ElasticSearch . /bin/elasticsearch 或者以守护进程的方式启动 ./bin/elasticsearch 检查并确认 在机器上执行以下脚本 curl -X GET "localhost:9200/?

    5.9K11发布于 2020-04-30
  • 来自专栏上云那些事

    腾讯elasticsearch产品优化指南

    下面两篇外部文章也可以推荐给看看: 《图解 Elasticsearch 入门原理》 https://mp.weixin.qq.com/s? sharer_sharetime=1565076443617&sharer_shareid=e5e1cc74ca9c3dbd757efde7fd8ad8c0&rd2werd=1#wechat_redirect 《ElasticSearch 读写底层原理及性能调优》 https://juejin.im/post/5de0c453f265da05aa65d8b1 《陈曦:性能与稳定并存 Elasticsearch调优实践》 https://mp.weixin.qq.com sharer_sharetime=1565076470661&sharer_shareid=e5e1cc74ca9c3dbd757efde7fd8ad8c0&rd2werd=1#wechat_redirect 另外,腾讯

    3.9K41发布于 2019-09-17
  • 来自专栏大数据生态

    腾讯ElasticSearch迁移场景介绍

    说明 本文描述问题及解决方法同样适用于 腾讯 Elasticsearch Service(ES)。 背景 腾讯 Elasticsearch Service (ES) 凭借多年的运营经验和优质的线上服务,以其低成本、高性能、高可靠性和高扩展性的特点,已经成为越来越多客户的不二之选。 那么,哪些场景可以迁移到腾讯 ES?不同的场景应该使用什么方案?它们之间有什么差异?让我们在本文中一一展开。 (腾讯ES特有) 在线不停服迁移 自建ES 无需停服 ✓ ✓ ✓ ☓ 需腾讯ES后台配合纯手工操作,有一定风险 ES 其他迁移方案介绍 其他服务 to es 迁移方案如下: 产品 迁移方案 方案链接 ES集群方案概览: Logstash方案 使用Logstash迁移数据至腾讯ES集群方案概览: 在线融合方案 使用在线融合迁移数据至腾讯ES集群方案概览: 图片 常见迁移问题案例 删除快照导致的业务异常

    1.9K207218编辑于 2025-03-25
  • 来自专栏运维监控日志分析

    elasticsearch 快照存储库--腾讯COS

    背景 ELK 本地集群只保留一个月的数据,一个月之前数据要迁移到上进行备份,生产环境需要使用AWS S3进行对接,这里先使用腾讯COS进行测试。。。 ? elasticsearch 版本 [root@elk-node2 ~]# rpm -qa elasticsearch elasticsearch-7.5.0-1.x86_64 插件路径 /usr/ http://192.168.10.235:9200/_cat/plugins elk-node1 repository-s3 7.5.0 elk-node2 repository-s3 7.5.0 腾讯 cos.ap-shanghai.myqcloud.com", "compress":"true" } } 参数说明: type:指定快照仓库类型为S3,也就是cos bucket:指定oss的bucket名称(腾讯上查看 ) endpoint:指定oss访问域名(腾讯上查看) compress:是否压缩(默认开启压缩,只压缩元数据文件,索引数据文件不压缩) disable_chunked_encoding:是否禁用HTTP

    14.9K30发布于 2020-12-09
  • 来自专栏南非骆驼说大数据

    腾讯 Elasticsearch 运维篇(十六)Elasticsearch 集群告警预警

    前言 | 上一章节,我们讲了Elasticsearch集群的监控,除了腾讯自己平台提供了丰富的监控参数外,Kibana Monitor也提供了丰富的监控特性。 腾讯 ES 提供一些关键指标的配置告警功能,配置告警可帮助您及时发现集群问题并进行处理。可以毫不夸张的说集群告警在信息管理中是非常重要的一部分,那么,本文为您介绍通过控制台配置告警的操作。 如下图: image.png 那么以上就是腾讯Elasticsearch监控告警的部署过程。 同时我们发现,设置告警功能后,ES控制台就没有提示我们要去配置告警联系设置了。 另外可以参考 使用 Curator 在腾讯 Elasticsearch 中自动删除过期数据,为集群配置定时清理任务。 腾讯告警功能的设置流程大概就是: 1,先确定有无告警策略 2,如果没有我们就新建告警策略、然后定制自己的告警触发条件、应用到我们的监控对象上 3,去控制台-告警管理栏中查看各设置细节。

    2.6K50发布于 2020-02-24
  • 腾讯Elasticsearch服务支持APM技术指南

    摘要: 本文旨在为技术架构师提供关于腾讯Elasticsearch服务(ES)支持APM(应用性能监控)的技术解析、操作指南和增强方案。 操作示例:登录腾讯控制台,选择Elasticsearch服务,根据业务需求选择合适的配置。 增强方案 通用方案 vs 腾讯方案对比: 特性 通用方案 腾讯方案 性能 依赖于自建硬件和网络环境 腾讯ES服务自动优化,性能提升20% 成本 需要购买和维护硬件 按需付费,成本降低30% 安全 自行负责数据安全 腾讯提供多层次安全防护 场景化案例: 据IDC 2024报告,采用腾讯TKE后容器部署效率提升300%。 通过本文的技术指南,技术架构师可以更好地理解腾讯Elasticsearch服务支持APM的价值,并将其应用于实际项目中,以提高应用性能和可靠性。

    36810编辑于 2025-08-21
  • 来自专栏腾讯云大数据与AI专家服务

    腾讯Elasticsearch Watcher 功能之 Webhook实践

    引言 __ Elasticsearch 的商业包 x-pack 给我们提供了很多高阶功能,其中有一个非常重要的用来检测日志是否异常并及时发送警报信息的功能,我们称这个功能为Watcher 腾讯ES用户从2020年5月20号起购买的白金版ES集群支持通过Webhook的方式实现告警; 由于网络安全原因,上集群暂不支持通过配置Outlook 邮件服务器的方式实现邮件告警。 location = /50x.html { root html; } Nginx服务的默认端口是80,如您需要更改其端口,则需要去腾讯控制台 image.png 随后,选择”新创建一个机器人“,这样您就获得了一个可以外网访问得Webhook机器人地址,如下: image.png 4,设置告警 登录对应腾讯 Elasticsearch实例的Kibana控制台。

    3.7K172发布于 2020-12-03
  • 来自专栏南非骆驼说大数据

    腾讯 Elasticsearch 运维篇(十三)数据迁移

    前言 前面我们通过通过腾讯控制台快速构建了一个ES集群,并能通过控制台管理界面或者CVM操作管理ES集群。 我们知道ES是一个存储搜索分析引擎,那么如何让自己的现有的ES集群的数据跨平台的迁移到腾讯上来呢??我们推荐ES官方的snapshot方法。 pretty image.png 4,目标ES集群中创建repository 方法:在腾讯上创建 COS 对象 bucket,把仓库建在 COS 的某个 bucket 下。 步骤 首先:你需要登录到腾讯控制台的COS(对象存储服务)项去新建一个bucket桶,并命名为自己习惯的名字 其次:在Kibana命令行下去新建一个仓库,将其映射到腾讯 image.png 如果报下面的错 需要跨厂商的迁移,可以选择使用 snapshot 的方式进行迁移,例如从阿里 ES 集群迁移至腾讯 ES 集群。

    3.3K50发布于 2020-02-23
  • 来自专栏腾讯云Elasticsearch Service

    通过spring-data-elasticsearch连接腾讯ES

    spring-data-elasticsearch有两种方式连接Elasticsearch,一种是TCP的方式,通过9300端口连接,还有一种是HTTP的方式,通过9200端口连接。 腾讯ES提供了9200端口的HTTP方式来连接ES。 其中spring-data-elasticsearch的版本和Elasticsearch的版本需要匹配和兼容,本文使用的elasticsearch版本为6.4.3。 添加maven依赖包: <dependency> <groupId>org.springframework.data</groupId> <artifactId>spring-data-elasticsearch </artifactId> <version>3.2.0.RELEASE</version> </dependency> 其中Elasticsearch版本和Spring-data-elasticsearch

    6.3K10发布于 2019-10-29
  • 来自专栏应用系统数据统计分析

    腾讯ES】Elasticsearch Aggregations数据统计实践

    Elasticsearch作为分布式搜索引擎,可支持各种数据类型(结构化/非结构化文本、数值等)的存储和快速查询,具有良好的可扩展性,可以支持不断增长的数据量。 Elasticsearch不仅可以进行多种场景的数据查询,还提供了强大的聚合查询功能,可实现各种复杂的数据分析需求。

    2K30编辑于 2022-12-09
  • 来自专栏腾讯云Elasticsearch Service

    腾讯Elasticsearch集群规划及性能优化实践

    腾讯 Elasticsearch Service】高可用,可伸缩,云端全托管。 集成X-Pack高级特性,适用日志分析/企业搜索/BI分析等场景 ---- 随着腾讯 Elasticsearch 产品功能越来越丰富,ES 用户越来越多,上的集群规模也越来越大。 另外腾讯ES支持单节点挂载多块硬盘,且经过性能压测,3块盘相比于1块盘,吞吐量大约有2.8倍的提升。 下面这张图是上一个 100个节点,总分片数在 11W+ 的集群。每天 8点切换新索引时,写入直接掉0,集群不可用时间在数小时不等。 对于这种问题,我们腾讯ES团队也有一些非常成熟的优化方案。 希望本文能够帮助到腾讯的每一个ES客户。

    1.8K30发布于 2021-01-07
  • 来自专栏腾讯云Elasticsearch Service

    腾讯Elasticsearch集群规划及性能优化实践

    随着腾讯 Elasticsearch 产品功能越来越丰富,ES 用户越来越多,上的集群规模也越来越大。 本文则结合我们在给腾讯 ES 集群日常运维工作中遇到的各种集群问题及总结沉淀的一些运维经验,来介绍下如何规划好集群容量及索引配置,以及所遵循的一些原则和经验。 另外腾讯ES支持单节点挂载多块硬盘,且经过性能压测,3块盘相比于1块盘,吞吐量大约有2.8倍的提升。 因此使用SSD磁盘对于写入性能和IO性能都会有一定的提升,另外腾讯现在也提供了多盘的能力,相对于单盘节点来说,3块盘的吞吐量大约有2.8倍的提升。 希望本文能够帮助到腾讯的每一个ES客户。

    8K120104发布于 2020-09-13
  • 来自专栏大数据生态

    「最佳实践」腾讯 Elasticsearch 8.13.3 向量混合检索

    说明本文描述问题及解决方法同样适用于 腾讯 Elasticsearch Service(ES)。 另外使用到:腾讯 服务器(Cloud Virtual Machine,CVM)声明本文使用的商品样本数据系混元大模型生成的商品数据。 服务端环境 ● 版本ES 版本:8.13.3(腾讯 Elasticsearch Service(ES) 白金版) 1. 客户端数量CPU核数内存硬盘镜像128增强型 SSD盘盘 50G * 1CentOS 7.9 64位点击购买客户端机器 2. }) return resp# 创建界面st.set_page_config(layout="wide")st.markdown("

    腾讯

    1.3K76编辑于 2025-03-08
  • 来自专栏腾讯云迁云技术团队专栏

    Elasticsearch系列之三】腾讯ES上安全优化

    Elasticsearch本身是分布式多副本的,在此基础上腾讯ES进一步提供高可用数据安全能力,您可以根据自身业务情况来选择相应的安全方案,具体如下: 1、数据构建COS备份 腾讯ES集群提供主索引分片以快照的形式 1.1、自动快照备份 1) 备份说明: Ø 腾讯 ES 自动快照备份,只保留最近7天的快照数据; Ø 自动快照备份的数据只能用于恢复到原集群,如果需要跨集群恢复,请参考手动快照; Ø 默认情况下,自动快照备份在凌晨进行 集群第一个快照是集群数据的完整拷贝,执行时间视具体数据量而定,之后的快照保留的是已存快照和新数据之间的增量差异; Ø 集群健康状态为红色时,自动快照服务将停止创建,建议您关注集群的健康状态; Ø COS采用7天自动备份是腾讯账号管理的 2、ES集群多可用区部署(同地域跨可用区容灾) 腾讯ES 提供了多可用区部署方案,可保证在单可用区网络、电力等不可抗力故障下不停服。 [ys9b18lte3.png] 3、跨集群复制CCR(跨地域容灾) Elasticsearch白金版支持跨集群复制CCR能力,同时利用腾讯跨地域内网互通能力,可支持跨地域容灾。

    1.8K20发布于 2020-04-14
  • 来自专栏腾讯云Elasticsearch Service

    腾讯Elasticsearch跨集群复制原理及最佳实践

    三、跨集群复制总结 以上我们分别从CCR的基本原理和动手实践向大家介绍了Elasticsearch的跨集群复制功能,并总结了在生产实践中使用跨集群复制功能时需要注意的问题及解决方案,希望对大家有帮助。

    5.5K90发布于 2021-11-20
  • 腾讯Elasticsearch服务支持安全审计的技术指南

    本文旨在解析腾讯Elasticsearch服务(ES)的安全审计能力,并提供详细的操作指南,以确保用户能够高效、安全地利用腾讯ES进行数据索引和搜索。 技术解析 核心价值与典型场景: 腾讯Elasticsearch服务(ES)是一种基于Elasticsearch开源搜索引擎的托管服务,它提供了全文搜索、日志分析、指标监控等多种功能。 操作示例:登录腾讯控制台,选择Elasticsearch服务,进入集群管理页面,开启安全审计功能。 操作示例:在腾讯ES控制台中,配置审计策略,例如,设置审计日志存储在腾讯COS(对象存储服务)中。 通过本文的技术指南,用户可以深入了解腾讯Elasticsearch服务的安全审计能力,并有效地实施和利用这一功能,以提高数据安全性和合规性。

    39610编辑于 2025-08-21
  • 来自专栏腾讯云迁云技术团队专栏

    Elasticsearch系列之四】腾讯ES数据基本操作

    注意:本教程提供的示例代码仅适用于腾讯Elasticsearch 7.x版本,不确定是否适用于其他版本,其他版本的示例代码请参见官方文档:https://www.elastic.co/guide/en Elasticsearch提供了在查询条件下更新多个文档的能力(如SQL UPDATE-WHERE语句),具体可以参考官方文档说明:https://www.elastic.co/guide/en/elasticsearch pretty 删除成功后,返回结果如下: { "acknowledged" : true } 10、查看所有的索引 GET _cat/indices 11、腾讯ES默认索引模板说明和调整 1) 腾讯 ES 在集群创建时提供了一个默认的索引模板,您可以在 Kibana 界面的【Dev Tools】中通过命令GET _template/default@template查看这个模板。 a) 调整主分片个数 在 Elasticsearch 5.6.4版本和6.4.3版本中,默认的索引主分片个数为5个。

    2.1K41发布于 2020-04-21
领券