- 综合排序
- 最热优先
- 最新优先
- 来自专栏Elasticsearch实验室
Elasticsearch 最佳实践系列之分片恢复并发故障
主要是关于集群恢复过程中，分片恢复并发数调整过大导致集群 hang 住的问题。 场景描述 废话不多说，先来描述场景。 为了加快集群恢复的速度，调整分片恢复并发数，将默认值为2的 node_concurrent_recoveries 调整为100： curl -X PUT "localhost:9200/_cluster 立马修改分片恢复并发数到10，通过管控平台一把重启了全部节点，约15分钟后集群恢复正常。接下来会先介绍一些基本的概念，然后再重现这个问题并做详细分析。 PEER 场景分片恢复并发数主要由如下参数控制： cluster.routing.allocation.node_concurrent_incoming_recoveries ：节点上最大接受的分片恢复并发数 几分钟后，观察集群分片恢复数量，卡在固定数值不再变化： [分片恢复统计信息] 通过 allocation explain 查看分片分配状态，未分配的原因是受到最大恢复并发数的限制： [分片恢复限制] 观察线程池的数量
7.3K60发布于 2018-12-10 - 来自专栏腾讯数据库技术
Elasticsearch 最佳实践系列之分片恢复并发故障
主要是关于集群恢复过程中，分片恢复并发数调整过大导致集群 hang 住的问题。 一、场景描述 废话不多说，先来描述场景。 为了加快集群恢复的速度，调整分片恢复并发数，将默认值为2的 node_concurrent_recoveries 调整为100： curl -X PUT "localhost:9200/_cluster 立马修改分片恢复并发数到10，通过管控平台一把重启了全部节点，约15分钟后集群恢复正常。接下来会先介绍一些基本的概念，然后再重现这个问题并做详细分析。 PEER 场景分片恢复并发数主要由如下参数控制： cluster.routing.allocation.node_concurrent_incoming_recoveries ：节点上最大接受的分片恢复并发数 几分钟后，观察集群分片恢复数量，卡在固定数值不再变化： ? 通过 allocation explain 查看分片分配状态，未分配的原因是受到最大恢复并发数的限制： ?
1.8K21发布于 2019-05-16 - 来自专栏ES自助排障
ES集群恢复并发达到上限
via [cluster.routing.allocation.node_concurrent_recoveries])"}]如果 decider 中返回 "throttling" 时，通常表示该节点恢复并发达到上限 ，如果集群资源利用率比较低的话，可以适当调大恢复并发参数，加速分片分配。 cluster.routing.allocation.node_concurrent_incoming_recoveries : 2，控制节点并发进行恢复操作的数量cluster.routing.allocation.node_concurrent_outgoing_recoveries : 2，控制节点并发进行分配操作的数量indices.recovery.max_bytes_per_sec : 40mb，带宽大小解决方案按需调整对应参数，初始化分片数量建议调大，balance数量一般不建议调大 其余并发恢复或分配数量一般建议调整为小于或等于单节点cpu核数。Persistent设置：这些设置是持久的，一旦设置后将一直保持有效，即使集群重启也会保留。
1.2K20编辑于 2023-07-17 - 来自专栏腾讯云Elasticsearch Service
Elasticsearch 分片恢复并发过高引发的bug分析
主要是关于集群恢复过程中，分片恢复并发数调整过大导致集群 hang 住的问题。 场景描述 废话不多说，先来描述场景。 为了加快集群恢复的速度，手动调整分片恢复并发数，原本想将默认值为2的 node_concurrent_recoveries 调整为10，结果手一抖多加了一个0，设定了如下参数： curl -X PUT 立马修改分片恢复并发数到10，通过管控平台一把重启了全部节点，约15分钟后集群恢复正常。接下来会先介绍一些基本的概念，然后再重现这个问题并做详细分析。 PEER 场景分片恢复并发数主要由如下参数控制： cluster.routing.allocation.node_concurrent_incoming_recoveries ：节点上最大接受的分片恢复并发数 一般指分片从其它节点恢复至本节点。 cluster.routing.allocation.node_concurrent_outgoing_recoveries ：节点上最大发送的分片恢复并发数。
13.6K22发布于 2018-12-10 - 来自专栏用户9257747的专栏
并发编程之Redis：Redis数据持久化及故障恢复方案
那为了保证数据不丢失或者尽量少了丢失，我们希望数据能够落地到磁盘中，来降低故障发生之后数据丢失的可能性；当再起启动服务的时候，通过持久化的磁盘数据，快速恢复到内存中； 持久化的作用 核心作用：故障恢复， 通俗一点说，其实就是所有写操作的一份日志记录文件；当需要对数据进行恢复的时候，就把整份日志进行回放，即可完成整个的数据恢复；当Redis收到客户端的写操作之后，经过参数校验，逻辑处理，没有问题之后会将指令写到 是可以的，但是我们使用Redis的目的就是为了提高性能，实现高并发，如果采用了每次都刷盘的方式，将大大降低Redis的性能，可能得不偿失。 因为写操作多一次文件操作，因此开启了AOF的QPS相比于要低于RDB的方式 相同数据，AOF的持久化文件要比RDB的大 数据恢复的方式相比与RDB来说脆弱一些，容易出些Bug，导致恢复出来的数据和之前的数据不一致 c=3的key set c // 查看aof文件，发现已经保存了相关的日志 再次启动，发现数据依然存在 基于AOF+RDB数据回滚恢复 回滚数据的操作和存在数据中途开启AOF的操作几乎相关 误删数据的容灾恢复
83740编辑于 2022-04-06 - 来自专栏运维开发王义杰
Go: 并发编程中的错误恢复机制与代码持续执行分析
在现代软件开发领域，尤其是使用Go语言进行系统设计时，理解并发编程和错误处理是至关重要的。Go语言中的goroutine和recover机制提供了强大的并发控制和错误恢复功能。 与此相对的是recover，它是另一个内建函数，用于恢复panic造成的中断，防止整个程序崩溃。 结论 在并发编程中，正确处理错误和异常至关重要。虽然Go的panic和recover机制提供了强大的工具，但我们需要深入理解它们的工作原理和限制。 在设计系统时，应考虑错误恢复策略，确保系统的稳定性和可靠性。 在此案例中，虽然recover能够防止整个服务崩溃，但它并不会让goroutine从panic发生的地方继续执行。
45210编辑于 2024-01-19 - 来自专栏数据库新发现
Oracle数据恢复、数据库恢复、灾难恢复专题
备份恢复基础知识Cache-low rba 与 on-disk rba - 恢复笔记 Oracle的恢复从上一次成功的写出开始，也就是以Cache-Low RBA为起点，恢复至日志的最后成功记录，也就是以 的限制下，可以快速的执行数据恢复。 Oracle数据库恢复:解决ORA-600 2831错误 在回滚段8上存在一个需要恢复的事务，导致了异常，我不再管这个错误的具体含义，只是确认这个表空间可以清理掉，就开始向下进行成功恢复案例:解决字典表误 备份恢复基础知识 Cache-low rba 与 on-disk rba - 恢复笔记 Oracle的恢复从上一次成功的写出开始，也就是以Cache-Low RBA为起点，恢复至日志的最后成功记录， Oracle数据库恢复:解决ORA-600 2831错误 在回滚段8上存在一个需要恢复的事务，导致了异常，我不再管这个错误的具体含义，只是确认这个表空间可以清理掉，就开始向下进行 成功恢复案例:解决字典表误
5.9K30发布于 2018-09-05 - 来自专栏linux运维
备份恢复问题：备份文件恢复失败，数据无法恢复
排查恢复失败的原因在解决问题之前，需要明确恢复失败的具体原因。以下是一些常见原因及其排查方法：（1）备份文件损坏原因：传输中断、磁盘故障或未正确校验。 （3）恢复过程错误原因：恢复命令或工具使用不当。排查方法：确保使用的恢复工具与备份工具一致。检查恢复路径和权限是否正确。2. 优化备份生成过程确保备份文件本身是完整且可靠的，这是成功恢复的前提。 优化恢复过程确保恢复过程正确无误，避免人为操作失误。 （1）恢复文件系统备份# 示例：从 tar 文件恢复数据 tar -xzf /backup/full_backup_20250207.tar.gz -C /restore/directory（2）恢复数据库备份 /bin/bash # 恢复测试脚本 restore_test() { echo "开始恢复测试..."
3.2K10编辑于 2025-02-07 - 来自专栏数据和云
数据恢复：AMDU数据抽取恢复
今天我们通过一则真实的案例来认识oracle 自带工具AMDU，无需将磁盘组mount即可实现数据分析，轻松进行数据恢复 某日，我们收到了一则中国香港用户ASM破坏案例，请求数据恢复。 技术回放 对于这个案例，我们有多种手段可以进行恢复，只要ASM磁盘组完好，就可以很容易的从中提取数据，本案例我们使用了AMDU工具进行恢复。 有了文件分布信息，接下来的恢复就大大简化了。 AMDU文件恢复 获得了文件的分布信息之后，就可以使用amdu工具进行文件提取工作。 对于特定的文件，通过以下测试可以验证amdu的恢复过程和文件完好性： +DG_DATA/proda02/datafile/users.271.768047753' 通过amdu提取文件： [oracle 2015_02_22_02_02_09/DG_DATA_271.f 这个案例的幸运之处在于磁盘组未发生更为严重的损坏，数据文件和日志文件都是完好的，而Oracle的AMDU工具在这种情况下为我们提供了便利的恢复手段
4.3K60发布于 2018-03-06 - 来自专栏项目文章
数据库系统概论学习8：第1011章-数据恢复技术、并发控制
故障种类 恢复方式 恢复策略 什么是并发 多个事务同时进行
15510编辑于 2024-06-06 - 来自专栏Laoqi's Linux运维专列
innobackupex备份恢复+增量备份与恢复
performance_schema xtrabackup_checkpoints xtrabackup_logfile zhdy02 其实备份的文件+目录几乎是一样的，但是是不可以直接恢复使用的 03 backup]# mkdir -p /data/mysql [[email protected]03 backup]# chown -R mysql.mysql /data/mysql 2.2 恢复数据 512M；（因为这是虚拟机，所以只是测试，要是线上的服务器64G我们可以使用32G来恢复数据，这样速度会更快些） --apply-log:指定需要恢复的日志文件 如上我们只是初始化了一下； 2.3 现在进行恢复 ---- 四、增量备份的恢复 4.1 为了还原真实性，我模拟删除数据库，并且停掉mysql，利用咱们已经备份的数据去恢复它。 4.7 然后开始恢复！
13.4K100发布于 2018-05-09 - 来自专栏阿伟的个人博客
恢复空格
哦，不！你不小心把一个长篇文章中的空格、标点都删掉了，并且大写也弄成了小写。像句子”I reset the computer. It still didn’t boot!”已经变成了”iresetthecomputeritstilldidntboot”。在处理标点符号和大小写之前，你得先把它断成词语。当然了，你有一本厚厚的词典dictionary，不过，有些词没在词典里。假设文章用sentence表示，设计一个算法，把文章断开，要求未识别的字符最少，返回未识别的字符数。
7.4K20发布于 2020-08-05 - 来自专栏ops技术分享
ldap恢复
1.openldap备份恢复 12345678910111213 #在主节点上执行：slapcat -v -l openldap-backup.ldifcat > openldap-backup.synax openldap-backup.ldif | sed -f openldap-backup.synax > openldap-complete.ldiftar zcvf schema.tgz schema/ 2.在另一台机器上恢复
2.2K20发布于 2021-04-28 - 来自专栏用户1175783的专栏
# 故障恢复
read_only=1 1 2 通过sql命令（配合第一种方式使用） 该命令需要超级管理员才有权限执行，在自动切换主从时有用 set global read_only=1; 1 # 故障恢复 如果master宕机后恢复 对新的master节点加全库只读锁，阻止所有写入操作，并计下master节点当前得binlog信息，然后备份数据并恢复到宕机得节点中，恢复完成后让宕机得节点作为slave slave节点宕机后恢复 通常只需要重启slave节点就行，无需其它操作
1.1K20发布于 2020-05-09 - 来自专栏从ORACLE起航，领略精彩的IT技术。
Oracle Recovery 01 - 常规恢复之完全恢复
一、常规恢复之完全恢复：不丢失数据 1.1 单个数据文件丢失或损坏 1.2 所有数据文件丢失或损坏 1.3 参数文件丢失或损坏 1.4 参数文件，数据文件丢失或损坏 1.5 临时文件丢失或损坏 一、常规恢复之完全恢复 ：不丢失数据 Oracle 数据库常规恢复的几个概念： 常规恢复之完全恢复：不丢失数据。 可以通过RMAN备份完全恢复数据库。 示例：Oracle Recovery 01 - 常规恢复之完全恢复 常规恢复之不完全恢复：部分数据丢失。 一般是有控制文件或是在线重做日志文件丢失。 通过RMAN备份恢复，resetlogs会导致丢失数据。 恢复方法： 先按照1.3恢复参数文件，再根据实际情况选择1.1或1.2。 1.5 临时文件丢失或损坏 重启库之后自动重建临时文件并成功open数据库。
1.6K10发布于 2019-05-24 - 来自专栏linux运维
系统恢复问题：系统恢复失败，数据丢失
明确系统恢复需求在优化之前，需要明确以下需求：恢复目标：例如恢复操作系统、应用程序或数据。恢复范围：涉及的文件、目录或数据库。恢复时间目标 (RTO)：允许的最大恢复时间。 示例系统恢复需求清单：需求项描述恢复目标恢复操作系统 + 数据库恢复范围/etc、/var/www/html、MySQL 数据库RTO2 小时RPO1 小时2. 建立恢复流程通过标准化的恢复流程确保数据完整性。（1）恢复操作系统使用快照或镜像恢复操作系统。 # 示例：恢复 LVM 快照lvconvert --merge /dev/vg_name/snapshot_name （2）恢复配置文件从备份中恢复配置文件。 分析恢复日志通过日志分析定位恢复失败的原因。（1）查看恢复日志使用工具查看恢复过程中的日志。
1.6K10编辑于 2025-02-08 - 来自专栏全栈程序员必看
pycharm恢复初始设置_pycharm恢复初始设置
PyCharm 的 配置信息 是保存在 用户家目录下 的.PyCharmxxxx.x 目录下的，xxxx.x 表示当前使用的 PyCharm 的版本号 如果要恢复 PyCharm 的初始设置，可以按照以下步骤进行
1.7K30编辑于 2022-09-27 - 来自专栏李珣
Azure恢复服务-使用Windows Backup恢复文件
上一章我们使用Windows Server Backup把本地的文件备份到了Azure恢复服务中，下面我们将来介绍使用Windows Server Backup来恢复文件。 ? 接下来在Windows Server Backup中打开恢复数据服务，选择此服务器。 ? 选择恢复模式，这里选择浏览文件 ? 选择恢复的卷和恢复时间点，下一步。 ? 选择要恢复的文件。 ? 恢复目标，选择到原始位置，并使用恢复的版本覆盖现有版本。 ? 开始进行恢复。 ? 文件很小，很快就完成了恢复。 ? 回到文件夹，看到我们刚才删除到文件已经恢复回来了。 ?
1.6K20发布于 2019-03-14 - 来自专栏cloudskyme
并发，又是并发
对比串联执行和并发执行 ``` java? ： 循环次数 并发执行时间 串联执行时间 一百万 2ms 4ms 十万 2ms 2ms 一万 1ms 0ms 通过数据的对比我们可以看出。 在一万以下的循环次数时，串联的执行速度比并发的执行速度块。是因为线程上下文切换导致额外的开销。 死锁与活锁的区别，死锁与饥饿的区别？ 这种划分是使用并发度获得的，它是 ConcurrentHashMap 类构造函数的一个可选参数，默认值为 16，这样在多线程情况下就能避免争用。 同时加入了更多的辅助变量来提高并发度，具体内容还是查看源码吧。 volatile 变量和 atomic 变量有什么不同？
1.4K41发布于 2020-06-15 - 来自专栏用户5948733的专栏
手机删了短信怎么恢复？手机就能直接恢复
手机删了短信怎么恢复？我们的手机经常恢复收到很多的短信，虽然现在已经没有多少人会用短信来互动但是还是会收到短信。 手机删了短信怎么恢复？ 一：手机备份恢复 手机中都会有备份这样一个功能，有备份习惯的小伙伴会经常备份手机中的数据，当手机短信删了就可以在备份中将删除的短信找出并且进行恢复了。 在手机中找到备份与恢复的功能进入找到备份的数据，在数据中选择需要的短信进行恢复。 】找到需要的短信恢复。 手机删除短信怎么恢复？根据以上的方法就可以将删除的短信进行恢复了，选择一个正确的恢复方法可以快速恢复短信，不过还需养成备份习惯。
3.6K20发布于 2019-08-23
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号