弹性搜索快照与弹性转储

Question

我有一个非常缓慢的互联网连接，并有一个服务器运行Elasticsearch。我正在寻找一个本地的，只读的，版本的弹性搜索指数与当地卡巴纳实例，因为我不需要的数据是实时的。我知道有三种方法可以做到这一点:使我的本地机器成为ES集群中的一个节点，获取快照并传输它，或者使用弹性转储和传输文件。我理解将本地作为节点添加的问题，但不理解快照和弹性转储之间的区别。快照和弹性转储有什么区别？每种方法的优点和缺点是什么？

Answer 1

弹性转储将简单地扫描远程ES集群中的一个索引，并将JSON数据转储到一个文件中，然后该文件可以重放以在相同的ES实例中重新生成索引，或者在其他ES实例(远程或本地)中重新生成索引。

弹性转储还可以将它从遥控器泵出的数据直接存储到本地实例中(而不是将数据存储到文件中)。

快照/还原是备份索引数据的正式方法。有不同的目标(文件系统、S3等)，但主要思想是执行第一次快照，然后所有后续快照都是增量式的，即快照进程只存储自上次运行以来更改的内容。

在您的情况下，您可以任意选择，但是如果您只想拥有生产数据的本地副本，那么使用弹性转储是非常简单的。

Answer 2

我们有时成功使用的另一个选项是使用奥托什来维护连接和打开远程弹性搜索节点之间的SSH隧道。

autossh -M 30010 -f user@remote.example.com -L 9200:localhost:9200 -N

根据您的安全策略和环境，这对于远程访问实时数据非常有效，即使连接性很差。