是否可以使用FSCrawler将文件内容设置为Elasticsearch中现有索引的永久_id

Question

我已经将数据摄取到现有的Elasticsearch索引中，并将_id作为数据库中的列名"mainid“值之一。现在我有了另一个表，因为我有两个列"mainid“和文件路径。我想使用fSCrawler将这些文件摄取到现有的Elasticsearch索引中，并且文件应该会摄取到相应的_id中。

Answer 1

FSCrawler根据文件名生成_id。如果您暂时想要提供自己的_id，则需要使用REST service。

它允许您provide the _id you want。像这样：

echo "This is my text" > test.txt
curl -F "file=@test.txt" -F "id=my-test" "http://127.0.0.1:8080/fscrawler/_upload"