如何有效地將數據從Elasticsearch索引（具有一個分片）移動到另一索引（具有5個分片）？

Question

我有一個Elasticsearch索引，它在單個分片的單個節點上包含大約5 GB的數據。 現在，我創建了另一個索引，該索引的設置與舊索引相同，但是number_of_shards為5而不是1。

我正在尋找最有效的方法來將數據從舊索引復制到新索引，而不會造成任何停機。

Answer 1

我建議為此使用Logstash 。 您可以使用以下配置。 確保替換源主機和目標主機，以及索引和類型名稱以匹配您的本地環境。

文件：reindex.conf

input {
  elasticsearch {
   hosts => "localhost:9200"       <---- your source host
   index => "my_source_index"
  }
}
filter {
 mutate {
  remove_field => [ "@version", "@timestamp" ]
 }
}
output {
 elasticsearch {
   host => "localhost"       <--- your target host
   port => 9200
   protocol => "http"
   manage_template => false
   index => "my_target_index"
   document_type => "my_type"
   workers => 5
 }
}

然后您可以使用

bin/logstash -f reindex.conf