如何在Docker容器中安裝Logstash并連接Elasticsearch服務器？

1.拉取Logstash鏡像(注意與ES版本保持一致)

docker pull logstash:7.5.1

2.啟動容器

docker run --name logstash -d -p 5044:5044 --net esnet 8b94897b4254

命令中的--net設置的網絡要和ES、kibana保持一致

3.修改Logstash配置文件

該配置文件是config文件夾下的logstash.yml

// 0.0.0.0：允許任何IP訪問
http.host: "0.0.0.0"
// 配置elasticsearch集群地址
xpack.monitoring.elasticsearch.hosts: [ "http://192.168.172.131:9200","http://192.168.172.129:9200","http://192.168.172.128:9200" ]
// 允許監控
xpack.monitoring.enabled: true
// 啟動時讀取配置文件指定
path.config: /usr/share/logstash/config/logstash.conf
// 指定的該文件可以配置Logstash讀取一些文件導入ES

4.logstash.conf配置

# Sample Logstash configuration for creating a simple
# Beats -> Logstash -> Elasticsearch pipeline.

input {
  //這塊端口可以不配，因為默認就是5044端口
  beats {
    port => 5044
  }
}

output {
  elasticsearch {
    // 配置成ES節點，集群則可以配置所有節點
    hosts => ["http://localhost:9200"]
    // 可以自定義
    index => "%{[@metadata][beat]}-%{[@metadata][version]}-%{+YYYY.MM.dd}"
    #user => "elastic"
    #password => "changeme"
  }
}

如果在logstash啟動的時候要導入文檔

配置如下：

input {
  file {
    path => "/usr/share/logstash/bin/file.csv"
    start_position => "beginning"
    sincedb_path => "/dev/null"
  }
}

`````
output {
   elasticsearch {
     hosts => "http://localhost:9200"
     index => "file"
     document_id => "%{id}"
   }
  stdout {}
}

當然，7.X版本默認只有一個主分片和一個副分片，如果我們想要指定多個分片，那么需要在啟動logstash的時候預先創建好索引，并設置好分片分配

PUT /file
{
  "settings": {
    "number_of_shards": 3,
    "number_of_replicas": 1
  }
}