亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 服務器 > Web服務器 > 正文

Docker構建ELK Docker集群日志收集系統

2024-09-01 13:49:01
字體:
來源:轉載
供稿:網友

當我們搭建好Docker集群后就要解決如何收集日志的問題 ELK就提供了一套完整的解決方案 本文主要介紹使用Docker搭建ELK 收集Docker集群的日志

ELK簡介

ELK由ElasticSearch、LogstashKiabana三個開源工具組成

Elasticsearch是個開源分布式搜索引擎,它的特點有:分布式,零配置,自動發現,索引自動分片,索引副本機制,restful風格接口,多數據源,自動搜索負載等。

Logstash是一個完全開源的工具,他可以對你的日志進行收集、過濾,并將其存儲供以后使用

Kibana 也是一個開源和免費的工具,它Kibana可以為 Logstash 和 ElasticSearch 提供的日志分析友好的 Web 界面,可以幫助您匯總、分析和搜索重要數據日志。

使用Docker搭建ELK平臺

首先我們編輯一下 logstash的配置文件 logstash.conf

input {   udp {  port => 5000  type => json }}filter {  json {   source => "message"  }}output {  elasticsearch {       hosts => "elasticsearch:9200" #將logstash的輸出到 elasticsearch 這里改成你們自己的host   }}

然后我們還需要需要一下Kibana 的啟動方式

編寫啟動腳本 等待elasticserach 運行成功后啟動

#!/usr/bin/env bash# Wait for the Elasticsearch container to be ready before starting Kibana.echo "Stalling for Elasticsearch" while true; do  nc -q 1 elasticsearch 9200 2>/dev/null && breakdoneecho "Starting Kibana"exec kibana

修改Dockerfile 生成自定義的Kibana鏡像

FROM kibana:latestRUN apt-get update && apt-get install -y netcatCOPY entrypoint.sh /tmp/entrypoint.shRUN chmod +x /tmp/entrypoint.shRUN kibana plugin --install elastic/senseCMD ["/tmp/entrypoint.sh"]

同時也可以修改一下Kibana 的配置文件 選擇需要的插件

 

# Kibana is served by a back end server. This controls which port to use.port: 5601# The host to bind the server to.host: "0.0.0.0"# The Elasticsearch instance to use for all your queries.elasticsearch_url: "http://elasticsearch:9200"# preserve_elasticsearch_host true will send the hostname specified in `elasticsearch`. If you set it to false,# then the host you use to connect to *this* Kibana instance will be sent.elasticsearch_preserve_host: true# Kibana uses an index in Elasticsearch to store saved searches, visualizations# and dashboards. It will create a new index if it doesn't already exist.kibana_index: ".kibana"# If your Elasticsearch is protected with basic auth, this is the user credentials# used by the Kibana server to perform maintence on the kibana_index at statup. Your Kibana# users will still need to authenticate with Elasticsearch (which is proxied thorugh# the Kibana server)# kibana_elasticsearch_username: user# kibana_elasticsearch_password: pass# If your Elasticsearch requires client certificate and key# kibana_elasticsearch_client_crt: /path/to/your/client.crt# kibana_elasticsearch_client_key: /path/to/your/client.key# If you need to provide a CA certificate for your Elasticsarech instance, put# the path of the pem file here.# ca: /path/to/your/CA.pem# The default application to load.default_app_id: "discover"# Time in milliseconds to wait for elasticsearch to respond to pings, defaults to# request_timeout setting# ping_timeout: 1500# Time in milliseconds to wait for responses from the back end or elasticsearch.# This must be > 0request_timeout: 300000# Time in milliseconds for Elasticsearch to wait for responses from shards.# Set to 0 to disable.shard_timeout: 0# Time in milliseconds to wait for Elasticsearch at Kibana startup before retrying# startup_timeout: 5000# Set to false to have a complete disregard for the validity of the SSL# certificate.verify_ssl: true# SSL for outgoing requests from the Kibana Server (PEM formatted)# ssl_key_file: /path/to/your/server.key# ssl_cert_file: /path/to/your/server.crt# Set the path to where you would like the process id file to be created.# pid_file: /var/run/kibana.pid# If you would like to send the log output to a file you can set the path below.# This will also turn off the STDOUT log output.log_file: ./kibana.log# Plugins that are included in the build, and no longer found in the plugins/ folderbundled_plugin_ids: - plugins/dashboard/index - plugins/discover/index - plugins/doc/index - plugins/kibana/index - plugins/markdown_vis/index - plugins/metric_vis/index - plugins/settings/index - plugins/table_vis/index - plugins/vis_types/index - plugins/visualize/index

好了下面我們編寫一下 Docker-compose.yml 方便構建

端口之類的可以根據自己的需求修改 配置文件的路徑根據你的目錄修改一下 整體系統配置要求較高 請選擇配置好點的機器

elasticsearch: image: elasticsearch:latest command: elasticsearch -Des.network.host=0.0.0.0 ports:  - "9200:9200"  - "9300:9300"logstash: image: logstash:latest command: logstash -f /etc/logstash/conf.d/logstash.conf volumes:  - ./logstash/config:/etc/logstash/conf.d ports:  - "5001:5000/udp" links:  - elasticsearchkibana: build: kibana/ volumes:  - ./kibana/config/:/opt/kibana/config/ ports:  - "5601:5601" links:  - elasticsearch
#好了命令 就可以直接啟動ELK了 docker-compose up -d

訪問之前的設置的kibanna的5601端口就可以看到是否啟動成功了

使用logspout收集Docker日志

下一步我們要使用logspout對Docker日志進行收集 我們根據我們的需求修改一下logspout鏡像

編寫配置文件 modules.go

package mainimport (  _ "github.com/looplab/logspout-logstash"  _ "github.com/gliderlabs/logspout/transports/udp")

編寫Dockerfile

FROM gliderlabs/logspout:latestCOPY ./modules.go /src/modules.go

重新構建鏡像后 在各個節點運行即可

 docker run -d --name="logspout" --volume=/var/run/docker.sock:/var/run/docker.sock /         jayqqaa12/logspout logstash://你的logstash地址

現在打開Kibana 就可以看到收集到的 docker日志了

注意Docker容器應該選擇以console輸出 這樣才能采集到

Docker,ELK,集群日志

好了我們的Docker集群下的ELK 日志收集系統就部署完成了

如果是大型集群還需要添加logstash 和elasticsearch 集群 這個我們下回分解。

以上就是本文的全部內容,希望對大家的學習有所幫助,也希望大家多多支持VEVB武林網。


發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb
欧美一性一乱一交一视频| 日韩免费高清在线观看| 欧美高清自拍一区| 日韩电影中文字幕一区| 日韩美女毛茸茸| 亚洲欧洲一区二区三区久久| 中文字幕av一区二区三区谷原希美| 欧美亚洲成人xxx| 亚洲精品免费av| 日韩电影中文字幕av| 久久亚洲精品毛片| 久久全球大尺度高清视频| 国产日韩视频在线观看| 国产精品海角社区在线观看| 国产精品视频免费观看www| 日韩在线www| 69影院欧美专区视频| 国产亚洲精品日韩| 日韩精品在线电影| 一本色道久久综合狠狠躁篇怎么玩| 久久国产精品久久国产精品| 日韩美女免费视频| 欧美老女人性视频| 成人女保姆的销魂服务| 一区二区三区回区在观看免费视频| 久久久久999| 国产精品久久久久久久久久免费| 日韩一区二区三区国产| 国产精品成人av性教育| 日韩电影中文字幕av| 日本一区二区在线免费播放| 97久久超碰福利国产精品…| 精品亚洲一区二区三区在线播放| 国产视频精品va久久久久久| 国产精品老女人视频| 日韩精品免费电影| 亚洲色图日韩av| 日韩av观看网址| 国产伦精品一区二区三区精品视频| 亚洲精品欧美一区二区三区| 亚洲欧洲高清在线| 欧美激情亚洲精品| 啊v视频在线一区二区三区| 精品久久中文字幕| 中文字幕欧美精品日韩中文字幕| 欧美性精品220| 97在线精品国自产拍中文| 国产成一区二区| 国产精品久久久久999| 日本一区二区在线免费播放| 欧美成人亚洲成人日韩成人| 日韩欧美大尺度| 亚洲综合在线做性| 亚洲一区美女视频在线观看免费| 成人做爰www免费看视频网站| 亚洲日韩欧美视频| 成人免费自拍视频| 久久精品成人一区二区三区| 欧美日韩美女在线观看| 综合国产在线视频| 成人精品久久久| 日本精品视频在线观看| 日韩精品日韩在线观看| 久久久久久尹人网香蕉| 国产+成+人+亚洲欧洲| 亚洲国产精品大全| 久久这里只有精品视频首页| 精品亚洲一区二区三区| 国产精品劲爆视频| 日韩电影大片中文字幕| 欧美伦理91i| 国内精品美女av在线播放| 日韩高清av一区二区三区| 韩国美女主播一区| 亚洲在线视频福利| 国产精品视频自在线| 国产精品极品美女在线观看免费| 亚洲欧美激情一区| 日本中文字幕成人| 欧美性xxxx极品hd满灌| 国产精品成人一区二区| 精品久久久久久亚洲国产300| 欧洲一区二区视频| 国产精品小说在线| 国产精品人成电影在线观看| 欧美日韩在线看| 成人羞羞国产免费| 亚洲激情中文字幕| 欧美日韩亚洲一区二区| 久久久成人精品视频| 国产亚洲精品久久久久久牛牛| 日韩在线观看免费高清完整版| 国产有码在线一区二区视频| 狠狠躁18三区二区一区| 欧美激情aaaa| 欧洲亚洲女同hd| 日韩国产精品视频| 成人亚洲激情网| 亚洲香蕉av在线一区二区三区| www.xxxx欧美| 国产盗摄xxxx视频xxx69| 91探花福利精品国产自产在线| 久久资源免费视频| 国产91久久婷婷一区二区| 亚洲第一区中文字幕| 高清欧美性猛交xxxx| 亚洲精品电影久久久| 北条麻妃99精品青青久久| 欧美性视频精品| 亚洲xxx视频| 国产精品福利片| 狠狠色狠狠色综合日日五| 国产三级精品网站| 欧美精品午夜视频| 国产精品久久久久久久9999| 96精品久久久久中文字幕| 国产日韩欧美在线看| 国产精品入口免费视| 中文字幕自拍vr一区二区三区| 性欧美长视频免费观看不卡| 日韩高清电影免费观看完整版| 亚洲免费av电影| 久久夜色精品国产| 色悠久久久久综合先锋影音下载| 国产精品日韩在线| 伊人久久五月天| 91久久精品久久国产性色也91| 最新国产成人av网站网址麻豆| 国内精品400部情侣激情| 日本不卡免费高清视频| 亚洲va久久久噜噜噜久久天堂| 国产成人av在线播放| 亚洲天堂2020| www.日韩系列| 欧美激情第一页xxx| 亚洲永久免费观看| 国产日韩精品综合网站| 中文字幕视频在线免费欧美日韩综合在线看| 精品人伦一区二区三区蜜桃网站| 中文字幕自拍vr一区二区三区| 久久久久久久999| 久久资源免费视频| 日韩免费在线播放| 亚洲欧美制服第一页| 91chinesevideo永久地址| 国产亚洲在线播放| 77777少妇光屁股久久一区| 91精品国产综合久久久久久久久| 91性高湖久久久久久久久_久久99| 亚洲第一精品福利| 91在线视频免费| 九九热精品在线| 国产成人一区三区| 亚洲激情视频网站| 欧美激情免费观看| 欧美疯狂xxxx大交乱88av| 欧美大肥婆大肥bbbbb| 欧美在线精品免播放器视频| 性日韩欧美在线视频| 国产亚洲欧美另类中文| 精品二区三区线观看| 精品久久久一区二区| 精品国产网站地址| 欧美性xxxx在线播放|