0x0 学習リソース#
0x1 Prometheus のインストールと設定#
Docker Compose 方式インストール#
version: '3.3'
services:
prometheus-server:
# https://github.com/bitnami/bitnami-docker-prometheus
image: bitnami/prometheus:2.23.0
container_name: prometheus-server
volumes:
# https://prometheus.io/docs/prometheus/latest/configuration/configuration/
- /etc/prometheus/prometheus.yml:/opt/bitnami/prometheus/conf/prometheus.yml
- prometheus_data:/opt/bitnami/prometheus/data
command:
- "--config.file=/opt/bitnami/prometheus/conf/prometheus.yml"
- "--storage.tsdb.path=/opt/bitnami/prometheus/data"
- "--web.console.libraries=/opt/bitnami/prometheus/conf/console_libraries"
- "--web.console.templates=/opt/bitnami/prometheus/conf/consoles"
# https://www.prometheus.io/docs/guides/basic-auth/
- --web.external-url=http://localhost:80/prometheus
- --web.route-prefix=/
ports:
- '9090:9090'
logging:
driver: json-file
options:
max-size: "200k"
max-file: "10"
restart: unless-stop
volumes:
prometheus_data:
リバースプロキシ設定#
Nginx#
# https://www.prometheus.io/docs/guides/basic-auth/
# https://github.com/prometheus-community/prometheus-playground/tree/master/nginx
location /prometheus {
proxy_pass http://127.0.0.1:9090/;
}
Exporters と統合#
Chrome Metrics シンタックスハイライトプラグイン
fhemberger/prometheus-formatter
参考資料#
- https://www.qikqiak.com/post/blackbox-exporter-on-prometheus/
- https://www.qikqiak.com/post/prometheus-book/
0x2 Grafana のインストールと設定#
Docker Compose 方式インストール#
version: '3.3'
services:
grafana-server:
# https://github.com/bitnami/bitnami-docker-grafana
image: bitnami/grafana:7.3.4
container_name: grafana-server
environment:
# https://grafana.com/docs/grafana/latest/administration/configuration/
- 'GF_SECURITY_ADMIN_USER=admin'
- 'GF_SECURITY_ADMIN_PASSWORD=admin_password'
# https://grafana.com/tutorials/run-grafana-behind-a-proxy/
- 'GF_SERVER_HTTP_PORT=8848'
- 'GF_SERVER_ROOT_URL=%(protocol)s://%(domain)s:%(http_port)s/grafana/'
- 'GF_SERVER_SERVE_FROM_SUB_PATH=true'
volumes:
- grafana_data:/opt/bitnami/grafana/data
ports:
- '8848:8848'
logging:
driver: json-file
options:
max-size: "200k"
max-file: "10"
restart: unless-stop
volumes:
grafana_data:
リバースプロキシ設定#
Nginx#
# https://grafana.com/tutorials/run-grafana-behind-a-proxy/
location /grafana/ {
proxy_pass http://127.0.0.1:8848/;
}
参考資料#
0x3 コンテナ間ネットワーク#
- 外部コンテナスイッチを作成
docker network create homelab_net
- 外部コンテナスイッチに参加
services:
whoami:
...
networks:
- homelab_net
networks:
homelab_net:
external: true
0x4 すべてのものを監視可能に#
おすすめの Grafana 監視テンプレート#
Grafana Dashboards - Grafana 用のダッシュボードを発見し、共有します。
Docker コンテナ監視：cAdvisor#
- Google のオープンソース cAdvisor コンテナ監視を使用
- リアルタイムデータ監視のみを行い、監視データは保存せず、Prometheus と組み合わせると効果的
- 参考チュートリアル
VERSION=v0.36.0 # https://github.com/google/cadvisor/releases から最新のリリースバージョンを使用
sudo docker run \
--volume=/:/rootfs:ro \
--volume=/var/run:/var/run:ro \
--volume=/sys:/sys:ro \
--volume=/var/lib/docker/:/var/lib/docker:ro \
--volume=/dev/disk/:/dev/disk:ro \
--publish=8080:8080 \
--detach=true \
--name=cadvisor \
--privileged \
--device=/dev/kmsg \
gcr.io/cadvisor/cadvisor:$VERSION
*NIX システム監視：Node Exporter#
docker run -d \
--net="host" \
--pid="host" \
-v "/:/host:ro,rslave" \
quay.io/prometheus/node-exporter \
--path.rootfs=/host
node-exporter:
image: quay.io/prometheus/node-exporter
restart: always
network_mode: "host"
pid: "host"
ports:
- '9100:9100'
command:
- --path.rootfs=/host
volumes:
- "/:/host:ro,rslave"
ネットワーク探査：Blackbox Exporter#
docker run --rm -d -p 9115:9115 --name blackbox_exporter -v `pwd`:/config prom/blackbox-exporter:master --config.file=/config/blackbox.yml
Nginx 監視：Nginx Prometheus Exporter#
# nginx.conf
location = /metrics {
stub_status;
}
docker run -p 9113:9113 nginx/nginx-prometheus-exporter:0.8.0 -nginx.scrape-uri http://<nginx>:8080/stub_status