GrafanaでLinuxサーバーの監視ダッシュボードを構築する方法｜Prometheus連携からアラート設定まで

この記事のポイント

・GrafanaはRHEL系・Ubuntu系ともにパッケージリポジトリからdnf/aptで1コマンドインストールできる
・Prometheusをデータソースに登録し、コミュニティダッシュボード（ID:1860）をインポートすると即可視化できる
・アラートルールはGrafana上のGUI操作だけで設定でき、メール通知チャンネルと組み合わせられる
・デフォルトのadminパスワードは初回ログイン後に必ず変更し、不要な外部アクセスを制限すること

# Grafana公式GPGキーを追加する
sudo wget -q -O /etc/pki/rpm-gpg/RPM-GPG-KEY-grafana \
  https://rpm.grafana.com/gpg.key

# yumリポジトリファイルを作成する
sudo tee /etc/yum.repos.d/grafana.repo <<'EOF'
[grafana]
name=grafana
baseurl=https://rpm.grafana.com
repo_gpgcheck=1
enabled=1
gpgcheck=1
gpgkey=https://rpm.grafana.com/gpg.key
sslverify=1
sslcacert=/etc/pki/tls/certs/ca-bundle.crt
EOF

# Grafanaをインストールする
sudo dnf install -y grafana

# インストール確認
grafana-server --version
# grafana v11.2.0 (commit: a1b2c3d, branch: main)

# 必要パッケージをインストールする
sudo apt-get install -y apt-transport-https software-properties-common wget

# Grafana公式GPGキーを追加する
sudo mkdir -p /etc/apt/keyrings/
wget -q -O - https://apt.grafana.com/gpg.key | \
  gpg --dearmor | sudo tee /etc/apt/keyrings/grafana.gpg > /dev/null

# リポジトリを追加する（Stable版）
echo "deb [signed-by=/etc/apt/keyrings/grafana.gpg] https://apt.grafana.com stable main" | \
  sudo tee /etc/apt/sources.list.d/grafana.list

# パッケージリストを更新してインストールする
sudo apt-get update
sudo apt-get install -y grafana

# インストール確認
grafana-server --version
# grafana v11.2.0 (commit: a1b2c3d, branch: main)

# Grafanaサービスを有効化して起動する
sudo systemctl daemon-reload
sudo systemctl enable --now grafana-server

# 起動状態を確認する
sudo systemctl status grafana-server
# grafana-server.service - Grafana instance
#   Loaded: loaded (/usr/lib/systemd/system/grafana-server.service; enabled; preset: disabled)
#   Active: active (running) since Mon 2026-07-06 09:10:32 JST; 5s ago
# Main PID: 12345 (grafana)

# ポート3000でLISTENしているか確認する
sudo ss -tlnp | grep 3000
# LISTEN 0 128 0.0.0.0:3000 0.0.0.0:* users:(("grafana",pid=12345,fd=7))

# RHEL系: firewalldでポート3000を開放する
sudo firewall-cmd --permanent --add-port=3000/tcp
sudo firewall-cmd --reload

# 開放確認
sudo firewall-cmd --list-ports
# 3000/tcp 9090/tcp 9100/tcp

# CPU使用率（1分間の平均、idle以外の割合）
100 - (avg by(instance) (rate(node_cpu_seconds_total{mode="idle"}[1m])) * 100)

# メモリ使用率（空き/全体 から算出）
(1 - (node_memory_MemAvailable_bytes / node_memory_MemTotal_bytes)) * 100

# ディスク空き容量（GB単位）
node_filesystem_avail_bytes{fstype!~"tmpfs|sysfs|proc"} / 1024 / 1024 / 1024

# ディスク使用率（パーティションごと）
(1 - node_filesystem_avail_bytes{fstype!~"tmpfs|sysfs|proc"} / node_filesystem_size_bytes{fstype!~"tmpfs|sysfs|proc"}) * 100

# ネットワーク受信バイト数（1分平均）
rate(node_network_receive_bytes_total[1m])

# ロードアベレージ（5分値）
node_load5

# ディスクI・O待ち時間（%util相当）
rate(node_disk_io_time_seconds_total[1m]) * 100

100 - (avg by(instance) (rate(node_cpu_seconds_total{mode="idle"}[5m])) * 100)

# /etc/grafana/grafana.ini の [smtp] セクションを編集する
sudo vi /etc/grafana/grafana.ini

# 以下を [smtp] セクションに設定する
[smtp]
enabled = true
host = smtp.example.com:587
user = grafana@example.com
# パスワードはシングルクォートで囲む（特殊文字対策）
password = 'your_smtp_password'
from_address = grafana@example.com
from_name = Grafana Alert

# 設定反映のためサービスを再起動する
sudo systemctl restart grafana-server

# grafana.dbのバックアップ（サービス停止なしでコピー）
sudo cp /var/lib/grafana/grafana.db \
  /var/lib/grafana/grafana.db.bak.$(date +%Y%m%d)

# バックアップ確認
ls -lh /var/lib/grafana/grafana.db*
# -rw-r--r--  1 grafana grafana 2.1M Jul  6 09:30 /var/lib/grafana/grafana.db
# -rw-r--r--  1 grafana grafana 2.1M Jul  6 09:30 /var/lib/grafana/grafana.db.bak.20260706

# /etc/grafana/grafana.ini の [server] セクション
[server]
http_port = 3000  # 変更後のポート番号に書き換える

# 変更後はサービス再起動とfirewalldの設定変更を忘れずに実施する
sudo systemctl restart grafana-server
sudo firewall-cmd --permanent --remove-port=3000/tcp
sudo firewall-cmd --permanent --add-port=新ポート番号/tcp
sudo firewall-cmd --reload

# エラー内容を確認する
sudo systemctl status grafana-server
sudo journalctl -u grafana-server -n 50

# ポート3000の使用状況を確認する
sudo ss -tlnp | grep 3000

# firewalldのポート開放状態を確認する
sudo firewall-cmd --list-ports

# SELinuxの拒否ログを確認する
sudo ausearch -m avc -ts recent | grep grafana

# SELinuxが原因かどうかを一時的にPermissiveモードで確認する（本番環境では要注意）
sudo setenforce 0
# アクセスできるようになればSELinuxが原因。適切なポリシーを設定してenforceに戻す
sudo setenforce 1

# Prometheusの起動状態を確認する
sudo systemctl status prometheus

# GrafanaサーバーからPrometheusに到達できるか確認する
curl -s http://localhost:9090/api/v1/status/config | head -3
# {"status":"success","data":{"yaml":"global:\n ...

# Node Exporterが正しく動作しているか確認する
curl -s http://localhost:9100/metrics | grep node_cpu | head -5