CloudWatchを中心に構築するAWS運用監視の設計アーキテクチャ｜マルチアカウント対応

この記事のポイント

・aws運用監視はメトリクス収集・ログ管理・アラート設計の3レイヤーで設計する
・マルチアカウント構成では Cross-Account Observability で中央集約する
・Composite Alarmで複数メトリクスの複合条件アラートを実装できる
・ダッシュボードは中央監視アカウントにまとめてチームで共有できる

# CloudWatch Agentのインストール（Amazon Linux 2023 / RHEL 9系）
sudo dnf install -y amazon-cloudwatch-agent

# 設定ウィザードを起動する
sudo /opt/aws/amazon-cloudwatch-agent/bin/amazon-cloudwatch-agent-config-wizard

# /opt/aws/amazon-cloudwatch-agent/etc/amazon-cloudwatch-agent.json
{
  "metrics": {
    "namespace": "CWAgent",
    "metrics_collected": {
      "mem": {
        "measurement": ["mem_used_percent"],
        "metrics_collection_interval": 60
      },
      "disk": {
        "measurement": ["disk_used_percent"],
        "resources": ["/"],
        "metrics_collection_interval": 60
      }
    }
  }
}

# CloudWatch Agentを起動・自動起動設定
sudo systemctl enable --now amazon-cloudwatch-agent

# 動作確認
sudo systemctl status amazon-cloudwatch-agent

* amazon-cloudwatch-agent.service - Amazon CloudWatch Agent
     Loaded: loaded (/etc/systemd/system/amazon-cloudwatch-agent.service; enabled)
     Active: active (running) since ...

# CloudWatch Agentのログ設定（amazon-cloudwatch-agent.jsonに追加）
{
  "logs": {
    "logs_collected": {
      "files": {
        "collect_list": [
          {
            "file_path": "/var/log/messages",
            "log_group_name": "/ec2/system/messages",
            "log_stream_name": "{instance_id}",
            "retention_in_days": 30
          },
          {
            "file_path": "/var/log/secure",
            "log_group_name": "/ec2/system/secure",
            "log_stream_name": "{instance_id}",
            "retention_in_days": 90
          }
        ]
      }
    }
  }
}

# Logs Insightsのクエリ例（SSHログイン失敗）
fields @timestamp, @message
| filter @logStream like /secure/
| filter @message like /Failed password/
| sort @timestamp desc
| limit 100

# CPU使用率80%超過のアラームを作成する
aws cloudwatch put-metric-alarm \
  --alarm-name "EC2-High-CPU-web01" \
  --alarm-description "CPU usage exceeded 80%" \
  --metric-name CPUUtilization \
  --namespace AWS/EC2 \
  --statistic Average \
  --period 300 \
  --threshold 80 \
  --comparison-operator GreaterThanOrEqualToThreshold \
  --evaluation-periods 2 \
  --dimensions Name=InstanceId,Value=i-0123456789abcdef0 \
  --alarm-actions arn:aws:sns:ap-northeast-1:123456789012:ops-alert \
  --ok-actions arn:aws:sns:ap-northeast-1:123456789012:ops-alert

# 監視アカウント側：他のアカウントからのデータ受信を許可する
aws cloudwatch put-metric-stream \
  --name monitoring-account-link \
  --include-linked-accounts-metrics

# ソースアカウント側：監視アカウントへのリンクを作成する
aws oam create-link \
  --label-template "$AccountEmail" \
  --resource-types "AWS::CloudWatch::Metric" "AWS::Logs::LogGroup" \
  --sink-identifier "arn:aws:oam:ap-northeast-1:MONITORING_ACCOUNT_ID:sink/SINK_ID"

# クロスアカウントのメトリクスを含むダッシュボードを作成する例
aws cloudwatch put-dashboard \
  --dashboard-name "MultiAccount-Overview" \
  --dashboard-body '{
    "widgets": [
      {
        "type": "metric",
        "properties": {
          "metrics": [
            ["AWS/EC2", "CPUUtilization",
             "InstanceId", "i-0123456789abcdef0",
             {"accountId": "SOURCE_ACCOUNT_ID_1"}],
            ["AWS/EC2", "CPUUtilization",
             "InstanceId", "i-abcdef0123456789",
             {"accountId": "SOURCE_ACCOUNT_ID_2"}]
          ],
          "period": 300,
          "title": "マルチアカウント CPU使用率"
        }
      }
    ]
  }'

# 個別アラームを先に作成する
# （CPU高負荷アラーム）
aws cloudwatch put-metric-alarm \
  --alarm-name "web01-high-cpu" \
  --metric-name CPUUtilization \
  --namespace AWS/EC2 \
  --statistic Average \
  --period 300 \
  --threshold 80 \
  --comparison-operator GreaterThanOrEqualToThreshold \
  --evaluation-periods 2 \
  --dimensions Name=InstanceId,Value=i-0123456789abcdef0

# （メモリ高使用率アラーム）
aws cloudwatch put-metric-alarm \
  --alarm-name "web01-high-memory" \
  --metric-name mem_used_percent \
  --namespace CWAgent \
  --statistic Average \
  --period 300 \
  --threshold 90 \
  --comparison-operator GreaterThanOrEqualToThreshold \
  --evaluation-periods 2 \
  --dimensions Name=InstanceId,Value=i-0123456789abcdef0

# 両方が ALARM 状態のときだけ通知する Composite Alarm を作成する
aws cloudwatch put-composite-alarm \
  --alarm-name "web01-critical-combined" \
  --alarm-description "CPU 80%超かつメモリ 90%超" \
  --alarm-rule 'ALARM("web01-high-cpu") AND ALARM("web01-high-memory")' \
  --alarm-actions arn:aws:sns:ap-northeast-1:123456789012:ops-critical

# メトリクスが届いているか確認する
aws cloudwatch get-metric-statistics \
  --namespace CWAgent \
  --metric-name mem_used_percent \
  --dimensions Name=InstanceId,Value=i-0123456789abcdef0 \
  --start-time $(date -u -d '1 hour ago' +%Y-%m-%dT%H:%M:%SZ) \
  --end-time $(date -u +%Y-%m-%dT%H:%M:%SZ) \
  --period 300 \
  --statistics Average

{
    "Datapoints": [
        {
            "Timestamp": "2026-11-08T06:00:00Z",
            "Average": 42.3,
            "Unit": "Percent"
        }
    ],
    "Label": "mem_used_percent"
}

# ソースアカウント側でリンクの状態を確認する
aws oam list-links

# 出力例
{
    "Items": [
        {
            "Arn": "arn:aws:oam:ap-northeast-1:SOURCE_ID:link/LINK_ID",
            "Id": "LINK_ID",
            "Label": "source-account@example.com",
            "ResourceTypes": ["AWS::CloudWatch::Metric"],
            "SinkArn": "arn:aws:oam:ap-northeast-1:MONITORING_ID:sink/SINK_ID"
        }
    ]
}

# SNS Topicのサブスクリプション状態を確認する
aws sns list-subscriptions-by-topic \
  --topic-arn arn:aws:sns:ap-northeast-1:123456789012:ops-alert

{
    "Subscriptions": [
        {
            "Protocol": "email",
            "Endpoint": "ops-team@example.com",
            "SubscriptionArn": "arn:aws:sns:ap-northeast-1:...",
            "TopicArn": "arn:aws:sns:ap-northeast-1:...",
            "Owner": "123456789012"
        }
    ]
}