while readコマンドでシェルスクリプトのファイルを1行ずつ処理する方法｜IFS設定とCSV・ログ解析の実践例も

この記事のポイント

・ while read line でファイルを1行ずつ確実に処理できる
・ IFS=","で区切り文字を変えればCSV・TSVにも対応できる
・ while readはfor+catより安全で空白・改行を壊さない
・ 末尾改行なし・バックスラッシュ・末尾スペースに注意が必要

# 基本構文
while read line; do
    echo "$line"
done < /path/to/file.txt

# テスト用ファイルを作成する
$ cat /tmp/servers.txt
web01.example.com
web02.example.com
db01.example.com

# while readで1行ずつ処理する
$ while read line; do
>     echo "接続先: $line"
> done < /tmp/servers.txt
接続先: web01.example.com
接続先: web02.example.com
接続先: db01.example.com

# -r オプション: バックスラッシュを文字として扱う（展開しない）
while read -r line; do
    echo "$line"
done < file.txt

# テスト用ファイル（ユーザー名とIPアドレスの対応表）
$ cat /tmp/user-ip.txt
alice 192.168.1.10
bob   192.168.1.20
carol 192.168.1.30

# 変数を2つ指定して列ごとに受け取る
$ while read -r username ipaddr; do
>     echo "ユーザー: $username, IP: $ipaddr"
> done < /tmp/user-ip.txt
ユーザー: alice, IP: 192.168.1.10
ユーザー: bob, IP: 192.168.1.20
ユーザー: carol, IP: 192.168.1.30

# CSVファイルの例
$ cat /tmp/users.csv
alice,30,東京
bob,25,大阪
carol,35,名古屋

# IFS="," を設定してCSVを処理する
$ while IFS="," read -r name age city; do
>     echo "名前:$name  年齢:$age  都市:$city"
> done < /tmp/users.csv
名前:alice  年齢:30  都市:東京
名前:bob  年齢:25  都市:大阪
名前:carol  年齢:35  都市:名古屋

# TSVファイルを処理する（IFSにタブを指定）
while IFS=$'\t' read -r col1 col2 col3; do
    echo "$col1 / $col2 / $col3"
done < /tmp/data.tsv

#!/bin/bash
# server-check.sh: サーバー一覧に接続してdiskを確認する

SERVERS="/etc/server-list.txt"

while read -r server; do
    echo "=== $server ==="
    ssh -n -o ConnectTimeout=5 "$server" "df -h /"
done < "$SERVERS"

#!/bin/bash
# log-count.sh: /var/log/secure からSSH失敗ログをIPごとに集計する

declare -A fail_count

while read -r line; do
    if echo "$line" | grep -q "Failed password"; then
        # IPアドレスを抽出する
        ip=$(echo "$line" | awk '{print $NF}')
        ((fail_count["$ip"]++))
    fi
done < /var/log/secure

# 集計結果を表示する
echo "--- SSH失敗 IPアドレス集計 ---"
for ip in "${!fail_count[@]}"; do
    echo "${fail_count[$ip]}回 $ip"
done | sort -rn

--- SSH失敗 IPアドレス集計 ---
47回 203.0.113.45
23回 198.51.100.12
8回  192.0.2.88

#!/bin/bash
# create-users.sh: CSVからユーザーを一括作成する

# フォーマット: username,uid,group,comment
while IFS="," read -r username uid group comment; do
    # ヘッダー行をスキップする
    [[ "$username" == "username" ]] && continue

    useradd -u "$uid" -g "$group" -c "$comment" "$username"
    echo "作成完了: $username (uid=$uid)"
done < /tmp/new-users.csv

# パイプ接続（変数がサブシェル内で消える問題あり）
ps aux | grep httpd | grep -v grep | while read -r user pid cpu mem rest; do
    echo "PID:$pid CPU:$cpu% MEM:$mem% USER:$user"
done

# プロセス置換を使う書き方（サブシェル問題を回避する）
while read -r user pid cpu mem rest; do
    echo "PID:$pid CPU:$cpu% MEM:$mem% USER:$user"
done < <(ps aux | grep httpd | grep -v grep)

# 末尾改行なしのファイルでも確実に処理する書き方
while read -r line || [[ -n "$line" ]]; do
    echo "$line"
done < file.txt

# IFSを空にして行頭・行末のスペースを保持する
while IFS= read -r line; do
    echo "$line"
done < file.txt

# 解決策1: sshに -n オプションを付けてstdinを/dev/nullにする
while read -r server; do
    ssh -n "$server" "uptime"
done < servers.txt

# 解決策2: ファイルディスクリプタ3番を使ってstdinと分離する
exec 3< servers.txt
while read -r server <&3; do
    ssh "$server" "uptime"
done
exec 3<&-

# NGな書き方（-rなし）
while read line; do
    echo "$line"
done < file.txt

# OKな書き方（-r付き）
while read -r line; do
    echo "$line"
done < file.txt