xargsコマンドで標準入力からコマンドを一括実行する方法｜findとの組み合わせや並列処理も

この記事のポイント

・xargs は標準入力を引数に変換してコマンドを一括実行する
・find -print0 | xargs -0 でスペース入りファイルも安全に処理
・-P オプションで複数プロセスの並列実行ができる
・-I {} で引数の挿入位置を自由に指定できる

# パイプだけでは rm にファイル名を渡せない（エラーになる）
# echo "test.txt" | rm

# xargs を経由すれば rm の引数としてファイル名が渡される
# echo "test.txt" | xargs rm

# 改行区切りのデータを1行にまとめて出力する
# echo -e "aaa\nbbb\nccc" | xargs
aaa bbb ccc

# ファイル一覧を ls -l で詳細表示する
# echo "file1.txt file2.txt file3.txt" | xargs ls -l
-rw-r--r-- 1 root root 1024 Apr 14 10:00 file1.txt
-rw-r--r-- 1 root root 2048 Apr 14 10:00 file2.txt
-rw-r--r-- 1 root root  512 Apr 14 10:00 file3.txt

# 1つずつ引数を渡して echo を実行する
# echo "aaa bbb ccc" | xargs -n 1 echo
aaa
bbb
ccc

# 2つずつ渡す場合
# echo "aaa bbb ccc ddd" | xargs -n 2 echo
aaa bbb
ccc ddd

# /var/log 配下の .log ファイルをすべて表示する
# find /var/log -name "*.log" -type f | xargs ls -lh
-rw-r--r-- 1 root root 245K Apr 14 09:00 /var/log/messages
-rw-r--r-- 1 root root  12K Apr 14 09:00 /var/log/secure
-rw-r--r-- 1 root root 8.3K Apr 14 09:00 /var/log/cron

# find -exec は1ファイルごとにコマンドを起動する（プロセス生成コストが高い）
# find /tmp -name "*.tmp" -exec rm {} \;

# xargs はまとめて引数を渡す（プロセス生成が少なく高速）
# find /tmp -name "*.tmp" | xargs rm

# NG: スペース入りファイル名が分割されてエラーになる
# find . -name "*.txt" | xargs rm
rm: cannot remove 'my': No such file or directory
rm: cannot remove 'document.txt': No such file or directory

# OK: -print0 と -0 でヌル文字区切りにすれば安全
# find . -name "*.txt" -print0 | xargs -0 rm

# 各ファイルを .bak 付きでコピーする
# find . -name "*.conf" -print0 | xargs -0 -I {} cp {} {}.bak

# 結果を確認する
# ls *.conf*
httpd.conf  httpd.conf.bak  nginx.conf  nginx.conf.bak

# /etc 配下の .conf ファイルを /backup/etc/ に一括コピーする
# find /etc -name "*.conf" -type f -print0 | xargs -0 -I {} cp {} /backup/etc/

# コピーされたファイル数を確認する
# ls /backup/etc/ | wc -l
47

# 画像ファイルを4プロセスで並列圧縮する
# find /var/www/images -name "*.png" -print0 | xargs -0 -n 1 -P 4 gzip

# サーバーのCPUコア数を確認して、コア数と同じ並列度にするのが目安
# nproc
4

# 逐次処理（1プロセス）
# time find /data -name "*.csv" -print0 | xargs -0 -n 1 gzip
real    1m23.456s

# 並列処理（4プロセス）
# time find /data -name "*.csv" -print0 | xargs -0 -n 1 -P 4 gzip
real    0m22.123s

# 30日以上前のログファイルを削除する
# find /var/log -name "*.log" -mtime +30 -type f -print0 | xargs -0 rm -v
removed '/var/log/app/access-20260315.log'
removed '/var/log/app/error-20260312.log'

# /etc 配下の .conf ファイルから "Listen" を含む行を検索する
# find /etc -name "*.conf" -type f -print0 | xargs -0 grep -l "Listen"
/etc/httpd/conf/httpd.conf
/etc/ssh/sshd_config

# ディレクトリは755、ファイルは644に一括変更する
# find /var/www/html -type d -print0 | xargs -0 chmod 755
# find /var/www/html -type f -print0 | xargs -0 chmod 644

# packages.txt に記載されたパッケージを一括インストールする
# cat packages.txt
httpd
php
mariadb-server
postfix

# cat packages.txt | xargs dnf install -y

# NG: ファイル数が多すぎてエラーになる
# rm /tmp/cache/*
-bash: /bin/rm: Argument list too long

# OK: xargs で分割して削除する
# find /tmp/cache -type f -print0 | xargs -0 rm

# 現在のシステムの引数長上限を確認するコマンド
# getconf ARG_MAX
2097152

# NG: シングルクォート入りのファイル名でエラー
# echo "it's_a_file.txt" | xargs rm
xargs: unmatched single quote; ...

# OK: -0 を使えばクォートの問題を回避できる
# echo -ne "it's_a_file.txt\0" | xargs -0 rm

# 推奨される書き方（-0 を先に指定する）
# find . -name "*.log" -print0 | xargs -0 -I {} mv {} /archive/

# 避けるべき書き方（環境によっては -0 が無視される）
# find . -name "*.log" -print0 | xargs -I {} -0 mv {} /archive/