wgetコマンド完全ガイド：ファイルダウンロードから自動化まで

wget --version

# Debian / Ubuntu
sudo apt install wget

# CentOS / RHEL 系
sudo yum install wget

# Fedora
sudo dnf install wget

# macOS（Homebrew 経由）
brew install wget

wget https://example.com/file.zip

# 別名で保存
wget -O myfile.zip https://example.com/file.zip

# 特定のディレクトリに保存
wget -P ~/downloads/ https://example.com/file.zip

# ディレクトリ指定 + 別名（-O にフルパスを指定する）
wget -O ~/downloads/setup.zip https://example.com/file.zip

wget -b https://example.com/largefile.iso

tail -f wget-log

# urls.txt を作る
cat > urls.txt << EOF
https://releases.ubuntu.com/24.04.4/ubuntu-24.04.4-desktop-amd64.iso
https://example.com/data1.csv
https://example.com/data2.csv
https://example.com/data3.csv
EOF

# まとめてダウンロード
wget -i urls.txt -P ~/downloads/

# 最初のダウンロード（途中で Ctrl+C など）
wget https://example.com/bigfile.iso

# 再開
wget -c https://example.com/bigfile.iso

# 1MB/s に制限
wget --limit-rate=1m https://example.com/file.iso

# 500KB/s に制限
wget --limit-rate=500k https://example.com/file.iso

wget --user=username --password=password https://example.com/protected/file.zip

wget --user=username https://example.com/protected/file.zip
# パスワードを入力するよう促される

wget ftp://ftp.example.com/pub/file.tar.gz
wget --ftp-user=user --ftp-password=pass ftp://ftp.example.com/private/file.tar.gz

wget --mirror \
     --convert-links \
     --adjust-extension \
     --page-requisites \
     --no-parent \
     https://example.com/

wget -N https://example.com/data.csv

# crontab に追加（毎日 3:00 に実行）
0 3 * * * wget -N -P /var/data/ https://example.com/data.csv

wget --user-agent="Mozilla/5.0 (X11; Linux x86_64; rv:109.0) Gecko/20100101 Firefox/115.0" \
     https://example.com/file.zip

wget --header="Authorization: Bearer YOUR_TOKEN" \
     --header="Accept: application/json" \
     https://api.example.com/export/data.json

# 単一URLの確認
wget --spider https://example.com/page.html

# URLリストからまとめてチェック
wget --spider -i urls.txt 2>&1 | grep -E "broken|200|404"

# サイト全体を再帰的にチェック（ダウンロードなし）
wget --spider --recursive --no-directories --level=2 \
     https://example.com/ 2>&1 | grep -B1 "broken"

# ~/.wgetrc
# タイムスタンプ保持
timestamping = on

# リトライ回数
tries = 3

# 接続タイムアウト（秒）
timeout = 30

# 帯域制限（デフォルト）
limit_rate = 2m

# ログファイル
logfile = /tmp/wget.log

# robots.txt に従う
robots = on

# wgetrc の設定が自動適用される
wget https://example.com/file.zip

# 一時的に設定を上書きする
wget --no-config https://example.com/file.zip
wget --limit-rate=0 https://example.com/file.zip

# 失敗したURLをログに記録
wget --recursive --level=1 \
     --rejected-log=rejected.log \
     https://example.com/downloads/

# 後から失敗したURLだけリトライ
cat rejected.log | awk '{print $1}' | wget -i -

# -b でバックグラウンド実行（ログは wget-log に出力）
wget -b https://example.com/large-file.iso

# ログを確認
tail -f wget-log

# 独自のログファイルを指定
wget -b -o download.log https://example.com/large-file.iso

nohup wget https://example.com/large-file.iso &

#!/bin/bash

BASE_URL="https://example.com/releases"
VERSIONS=("1.0.0" "1.1.0" "1.2.0" "2.0.0")
DEST_DIR="./downloads"

mkdir -p "$DEST_DIR"

for VERSION in "${VERSIONS[@]}"; do
  FILE="myapp-${VERSION}.tar.gz"
  URL="${BASE_URL}/${VERSION}/${FILE}"

  echo "Downloading ${FILE}..."
  wget -q -P "$DEST_DIR" "$URL"

  if [ $? -eq 0 ]; then
    echo "  OK: ${FILE}"
  else
    echo "  FAILED: ${FILE}"
  fi
done

echo "Done."

#!/bin/bash

# バージョン番号とハッシュ値は公式サイトで最新のものを確認してください
# https://releases.ubuntu.com/
URL="https://releases.ubuntu.com/24.04.4/ubuntu-24.04.4-desktop-amd64.iso"
EXPECTED_SHA256="<公式サイトで確認したSHA256ハッシュを入力>"

echo "Downloading..."
wget -q --show-progress -O ubuntu.iso "$URL"

echo "Verifying checksum..."
# Linux: sha256sum / macOS: shasum -a 256
if command -v sha256sum &>/dev/null; then
  ACTUAL_SHA256=$(sha256sum ubuntu.iso | awk '{print $1}')
else
  ACTUAL_SHA256=$(shasum -a 256 ubuntu.iso | awk '{print $1}')
fi

if [ "$ACTUAL_SHA256" = "$EXPECTED_SHA256" ]; then
  echo "Checksum OK"
else
  echo "Checksum mismatch! File may be corrupted."
  exit 1
fi

# 証明書の検証をスキップ（テスト環境向け。本番での使用は注意）
wget --no-check-certificate https://example.com/file.zip

# タイムアウトを 30 秒に設定、リトライ 5 回
wget --timeout=30 --tries=5 https://example.com/file.zip

# 無限リトライ
wget --tries=0 https://example.com/file.zip

wget --server-response --spider https://example.com/file.zip