2021年2月12日金曜日

wget で複数ファイルをダウンロードする (wget, xargs)

複数ファイルをテキストファイルにリスト化しておいて、wget でダウンロードさせる方法のメモ。

urls.txt ファイルにダウンロードしたい URL のリストを記述

$ vi urls.txt
(下記を記述)
ftp://hogehoge.org/hogehoge1.tar.gz
ftp://hogehoge.org/hogehoge2.tar.gz
ftp://hogehoge.org/hogehoge3.tar.gz

xargs と wget でダウンロード。wget の -c オプションは、レジューム。途中、停止したときに再開できる。

$ xargs -P 20 -n 1 wget -c --user=hogehoge --password=hogehoge < urls.txt

● wget, xargs, urls.txt, 一括, 自動, ダウンロード, レジューム, download

0 件のコメント: