使用 Wget 的高级下载

Shell 中的数据处理

Susan Sun

Data Person

使用 Wget 批量下载文件

将文件地址列表保存到文本文件中。

cat url_list.txt

https://websitename.com/datafilename001.txt
https://websitename.com/datafilename002.txt
...

使用 -i 从 url_list.txt 中的 URL 批量下载。

wget -i url_list.txt

用 --limit-rate 设定下载带宽上限（默认单位为每秒字节）。

语法：

wget --limit-rate={rate}k {file_location}

示例：

wget --limit-rate=200k -i url_list.txt

用 --wait 设定文件间的强制等待时间（秒）。

语法：

wget --wait={seconds} {file_location}

示例：

wget --wait=2.5 -i url_list.txt

curl 优势：

Wget 优势：

Shell 中的数据处理