wget命令是干嘛的,怎么用

wget命令是一个用于从网络上下载文件的命令行工具。它支持通过HTTP、HTTPS和FTP协议进行文件下载,并且可以递归下载整个网站。

以下是wget命令的基本用法和常用选项:

基本用法

sh 复制代码
wget [选项] [URL]

常用选项

  • -O [文件名]:将下载的文件保存为指定的文件名。
  • -c:断点续传,继续下载上次未完成的文件。
  • -r:递归下载。
  • -p:下载页面内所有资源(例如图片、CSS等),使得页面可以离线查看。
  • -k:将下载的HTML文件内的链接转换为本地链接。
  • -l [级别]:递归下载的级别。
  • --limit-rate=[速度]:限制下载速度。例如--limit-rate=200k表示限制下载速度为200KB/s。
  • -b:后台下载模式。
  • --user=[用户名] --password=[密码]:用于需要身份验证的站点。

示例

  1. 下载单个文件
sh 复制代码
wget http://example.com/file.zip
  1. 将文件保存为指定名称
sh 复制代码
wget -O myfile.zip http://example.com/file.zip
  1. 断点续传
sh 复制代码
wget -c http://example.com/file.zip
  1. 递归下载整个网站
sh 复制代码
wget -r http://example.com
  1. 下载页面及其资源
sh 复制代码
wget -p http://example.com
  1. 将下载的HTML文件内的链接转换为本地链接
sh 复制代码
wget -k -r http://example.com
  1. 后台下载并限制下载速度
sh 复制代码
wget -b --limit-rate=100k http://example.com/file.zip
  1. 下载需要身份验证的资源
sh 复制代码
wget --user=myusername --password=mypassword http://example.com/protected-file.zip

通过这些选项,wget可以非常灵活地用于各种下载任务。

wget 是一个命令行工具,通常在终端或命令行界面中运行,而不是在 Python 脚本中直接运行。不过,你可以在 Python 脚本中使用 subprocess 模块来调用 wget 命令。以下是如何在 Python 脚本中使用 wget 的示例:

使用 subprocess 调用 wget

python 复制代码
import subprocess

# 下载单个文件
url = "http://example.com/file.zip"
subprocess.run(["wget", url])

# 将文件保存为指定名称
output_filename = "myfile.zip"
subprocess.run(["wget", "-O", output_filename, url])

# 断点续传
subprocess.run(["wget", "-c", url])

# 递归下载整个网站
website_url = "http://example.com"
subprocess.run(["wget", "-r", website_url])

使用 requests 模块替代 wget

如果不想依赖外部工具,你也可以使用 Python 的 requests 模块来下载文件。以下是使用 requests 模块下载文件的示例:

python 复制代码
import requests

url = "http://example.com/file.zip"
output_filename = "file.zip"

response = requests.get(url, stream=True)
with open(output_filename, 'wb') as file:
    for chunk in response.iter_content(chunk_size=8192):
        if chunk:
            file.write(chunk)

安装 requests 模块

如果你还没有安装 requests 模块,可以使用 pip 来安装:

sh 复制代码
pip install requests

总结

尽管 wget 是一个强大的下载工具,但在 Python 脚本中通常使用 subprocess 模块来调用它。如果不想依赖外部工具,可以使用 requests 模块来实现类似的功能。两种方法各有优劣,可以根据具体需求选择合适的方式。

相关推荐
fantasy_arch18 分钟前
pytorch人脸匹配模型
人工智能·pytorch·python
熊猫_豆豆18 分钟前
广义相对论水星近日点进动完整详细数学推导
python·天体·广义相对论
web3.088899931 分钟前
1688 图搜接口(item_search_img / 拍立淘) 接入方法
开发语言·python
AI算法沐枫1 小时前
深度学习python代码处理科研测序数据
数据结构·人工智能·python·深度学习·决策树·机器学习·线性回归
X1A0RAN2 小时前
解决Pycharm中部分文件或文件夹被隐藏不展示问题
ide·python·pycharm
MomentYY2 小时前
第 3 篇:让 Agent 学会分工,LangGraph 构建多 Agent系统
人工智能·python·agent
程序员Jelena2 小时前
Python 代码是什么?—— 从字节到执行的完整解析
python
测试员周周2 小时前
【Appium 系列】第13节-混合测试执行器 — API + UI 的协同执行
开发语言·人工智能·python·功能测试·ui·appium·pytest
用户8356290780513 小时前
Python 操作 PowerPoint OLE 对象
后端·python
小江的记录本3 小时前
【Java基础】Java 8-21新特性:JDK21 LTS:虚拟线程、模式匹配switch、结构化并发、序列集合(附《思维导图》+《面试高频考点清单》)
java·数据库·python·mysql·spring·面试·maven