python 爬取网站图片的小demo

python 复制代码
# demo.py
# 首先引入各个模块
import os
import requests
from bs4 import BeautifulSoup
from urllib.parse import urljoin

def download_static_resources(url, output_dir="downloads"):
    # 创建输出目录
    if not os.path.exists(output_dir):
        os.makedirs(output_dir)
    
    # 设置请求头,模拟浏览器访问
    headers = {
        "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/96.0.4664.45 Safari/537.36"
    }
    
    try:
        # 发送请求获取网页内容
        response = requests.get(url, headers=headers)
        if response.status_code != 200:
            print("无法访问页面,请检查链接是否有效!")
            return
        
        # 使用 BeautifulSoup 解析 HTML 内容
        soup = BeautifulSoup(response.text, 'html.parser')
        
        # 查找所有图片标签
        img_tags = soup.find_all("img")
        print(f"找到 {len(img_tags)} 张图片")
        
        for img in img_tags:
            # 获取图片的 src 属性
            img_url = img.get("src") or img.get("data-src")  # 有些图片可能使用 data-src
            if not img_url:
                continue
            
            # 将相对路径转换为绝对路径
            img_url = urljoin(url, img_url)
            
            # 下载图片
            try:
                img_response = requests.get(img_url, headers=headers)
                if img_response.status_code == 200:
                    # 提取文件名
                    img_name = os.path.basename(img_url.split("?")[0])  # 去掉查询参数
                    img_path = os.path.join(output_dir, img_name)
                    
                    # 保存图片到本地
                    with open(img_path, "wb") as img_file:
                        img_file.write(img_response.content)
                    print(f"已下载:{img_name}")
                else:
                    print(f"无法下载图片:{img_url}")
            except Exception as e:
                print(f"下载图片时出错:{e}")
    
    except Exception as e:
        print("发生错误:", e)

# 测试代码
if __name__ == "__main__":
    print("欢迎使用网页图片下载器!")
    print("请输入要下载图片的网页地址,按回车确认。")
    target_url = input("网页地址:")
    print("开始下载...")
    download_static_resources(target_url)
    print("\n下载完成!按回车键退出...")
    input()

使用:先安装必要的库,

bash 复制代码
pip install requests beautifulsoup4

运行:

bash 复制代码
python "/demo.py"

我们可以使用 PyInstaller 来将这个 Python 脚本打包成 exe 文件。以下是具体步骤:

bash 复制代码
pip install pyinstaller
bash 复制代码
pyinstaller --onefile --icon=download.ico demo.py


- --onefile : 打包成单个exe文件
- --icon : 添加图标(可选,需要准备一个.ico文件)
相关推荐
学不完了是吧11 分钟前
Python循环与遍历详解:从入门到进阶
python
belldeep21 分钟前
python:sklearn 主成分分析(PCA)
python·机器学习·sklearn·pca
HtwHUAT35 分钟前
五、UI自动化测试05--PyTest框架
经验分享·python·ui·pytest
攻城狮7号40 分钟前
20250429-李彦宏口中的MCP:AI时代的“万能接口“
人工智能·python·ai·mcp
Y1nhl41 分钟前
力扣hot100_普通数组_python版本
开发语言·python·算法·leetcode·职场和发展
全栈小541 分钟前
【C#】.net core6.0无法访问到控制器方法,直接404。由于自己的不仔细,出现个低级错误,这让DeepSeek看出来了,是什么错误呢,来瞧瞧
开发语言·c#·.netcore
时光话2 小时前
Lua 第11部分 小插曲:出现频率最高的单词
开发语言·lua
泽02023 小时前
C++入门(缺省参数/函数/引用)
开发语言·c++
Themberfue5 小时前
Redis ⑦-set | Zset
java·开发语言·数据库·redis·sql·缓存
__lost6 小时前
MATLAB画出3d的常见复杂有机分子和矿物的分子结构
开发语言·人工智能·matlab·化学·分子结构