使用Nokogiri库的Python程序

```python

import requests

from bs4 import BeautifulSoup

import os

设置

proxies = {"http": "", "https": ""}

设置headers

headers = {

'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.77 Safari/537.36'

}

设置请求的URL

url = "https://www.yuanfudao.com/"

发送请求

response = requests.get(url, headers=headers,proxies=proxies)

使用BeautifulSoup解析返回的HTML

soup = BeautifulSoup(response.text, 'html.parser')

找到所有img标签

images = soup.find_all('img')

遍历所有img标签

for image in images:

获取图片的src属性

src = image.get('src')

如果图片的src属性以'/'开头,说明是域名外的图片,需要加上'http://www.yuanfudao.com/'前缀

if src.startswith('/'):

src = 'http://www.yuanfudao.com/' + src

获取图片的文件名

filename = src.split('/')[-1]

创建保存图片的文件夹,如果不存在则创建

if not os.path.exists('images'):

os.makedirs('images')

将图片保存到指定的文件夹中

with open('images/' + filename, 'wb') as f:

f.write(requests.get(src, headers=headers,proxies=proxies).content)

```

以上代码的工作原理是,首先发送一个GET请求到指定的URL,并使用BeautifulSoup解析返回的HTML。

然后,它找到所有img标签,并遍历这些标签。对于每个img标签,它获取图片的src属性,并检查这个属性是否以'/'开头。

如果以'/'开头,说明这是域名外的图片。

然后,它获取图片的文件名,并创建一个保存图片的文件夹(如果不存在的话)。

最后,它将图片保存到指定的文件夹中。

相关推荐
XH华22 分钟前
C语言第十一章内存在数据中的存储
c语言·开发语言
AndrewHZ2 小时前
【python与生活】如何用Python写一个简单的自动整理文件的脚本?
开发语言·python·生活·脚本·文件整理
拉法豆粉2 小时前
在压力测试中如何确定合适的并发用户数?
java·开发语言
枯萎穿心攻击3 小时前
Unity VS UE 性能工具与内存管理
开发语言·游戏·unity·ue5·游戏引擎·虚幻·虚幻引擎
老赵的博客3 小时前
c++ 常用接口设计
开发语言·c++
binbinaijishu883 小时前
Python爬虫入门指南:从零开始的网络数据获取之旅
开发语言·爬虫·python·其他
chenglin0163 小时前
Logstash_Input插件
java·开发语言
3壹3 小时前
单链表:数据结构中的高效指针艺术
c语言·开发语言·数据结构
Python代狂魔4 小时前
Redis
数据库·redis·python·缓存
不过普通话一乙不改名4 小时前
第四章:并发编程的基石与高级模式之Select语句与多路复用
开发语言·golang