爬虫学习(三)用beautiful 解析html


安装库



py 复制代码
import  requests
from bs4 import BeautifulSoup
headers = {
    "User-Agent" : "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/119.0.0.0 Safari/537.36 Edg/119.0.0.0"

}
for start_num in range(0,250,25):

    response = requests.get(f"https://movie.douban.com/top250?start={start_num}",headers = headers)
    html = response.text
    soup = BeautifulSoup(html,"html.parser")
    all_title = soup.findAll("span",attrs={"class":"title"})
    for title in all_title:
        title_string = title.string
        if "/" not in title_string:
            print(title_string)
相关推荐
YJlio16 小时前
Active Directory 工具学习笔记(10.14):第十章·实战脚本包——AdExplorer/AdInsight/AdRestore 一键化落地
服务器·笔记·学习
东华万里16 小时前
第十四篇 操作符详讲
c语言·学习·大学生专区
nwsuaf_huasir16 小时前
深度学习2-pyTorch学习-张量基本操作
pytorch·深度学习·学习
d111111111d16 小时前
江协科技-PID基本原理-(学习笔记)-主页有所有STM32外设的笔记基本都是万字起步。
笔记·科技·stm32·单片机·嵌入式硬件·学习
啦哈拉哈16 小时前
【Python】知识点零碎学习3
开发语言·python·学习
LO嘉嘉VE17 小时前
学习笔记二十九:贝叶斯决策论
人工智能·笔记·学习
2401_8345170717 小时前
AD学习笔记-33 丝印位号的调整
笔记·学习
萤虫之光17 小时前
常见进制介绍以及之间的转换(二)
学习
hssfscv17 小时前
Mysql学习笔记——多表查询
笔记·学习·mysql
知识分享小能手17 小时前
CentOS Stream 9入门学习教程,从入门到精通,CentOS Stream 9 中人工智能 —语法详解与实战案例(14)
人工智能·学习·centos