python爬虫获取豆瓣前top250的标题(简单)

今天是简略的一篇,简单小实验

python 复制代码
import requests
from bs4 import BeautifulSoup

# 模拟浏览器的构成(请求头)
headers = {
    "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/123.0.0.0 Safari/537.36 Edg/123.0.0.0"
}

for start_num in range(0,250,25):
    # 获取豆瓣top榜上前250部电影的响应内容
    response = requests.get(f"https://movie.douban.com/top250?start={start_num}", headers=headers)
    html = response.text
    # 传入方法,指定解析器为html.parser"
    soup = BeautifulSoup(html, "html.parser")
    all_titles=soup.findAll("span",attrs={"class":"title"})
    for title in all_titles:
        title_string=title.string
        if "/" not in title_string:
            print(title_string)

读取:

相关推荐
2601_9628857214 小时前
vnpy 用什么数据源?A 股历史行情接入与 BarData 映射
python
日日大王学编程14 小时前
deerflow-memory-design-blog
python·langchain·开源
幻境如梦丶皆为虚14 小时前
从零写一个 DSH 插件:在左侧菜单栏加一个「测试」
开发语言·javascript·ecmascript
LabVIEW开发14 小时前
LabVIEW 局部变量与数据流:这道 CLAD 题为什么答案是 Undefined
java·开发语言·labview
路溪非溪14 小时前
C++标准库之智能指针
linux·开发语言·c++
砚底藏山河14 小时前
量化回测可复现流水线CI化
java·python·ci/cd·金融
磁场转动100万匹14 小时前
道路巡检系统检测案例:YOLOv5 + Flask + PyQt 全栈实现
python·yolo
傻啦嘿哟14 小时前
高德地图POI爬虫:爬取商户与景点数据,做LBS应用
爬虫
衍生星球15 小时前
【Java 语言】— 面向对象:构造方法(无参、有参构造)
java·开发语言
yuniko-n15 小时前
【JVM】对象内存布局
java·开发语言·jvm