python爬虫获取豆瓣前top250的标题(简单)

今天是简略的一篇,简单小实验

python 复制代码
import requests
from bs4 import BeautifulSoup

# 模拟浏览器的构成(请求头)
headers = {
    "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/123.0.0.0 Safari/537.36 Edg/123.0.0.0"
}

for start_num in range(0,250,25):
    # 获取豆瓣top榜上前250部电影的响应内容
    response = requests.get(f"https://movie.douban.com/top250?start={start_num}", headers=headers)
    html = response.text
    # 传入方法,指定解析器为html.parser"
    soup = BeautifulSoup(html, "html.parser")
    all_titles=soup.findAll("span",attrs={"class":"title"})
    for title in all_titles:
        title_string=title.string
        if "/" not in title_string:
            print(title_string)

读取:

相关推荐
小六子成长记4 分钟前
【C++】:多态的实现
开发语言·c++
flysh054 分钟前
关于C#编程中的async / await关键字
开发语言·c#
好好学操作系统5 分钟前
flash_attn ImportError undefined symbol:
开发语言·python
CCPC不拿奖不改名5 分钟前
面向对象编程:继承与多态+面试习题
开发语言·数据结构·python·学习·面试·职场和发展
꧁Q༒ོγ꧂8 分钟前
算法详解(一)--算法系列开篇:什么是算法?
开发语言·c++·算法
year--10 分钟前
虚拟环境安装requirements.txt
python
num_killer15 分钟前
小白的uv包管理工具使用
python·conda·pip·uv
华如锦15 分钟前
一.2部署——大模型服务快速部署vLLM GPU 安装教程 (Linux)
java·linux·运维·人工智能·后端·python·vllm
星火开发设计18 分钟前
Python数元组完全指南:从基础到实战
开发语言·windows·python·学习·知识·tuple
wuk99819 分钟前
栅格障碍物地图生成与机器人路径规划MATLAB程序
开发语言·matlab