爬虫学习(三)用beautiful 解析html


安装库



py 复制代码
import  requests
from bs4 import BeautifulSoup
headers = {
    "User-Agent" : "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/119.0.0.0 Safari/537.36 Edg/119.0.0.0"

}
for start_num in range(0,250,25):

    response = requests.get(f"https://movie.douban.com/top250?start={start_num}",headers = headers)
    html = response.text
    soup = BeautifulSoup(html,"html.parser")
    all_title = soup.findAll("span",attrs={"class":"title"})
    for title in all_title:
        title_string = title.string
        if "/" not in title_string:
            print(title_string)
相关推荐
星夜夏空9912 分钟前
FreeRTOS学习(6)——任务创建
单片机·嵌入式硬件·学习
nashane31 分钟前
HarmonyOS 6学习:保存图片预览空白?沙箱路径转URI的“视觉修复”术
学习·华为·harmonyos
IronMurphy33 分钟前
AI Agent 学习day5 MCP 协议入门与实践
网络·人工智能·学习
li星野38 分钟前
LLMLingua:用小型模型“剪枝”大语言模型提示词,让长文本不再昂贵
人工智能·python·学习·语言模型·剪枝
峥嵘life43 分钟前
Android getprop 属性限制详解:User 版本属性获取问题分析
android·开发语言·python·学习
星夜夏空991 小时前
FreeRTOS学习(5)——内存映射
开发语言·学习
wuxinyan1231 小时前
工业级大模型学习之路031:Streamlit 高级功能多会话管理和知识库管理
python·学习·智能体
古月开发1 小时前
旧手机变身 AI 作业监督器:低成本家庭学习解决方案
人工智能·学习·智能手机
小新同学^O^2 小时前
简单学习 --> SSE
学习
sakoba2 小时前
MySQL常见问题学习
数据库·学习·mysql