第一个爬虫:获取演员表

复制代码
import requests
from bs4 import BeautifulSoup

def get_actors():
    actor_list = []
    for i in range(0,10):
         link = "http://movie.douban.com/top250?start="+str(i*25)
         header = {"User-Agent": "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/94.0.4606.71 Safari/537.36 SE 2.X MetaSr 1.0","Host":"movie.douban.com" }
         response  = requests.get(link,headers = header)
         #print(response.status_code)
         soup = BeautifulSoup(response.text,"html.parser")
         div_list = soup.find_all('div',class_='bd')
         for each in div_list:
             actor = each.p.text.strip()
             actor_list.append(actor)
    return actor_list

actors = get_actors()
print(actors)
相关推荐
源码之家3 小时前
基于Python房价预测系统 数据分析 Flask框架 爬虫 随机森林回归预测模型、链家二手房 可视化大屏 大数据毕业设计(附源码)✅
大数据·爬虫·python·随机森林·数据分析·spark·flask
裤裤兔9 小时前
python爬取pdf文件并保存至本地
chrome·爬虫·python·pdf·网络爬虫
beijingliushao9 小时前
96-爬虫XPath解析
爬虫
beijingliushao9 小时前
95-Python爬虫-正则表达式
爬虫·python·正则表达式
百***06019 小时前
python爬虫——爬取全年天气数据并做可视化分析
开发语言·爬虫·python
失败又激情的man9 小时前
爬虫逆向之360磐云盾案例(某政府网站)
爬虫
interception10 小时前
爬虫逆向:websocket实战案例,全国建筑市场
爬虫·websocket·网络协议
q***318915 小时前
爬虫基础之爬取某基金网站+数据分析
爬虫·数据挖掘·数据分析
ycydynq1 天前
自动化爬虫selenium
爬虫·selenium·自动化
sanggou1 天前
【Python爬虫】手把手教你从零开始写爬虫,小白也能轻松学会!(附完整源码)
开发语言·爬虫·python