爬虫零基础学习,第一天,安装环境,requests库常用命令的讲解

Python爬虫

爬虫学习思路



URL内容获取,requests的基本常用语法

python 复制代码
import  requests
# 先向目标网站发送请求
url =  "http://www.baidu.com"
r = requests.get(url)
# 可以用看一下访问码返回值是不是200,若是200则表示访问成功
print(r.status_code)
# 输出头部格式查看,文本格式
print(r.headers)
# 如果content-type没有写文件格式,那获取文本内容时,中文会出现乱码
print(r.encoding)  # 用于查看文本格式
print(r.text)
# 所以可以先指定utf-8的格式,然后再访问文本内容
r.encoding="utf-8"
print(r.text)
相关推荐
隔窗听雨眠41 分钟前
SQL执行计划固化的原理与稳定性工程
数据库·sql优化·执行计划
吃我一窝jio2 小时前
Python与Go线程模型深度对比
java·开发语言·python
eggwyw3 小时前
C++ union 的一种妙用法
开发语言·c++
TDengine (老段)3 小时前
TDengine IDMP 功能点—数据接入
大数据·数据库·物联网·时序数据库·tdengine·涛思数据
zwd20053 小时前
Manim 怎么放大画面的某一部分?
python·动画·可视化·manim·数学动画
索西引擎3 小时前
MySQL 进阶:视图、存储过程、存储函数与触发器
数据库·mysql
屿华AI4 小时前
AUTOSAR 实战-诊断工具 | UDS 0x27 安全访问的配置化实现:种子密钥算法插件化设计
python·测试工具·汽车
RobinDevNotes4 小时前
Claude Code 剪视频,不上传、不要 API Key
人工智能·python·音视频·开发工具·ipython
bksczm4 小时前
InnoDB 通用表空间与临时表空间详解
大数据·数据库·mysql
starzy19905 小时前
深入理解Scala隐式函数:自动类型转换
开发语言·后端·scala