前言
对网络数据的提取, 从接口的调用, 到第三方平台数据的获取, 无一能脱离爬虫而行！当中处于最具主导地位且最简易的网络请求框架当属框架, 其语法简洁到极致, 功能却极强大, 哪怕毫无基础之人也可迅速开启爬虫开发之旅句号。
今日, 从零点开始, 对核心用法进行拆解, 对请求方式进行拆解, 对参数配置进行拆解, 对实战场景进行拆解, 新手也能够迅速地写出可以使用的爬虫脚本。
一、框架核心优势
相较于原生库, 其语法更为简洁, 兼容性更为强大, 支持自动编码, 自带请求会话, 适配 HTTPS 请求, 无需复杂配置, 只需几行代码就能实现网络请求, 是企业爬虫、接口测试首选的框架。
二、五大核心请求方式
1、对于GET请求而言, 其作用呈现为获取网页，以及获取接口公开数据, 并且要适配查询场景, 还要适配读取场景。
2、针对POST请求而言, 具有提交数据的功能, 存在登录授权此项内容, 包含上传参数这一环节, 适用于数据提交的各种场景之中。
3、发送PUT请求, 去实施修改以及删除远程数据的操作, 以此来适配接口的CRUD操作。
4、HEAD请求：仅获取请求响应头，快速校验链接有效性。
三、核心参数与实战配置
1、请求头：模拟浏览器访问，规避反爬拦截；
2、/get参数：拼接GET请求参数，实现精准数据查询；
3、在数据方面, 针对于json参数, 以POST请求的方式来传输参数, 从而实现对接口数据提交的适配要求。
4、超时设置：防止请求卡死，提升脚本稳定性；
5、/会话保持：维持登录状态，抓取权限数据。
四、响应数据解析
1、text：获取网页文本内容，适配静态网页抓取；
2、json(), 它能够对接口的JSON数据予以解析, 进而会直接将其转化成字典列表, 以此来适配接口开发。
3、：获取二进制数据，用于图片、视频、文件下载；
4、：获取响应状态码，判断请求是否成功。
结尾
作为网络开发基石的框架, 它具备可用于写爬虫的功能, 同时能被运用于进行接口测试、实现第三方接口对接以及开展数据同步等职场实际被应用景象, 零基础情况下必须学习, 且属于高频刚需的框架。