【前端爬虫】关于如何获取自己的请求头信息(user-agent和cookie)

注意:由于user-agent和cookie中保存了部分账户信息,所以一定不要随意泄露给他人!!!

1.首先打开某个页面,点击键盘的F12键进入控制台,或者鼠标右键页面选择打开控制台

2.然后点击控制台上方的网络按钮,进入网络标签栏后点击Fetch/XHR,然后刷新页面

3.此时控制台下方应该会筛选出所有的数据请求,这里我们随便点击一个请求就会在右侧打开请求的详细信息

4.然后向下浏览详细信息,找到请求标头,cookie和user-agent就在请求标头中

5.将请求头中的cookie和user-argent完整复制到编程项目中即可使用

需要注意的是,有时候请求头的cookie中可能包含单双引号,这时候一定要对请求头的格式进行处理,让请求头中的引号以纯字符串的形式处理,而不是编码内容,在python中一般是在引号前添加反斜杠()表示字符串

相关推荐
狒狒AI2 分钟前
Remotion / GSAP+Three / HyperFrames / Skia 四栈实测:代码渲染知识视频的选栈方法(附开源技能)
前端·人工智能·aigc
修炼的dance3 分钟前
浏览器里导出H.265,8.5秒和55.5秒差在硬件
前端
补码缩写4 分钟前
WebCodecs选编码器,探测之后还要验解码和播放
前端
大文说跨境5 分钟前
亚马逊多账号管理浏览器怎么选?云登/紫鸟/AdsPower 对比
java·前端·自动化
hunter_0768 分钟前
iOS 首页复杂嵌套滚动技术方案:头部固定 + 网格滚动 + Tab 吸顶 + 每 Tab 独立下拉刷新
前端
CoderYanger20 分钟前
Java EE 进阶:4.Spring Web MVC 入门(第一弹)
java·开发语言·前端·spring·面试·java-ee·mvc
用户27886072856721 分钟前
fallback 会盖掉平台提示词:system、空数组和 systemAppend 的差别
前端·后端
peach23 分钟前
大模型和传统编程:同为程序,差异不在硬件,在"逻辑从哪来"
前端
ALONE阿龙太原微码33 分钟前
微信小程序包体积优化:2MB 到 400KB 的实操记录
前端
掘金挖土35 分钟前
前端手摸手跑路之 AI 应用开发(十一)
前端·后端