encoding是从http中的header中的charset字段中提取的编码方式，若header中没有charset字段则默认为ISO-8859-1编码模式，则无法解析中文，这是乱码的原因
apparent_encoding会从网页的内容中分析网页编码的方式，所以apparent_encoding比encoding更加准确。当网页出现乱码时可以把apparent_encoding的编码格式赋值给encoding。
相关推荐
wuyk5555 小时前
Spider-第09讲-三格式落盘CSV-Excel-JSONwuyk5551 天前
Spider-第07讲-JSON接口与正则提取feasibility.1 天前
一物降一物？AI逆向没有终局：REA拆App，BLA设套，LASIK清场wuyk5553 天前
Spider-第03讲-HTTP速通与读懂响应xyzzklk9 天前
在Open-WebUI中提升向量化速度严肃小白兔9 天前
Cloudflare 开始区分 AI 爬虫与个人 Agent：网站访问控制应该怎样设计？傻啦嘿哟12 天前
高德地图POI爬虫：爬取商户与景点数据，做LBS应用weixin1997010801612 天前
官方授权通道和灰色爬虫，做数据服务该选哪条路（附 python 源码）正飞信息技术13 天前
llms.txt部署指南：给AI爬虫一张清晰的网站地图NeoGressAI外贸数字化15 天前
外贸独立站robots.txt怎么写：6个AI爬虫放行规则