爬虫逆向实战(二)--某某观察城市排行榜

一、数据接口分析

主页地址:某某观察

1、抓包

通过抓包可以发现数据接口是multi

2、判断是否有加密参数

  1. 请求参数是否加密?
  2. 请求头是否加密?
  3. cookie是否加密?
  4. 响应数据是否加密?
    通过查看"响应"板块可以发现响应数据是加密的

二、解密位置定位

1、看启动器

查看启动器发现里面包含异步,所以无法正确找到解密位置

2、hook

因为响应加密数据一般都是json数据加密,所以解密后会使用JSON.parse进行解密,所以我们可以对JSON.parse进行hook。

hook代码段:

javascript 复制代码
var my_parse = JSON.parse;
JSON.parse = function (params) {
    debugger
    console.log("json_parse params:",params);
    return my_parse(params);
};

运行hook代码,再次点击翻页,发现有明文参数传入

往下执行,可以发现是在响应拦截器中对数据进行的解密

三、扣js代码

在响应拦截器中可以发现,该网站解密是用的标准AES模块进行的解密

所以我们只需要跟代码找到密钥就可以使用标准AES模块进行解密了

源代码:

javascript 复制代码
var CryptoJS = require('crypto-js')

function tripleAesDecrypt(srcs) {
    var aesKey = 'QV1f3nHn2qm7i3xrj3Y9K9imDdGTjTu9'
    var key = CryptoJS.enc.Utf8.parse(aesKey),
        decrypted = CryptoJS.AES.decrypt(srcs, key, {
            mode: CryptoJS.mode.ECB,
            padding: CryptoJS.pad.Pkcs7
        });
    return decrypted.toString(CryptoJS.enc.Utf8);
}
相关推荐
杨超越luckly3 分钟前
HTML应用指南:利用POST请求获取全国极氪门店位置信息
python·arcgis·html·数据可视化·门店数据
青春不败 177-3266-05203 分钟前
最新AI-Python机器学习与深度学习实践技术应用
人工智能·python·深度学习·机器学习·卷积神经网络·语义分割·自编码
三维鱼3 分钟前
Python组合数据类型----5.2列表( 5.2.4 )
python
零日失眠者4 分钟前
【系统监控系列】005:CPU温度监控脚本
后端·python
深蓝电商API5 分钟前
爬虫登录态维护高级技巧:Cookie 池 + Session 复用实战
爬虫
远瞻。7 分钟前
【环境配置】快速转移conda上的python环境
开发语言·python·conda
上班职业摸鱼人8 分钟前
Python迭代器与生成器深度解析:吃透yield关键字,写出高效内存代码
python
棒棒的皮皮12 分钟前
【OpenCV】Python图像处理之图像加法运算
图像处理·python·opencv·计算机视觉
熊文豪17 分钟前
使用Python快速开发一个MCP服务器
服务器·开发语言·python·mcp
高洁0120 分钟前
卷积神经网络(CNN)
人工智能·python·深度学习·神经网络·transformer