自动化操作被制裁解决方案

场景

我们做自动化操作的时候,经常被浏览器检测为自动化测试工具,然后被各种制裁,例如:什么真人验证,什么同用不同源(意思是一个东西,网页上和自动化网页效果不一样),反复制裁,我就想能否有一个方案,不让浏览器知道是自动化工具在操作呢?

论证 求道

纠错

那我们就束手无策了吗?我谷歌了一下,很多人说加什么User-agent,什么浏览器xx,其实都是不正确的,因为那是针对请求的,并不是针对自动化操作的,自动化操作最重要义是什么?是替代无意义的重复劳动,那么这个行为一定是仿人的,那我们有什么办法呢?

灵感

这个时候我发现我打开了一个谷歌浏览器,然后进行同样的操作,拦截一个自动机浏览器,做一样的操作,他们得到的结果是截然不同的,我深深郁闷,如果能操作人为浏览器就好了!哎! 什么?操作人为浏览器???那我岂不是可以用远程控制做到,说干就干。

写了这个代码:

python 复制代码
import subprocess
import random
import socket
# 
# @Author: Herche Jane
# @Date: 2024-08-12

class ChromeController:
    def __init__(self):
        self.process = None
        self.port = None

    def find_free_port(self):
        """Find a free port by opening a temporary socket."""
        s = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
        s.bind(('', 0))
        port = s.getsockname()[1]
        s.close()
        return port

    def open_chrome(self):
        """Open Chrome browser with a free debugging port."""
        try:
            # 生成随机的未使用端口
            self.port = self.find_free_port()

            # Chrome 启动命令,路径使用双引号括起来
            chrome_command = f'"C:\\Program Files\\Google\\Chrome\\Application\\chrome.exe" --remote-debugging-port={self.port} --user-data-dir="xxx"'

            # 启动 Chrome 浏览器
            self.process = subprocess.Popen(chrome_command, shell=True)

            return self.port
        except Exception as e:
            print(f"Error opening Chrome: {e}")
            return -1

    def close_chrome(self):
        """Close the Chrome browser if it's running."""
        if self.process:
            try:
                self.process.terminate()  # 结束 Chrome 进程
                self.process.wait()
                self.process = None
                print("Chrome closed successfully.")
            except Exception as e:
                print(f"Error closing Chrome: {e}")


if __name__ == "__main__":
    chrome_controller = ChromeController()
    port = chrome_controller.open_chrome()

    if port != -1:
        print(f"Chrome started on port {port}")
    else:
        print("Failed to start Chrome.")

这就等于是人为打开而不是使用google driver打开的浏览器,我对其一番操作得到的结果果然和我手动操作的一模一样

行动和论证

我接下来使用自动化接管了这个浏览器,果然,一顿操作下来得到的结果和手动的一模一样

结论

必要情况下:使用命令打开 + 自动化接管方式 就可以解决大部分被制裁的问题

相关推荐
Narutolxy3 分钟前
Python 单元测试:深入理解与实战应用20240919
python·单元测试·log4j
鱼饼6号7 分钟前
Prometheus 上手指南
linux·运维·centos·prometheus
Amo Xiang26 分钟前
2024 Python3.10 系统入门+进阶(十五):文件及目录操作
开发语言·python
liangbm336 分钟前
数学建模笔记——动态规划
笔记·python·算法·数学建模·动态规划·背包问题·优化问题
B站计算机毕业设计超人1 小时前
计算机毕业设计Python+Flask微博情感分析 微博舆情预测 微博爬虫 微博大数据 舆情分析系统 大数据毕业设计 NLP文本分类 机器学习 深度学习 AI
爬虫·python·深度学习·算法·机器学习·自然语言处理·数据可视化
羊小猪~~1 小时前
深度学习基础案例5--VGG16人脸识别(体验学习的痛苦与乐趣)
人工智能·python·深度学习·学习·算法·机器学习·cnn
m0_609000422 小时前
向日葵好用吗?4款稳定的远程控制软件推荐。
运维·服务器·网络·人工智能·远程工作
小安运维日记3 小时前
Linux云计算 |【第四阶段】NOSQL-DAY1
linux·运维·redis·sql·云计算·nosql
waterHBO3 小时前
python 爬虫 selenium 笔记
爬虫·python·selenium
编程零零七4 小时前
Python数据分析工具(三):pymssql的用法
开发语言·前端·数据库·python·oracle·数据分析·pymssql