selenium 隐藏 Chrome 爬虫特征实现模拟登录

zh648990

最典型的就是模拟淘宝登录，直接登录的话会有一个滑块验证，这个滑块不管怎么滑动都无法验证，因为淘宝识别到这个是爬虫，那怎么解决呢？
我在 github 找到一个脚本 已经完美实现模拟登录不会出现滑块验证了

https://github.com/kingname/stealth.min.js

关键代码如下

[Python] 纯文本查看 复制代码

    # 浏览器配置对象
    options = webdriver.ChromeOptions()
    # 以开发者模式启动浏览器
    options.add_experimental_option('excludeSwitches', ['enable-automation'])
    # 屏蔽以开发者运行提示框
    # options.add_experimental_option('useAutomationExtension', False)
    # 屏蔽保存密码提示框
    prefs = {'credentials_enable_service': False, 'profile.password_manager_enabled': False}
    options.add_experimental_option('prefs', prefs)
    # chrome 88 或更高版本的反爬虫特征处理
    options.add_argument('--disable-blink-features=AutomationControlled')
    # 浏览器对象
    driver = webdriver.Chrome(options=options)
    # 读取脚本 下载 stealth.min.js 到本地
    with open('stealth.min.js', mode='r', encoding='utf-8') as f:
        string = f.read()
    # 移除 selenium 中的爬虫特征
    driver.execute_cdp_cmd('Page.addScriptToEvaluateOnNewDocument', {'source': string})

实现原理就是在访问网址前加载js脚本隐藏 window.navigator.webdriver 爬虫特征
检测方法是访问 https://bot.sannysoft.com/ 查看属性 WebDriver 是否为 missing (passed)
这是隐藏爬虫的


这是没隐藏的

DarkHC

还有一个隐藏的webrtc IP检测

[Python] 纯文本查看 复制代码

        preferences = {
            "webrtc.ip_handling_policy": "disable_non_proxied_udp",
            "webrtc.multiple_routes_enabled": False,
            "webrtc.nonproxied_udp_enabled": False
        }
        # 关闭webrtc 避免找到真实IP地址
        options.add_experimental_option("prefs", preferences)

加不加这个配置访问https://browserleaks.com/ip, 里面的IP地址是不同的

ReLoading

试试 playwright，更强大

wan1330

感谢分享绕过滑块验证

dragonjelly

这个可以啊，非常好，最近想试试淘宝，感谢分享

Looco

感谢分享

zh648990

ReLoading 发表于 2021-11-12 14:26
试试 playwright，更强大

感谢老哥，我去试一试

zh648990

DarkHC 发表于 2021-11-15 14:16
还有一个隐藏的webrtc IP检测
[mw_shl_code=python,true]        preferences = {
            "webrtc.i ...

可以可以，结合起来更完美了

pppin

貌似不怎么行。

alexyui

这个不错，收藏了以后用的到时候可以看看