首页 文章详情

Selenium 最强反反爬方案来了!(下篇)

大邓和他的Python | 1234 2021-02-02 09:37 0 0 0
UniSMS (合一短信)

腾讯课堂 | Python网络爬虫与文本分析~~


来源:未闻Code

上一篇文章中,我们提到了使用 CDP 协议执行stealth.min.js文件,它能完美隐藏 Chrome 浏览器的各个特征

Selenium 最强反反爬方案来了!

但是最近,Chrome 的版本号提高到了 88,有同学发现stealth.min.js文件,已经无法正确隐藏window.navigator.webdriver

如图:

这是因为,从 Chrome 88 开始,它的 V8 引擎升级了,一些接口发生了改变

比如:

Object.defineProperty(navigator, 'webdriver', {
      get() =>undefined
    })

如果你在 Selenium 启动的 Chrome 88版本执行这段代码,你会发现运行报错

遇到这种情况怎么办呢?

Google 关闭了一扇门的时候,又给你打开了一扇窗

实际上,我们在使用 Selenium 调用 Chrome 的时候,只需要增加一个配置参数就可以再次隐藏 window.navigator.webdriver

# 增加一个参数设置
chrome_options.add_argument("--disable-blink-features=AutomationControlled")

运行结果如下:

本文代码下载链接: https://pan.baidu.com/s/1oXcS_y_tj0vrcLLt5YvQ-Q  密码: ufm8


近期文章

Python网络爬虫与文本数据分析
bsite库 | 采集B站视频信息、评论数据
爬虫实战 | 采集&可视化知乎问题的回答
pdf2docx库 | 转文件格式,支持抽取文件中的表格数据
rpy2库 | 在jupyter中调用R语言代码
tidytext | 耳目一新的R-style文本分析库
reticulate包 | 在Rmarkdown中调用Python代码
plydata库 | 数据操作管道操作符>>
plotnine: Python版的ggplot2作图库
七夕礼物 | 全网最火的钉子绕线图制作教程
读完本文你就了解什么是文本分析
文本分析在经管领域中的应用概述  
综述:文本分析在市场营销研究中的应用
plotnine: Python版的ggplot2作图库
小案例: Pandas的apply方法  
stylecloud:简洁易用的词云库 
用Python绘制近20年地方财政收入变迁史视频  
Wow~70G上市公司定期报告数据集
漂亮~pandas可以无缝衔接Bokeh  
YelpDaset: 酒店管理类数据集10+G  

    分享”和“在看”是更好的支持!


good-icon 0
favorite-icon 0
收藏
回复数量: 0
    暂无评论~~
    Ctrl+Enter