Selenium 爬虫被检测到怎么办？使用的是 ChromeDriver

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

这是一个创建于 2901 天前的主题，其中的信息可能已经有所发展或是发生改变。

使用普通的浏览器可以正常访问，使用 Selenium 会触发防爬机制。

5 条回复 • 2017-11-21 15:57:49 +08:00

qwertty01

2017-11-21 15:14:38 +08:00

在线等。#-#

p2pCoder

2017-11-21 15:38:30 +08:00

反爬这东西很复杂的，selenium 触发反爬，可能是请求速度太快

qwertty01

2017-11-21 15:55:08 +08:00

@p2pCoder 我是这样操作的，使用程序通过 ChromeDriver 打开浏览器，然后自己手动输入网址访问，依然触发了防爬机制。

rootsir

2017-11-21 15:56:13 +08:00

抓包呗，看正常浏览器和爬虫提交的报文头区别在哪里

p2pCoder

2017-11-21 15:57:49 +08:00

@qwertty01 可设置的参数太多，我也不清楚，你最好看一下访问的 url 链，首先确定是哪个 url，哪个页面，然后再确定哪个参数出问题