这几天抓取新浪微博,每个请求随机一个代理,每半小时换一个账号,过了几个小时,立马几十个账号被冻结。很郁闷。。。有高手知道怎么对付新浪微博的反爬虫么?
1
maowu 2016-04-14 10:56:53 +08:00 via Android
不懂爬虫,不过每个请求随机一个代理会不会太频繁了
|
2
cdwyd 2016-04-14 11:01:08 +08:00
哪一个正常用户的 IP 会一直变来边去的,这也太明显了。
|
3
JJaicmkmy 2016-04-14 11:41:33 +08:00 via iPad
每一次换账号时换代理,同一个账号不要用不同的代理。
|
4
Xrong 2016-04-14 13:03:33 +08:00
频率别开太高,基本没啥事,好奇楼主的登录是 cookies 式的么?
|
5
goodluck OP 是的,我是用 cookie 登陆的。先备份几十个 cookie 。。。淘宝一元 5 个账号。
|
6
p1094358629 2018-05-08 23:11:11 +08:00
账号用来干嘛??
|