随机换IP采集
为了证明我是被禁止IP的情况下做的采集。先截个偶采集的目标站的被禁截图。
被禁止了IP
刚才的是浏览器直接打开的,显示IP被禁止,这张是火车头正在采集的截图
-
正在采集
既然说到换IP采集,那先得弄到代理IP的列表 像这样
IP:端口号
192.168.0.1:80
192.168.0.1:80
……
把正确格式的IP地址保存在TXT文件中,回到火车头,点击工具栏上的“代理”,就会出现下面的界面。把IP从刚才保存的TXT中导入,就可以在火车头的代理工具中看到导入的IP了。
别忘了点批量验证,火车头自带的验证是可以打开百度为准 的,如果是大家的,建议在选项设置里设置到你采的目标网站。把验证不通过的删掉,只留下通过的。
端口可以随意设置,但一会采集规则里,要和这里设置的端口一致。
这是在采集规则里的设置截图。
按这样设置好后,保存任务,就可以开始换IP采集了
这里可以回到代理工具里,看到了吧?!!! 已经换着IP采集了!
最重要的设置见下图:
在任务中的HTTP代理里设置ip:127.0.0.1,端口号XXX,然后到二级代理里面去,选项设置列表里设置一下相同的端口号XXX这样二级代理就可以正常使用了。