软妹逼求一个爬虫或者采集方案，只爬url就可以

sdfarmer · 发表于 2016-10-14 23:46:26

目标站是一文章cms，但是ip做了限制，采集百来个就限制IP了

不知道有什么办法可以把它文章页的url采集下来，我再导入到火车头慢慢换ip采集

或者有什么更牛逼的采集

很小众的一个站，不公开，有技术的pm我

付rmb

莫桑比特 · 发表于 2016-10-18 09:15:04

gae...各种IP池

左手写爱 · 发表于 2016-10-18 06:15:31

囧基本出名的采集软件都有换IP功能

要钱

HelloAoA · 发表于 2016-10-16 00:30:44

就是代理池或者换个 adsl 更换 ip的 vps 就好了，定时更换ip

sdfarmer · 发表于 2016-10-15 23:27:56

lgp7226 发表于 2016-10-15 23:21
火车头高级版可以用代理。pm我网址，我再详细的说吧。。

我有开新版，不过是7.6。

谢谢

lgp7226 · 发表于 2016-10-15 23:21:39

火车头高级版可以用代理。pm我网址，我再详细的说吧。。

gger · 发表于 2016-10-15 22:27:18

一言不合就采集

sdfarmer · 发表于 2016-10-15 14:15:39

今日说法发表于 2016-10-15 07:18
用火车头直接换ip采集不行吗？

火车头有换ip功能？

osun · 发表于 2016-10-15 07:56:28

要采集找我

今日说法 · 发表于 2016-10-15 07:18:08

用火车头直接换ip采集不行吗？

单调 · 发表于 2016-10-15 06:58:39

换ip

		自动登录	找回密码
密码			注册

[疑问] 软妹逼求一个爬虫或者采集方案，只爬url就可以