爬虫需要稳定的代理，请大家支支招，谢谢了

im_v_v · 发表于 2010-4-2 11:15:53

我主要用于爬取一些wiki 和国内的一些论坛，不是攻击。但是这些论坛都限制同一ip，在时间内访问次数。

所以，我想到，可能需要大量的代理，而“代理中国”提供的那些代理很不稳定。所以我想自己搞一点。

请问，从国外的BURST类似的ips，买vps，在加上一些固定ip，譬如100个ip，能解决我的需求吗？我该如何操作？

请大家帮我提供一些解决方案吧。谢谢。

另外，我朋友能提供一个服务器暂用，光纤4兆，4个固定ip，但是用了一个dlink的小型路由器，服务器在内网，用NAT，我看样子好像只能用1个ip，剩下的3个改怎么样利用呢？

就是4个ip都用上？我不太熟悉网络，谢谢各位了。

[ 本帖最后由 im_v_v 于 2010-4-2 11:18 编辑 ]

im_v_v · 发表于 2010-4-2 14:52:12

最好还是动态ip

，静态也勉强接受。

lylover · 发表于 2010-4-2 14:05:22

提示: 作者被禁止或删除内容自动屏蔽

im_v_v · 发表于 2010-4-2 14:04:07

谢谢管理员老大，我再学习学习。

cpuer · 发表于 2010-4-2 13:06:29

现在Burst.net分配/24 (253个可用IP) 要求很严格的，不容易。

im_v_v · 发表于 2010-4-2 13:00:47

我顶，各位都吃饭去了吗

im_v_v · 发表于 2010-4-2 11:44:51

这么贵啊，我一个哥们告诉我，买BURST的vps 和 250ip，一个月大概100多美刀。流量是4t，出口100m。貌似是这样。

是这样吗？

Administrator · 发表于 2010-4-2 11:34:53

提示: 作者被禁止或删除内容自动屏蔽

im_v_v · 发表于 2010-4-2 11:33:11

原帖由 Administrator 于 2010-4-2 11:28 发表
原来OVH的一台机器，256个IP，而且可以分到不同网段

是vps还是租一台整机？价格大概多少呢？

im_v_v · 发表于 2010-4-2 11:32:36

原帖由 Administrator 于 2010-4-2 11:26 发表
用代理速度可能会慢些。
PHP和PYTHON都可以都可以指定出口IP，如果不考虑成本的话，可以用大量的本机IP。

恩，程序上没问题，主要是有稳定的代理。哎，本机ip，太贵了

		自动登录	找回密码
密码			注册

lylover lylover 当前离线积分 1932	18^# 发表于 2010-4-2 14:05:22 \| 只看该作者提示: 作者被禁止或删除内容自动屏蔽
lylover lylover 当前离线积分 1932
	回复支持反对举报

Administrator Administrator 当前离线积分 7423	13^# 发表于 2010-4-2 11:34:53 \| 只看该作者提示: 作者被禁止或删除内容自动屏蔽
Administrator Administrator 当前离线积分 7423
	回复支持反对举报

[疑问] 爬虫需要稳定的代理，请大家支支招，谢谢了

回复 14# 的帖子