首页 新闻 会员 周边

防止搜索引擎封IP的策略

0
悬赏园豆:200 [已关闭问题]

我们公司想做一个工具,这个工具需要向搜索引擎提交搜索请求。但是听一些有经验的人说,如果频繁的向搜索引擎提交搜索请求,会导致搜索引擎封IP的。不知道大家有没有关于这方面的好建议。搜索引擎只考虑谷歌中国和百度中国。

谢谢!

东风31的主页 东风31 | 初学一级 | 园豆:5
提问于:2010-07-27 16:54
< >
分享
其他回答(3)
0

博客园首页的“google搜索”每天使用量应该不少吧。

如果非得换,可以使用代理,但是现在的免费代理不好用。

Astar | 园豆:40805 (高人七级) | 2010-07-27 16:58
博客园首页的google搜索估计是和谷歌合作的,这和我们的性质不一样,我们和谷歌并没有某种形式上的合作关系的。
支持(0) 反对(0) 东风31 | 园豆:5 (初学一级) | 2010-07-27 17:13
@东风31:如果这样的话解决就有点困难了。
支持(0) 反对(0) Astar | 园豆:40805 (高人七级) | 2010-07-28 08:20
@Astar:是不是可以尝试,用一个域名申请广告联盟。然后请求的时候模拟域名的头...
支持(0) 反对(0) Astar | 园豆:40805 (高人七级) | 2010-07-28 08:21
我们还是想在软件方面着手来处理,这是我们可控的,其他的一是操作起来麻烦,而且受限。
支持(0) 反对(0) 东风31 | 园豆:5 (初学一级) | 2010-07-28 09:30
@东风31:软件是可以载入WebBorwse对象的吧。
支持(0) 反对(0) Astar | 园豆:40805 (高人七级) | 2010-07-28 09:33
不是的
支持(0) 反对(0) 东风31 | 园豆:5 (初学一级) | 2010-07-28 11:31
0
dudu | 园豆:30943 (高人七级) | 2010-07-27 17:23
额,我们现在有一个java版本的使用api的小工具,但是,使用api返回的搜索结果记录数和直接通过搜索请求的获得的结果数是不一样的。使用api返回的结果记录数要少。 回帖同时也拜拜大神 :)
支持(0) 反对(0) 东风31 | 园豆:5 (初学一级) | 2010-07-27 17:54
0

用 adsl 上网,装一个 adsl 自动拨号的软件,定时断开网络重新拨号,这样每次的IP都不一样,google 不可能把整个网段都封掉。

eaglet | 园豆:17139 (专家六级) | 2010-07-28 07:33
额,我们现在考虑的都是软件策略。而且我们现在是用的一个固定IP...
支持(0) 反对(0) 东风31 | 园豆:5 (初学一级) | 2010-07-28 09:29
@东风31: 软件方式几乎不可行,你就是用 IE 不停的点 google 来搜索也会出错,google 会要求你输入一个验证码。除非你控制访问频率,或者你有版本破解那个验证码,再或者在出现要输入验证码时,你通过人工干预一下,就是你的程序当发现要输入验证码了,就暂停,然后发出告警,通知人工输入验证码来干预。
支持(0) 反对(0) eaglet | 园豆:17139 (专家六级) | 2010-07-28 10:25
我觉得还是有些思路的,控制访问频率是一方面,同时也可以作些伪装,比如切换HTTP HEAD和COOKIE,让搜索引擎以为是同一个IP下的不同用户在提交搜索,不过,这只是我的想法,都还没有测试过。
支持(0) 反对(0) 东风31 | 园豆:5 (初学一级) | 2010-07-28 11:29
0

第一步就是确定一下。他们的封锁测略。比如最大间隔时间。一旦封锁,要多长时间解锁。

第二步再跟据你软件的实际应用需求。估算一下。大概要多少不同的IP。

第三步可以定时更换本机IP。 再加上,设置不同网段服务器,让主程序间接请求。

千羽 | 园豆:666 (小虾三级) | 2010-08-03 14:26
清除回答草稿
   您需要登录以后才能回答,未注册用户请先注册