注册
登录
提问时间:2019/7/2 15:23:50    楼主:未知网友   阅读量:84

昨天有朋友问我,为什么使用了你家的代理IP还是会报错,于是我问:报的什么错?

朋友说:这个错误本身是因为网站端有访问次数限制,所以我才打算用代理去解决这个问题的,但是为什么我使用了你们的代理还是出现出现这个错误

我听了有点奇怪,于是建议:网站端有访问次数限制的话,您要测试了解到它针对一个IP到底有多少次数限制,比如是10次,那么您用一个代理IP,访问到了9次,就要换一个代理IP。

很多朋友都对代理IP的作用有误解,有朋友认为用了代理IP,就可以无视网站反爬策略所限制访问次数,其实并不能,代理IP也是一样的,访问次数达到了目标网站所设置的阈值时,也会受到限制。

之前也有一些朋友问我,你家的代理IP的QPS是多少,我一时没有反映过来,经过细问才知道是问我单个代理IP一秒钟可以发送多少个请求。我告诉他:我们不限制您使用代理1秒钟内发送多少个请求,但是目标网站可能会限制的。

后来这位朋友又来找我了,为什么使用了你家的代理IP还是会被识别。我说:您要研究下对方的反爬策略呢,比如访问频率不能过快。他不乐意了,我用了代理IP啊,用了代理IP还要受到限制,那花钱买代理IP做什么,钱多吗?

这位朋友显然也对代理IP的作用有误解,他认为用了代理IP就可以无视对方的反爬策略了,这显然是不可能的,用了代理IP一样要遵循反爬策略的,不能为所欲为。

有朋友问:既然这样,我要这代理IP有何用?

其实,代理IP是可以解决网站反爬策略限制访问次数或者访问频率的问题的,但不是单个IP,而是大量的高效优质代理IP,当访问次数或者频率即将或者已经到达阈值时,就切换新的代理IP,正所谓“封了一个IP,还有千千万万个IP”,代理IP的作用也在于此。