HTTP资源显示请求频繁的原因
253
那是因为，你用的 代理IP 凑巧是别人用过且用来访问的网站相同，用的还比较频繁，这种情况一般出现在免费代理IP、普通代理IP或者开放代理IP，还有一些IP池比较小的 共享IP 池上。很多朋友总觉得IP池太大，我也用不了那多啊，不是浪费吗？能不能给个小点的IP池，价格再降低一些呢。这样的想法是不对的，IP池小，用的人多，那么项目冲突的几率也就越大，所以我们在找代理IP的时候，在保证IP有效率的同时IP池越大越好的，这样可以保证IP的新鲜度。
除了更大的共享IP池可以缓解或者避免这种情况， 独享IP 池和优质代理也是一个不错的选择，独享IP池是一个人独自享用，那么就没有人会和你冲突，当你控制每个IP都在目标网站设置的阈值内，就不会因为访问频繁而被封IP；一手私密代理做了项目隔离，每个人做不同的项目，互不干扰，互不冲突，这样也可以避免和别人的项目冲突，遇到这种错误的几率也很小。
所以，当您遇到“您的请求太过频繁，请稍后再试”时，不要慌，要镇定，检查下自己的爬虫策略，是否真的访问太过频繁，检查下自己的代理IP是否真的比较干净，调整自己的策略，选择更加纯净的IP，就能有效的避免这个错误了
相关文章
2019年10月26日
在现在这个网络迅速发展的今天，每天都有数以万计的新事物在产生，就像定制 IP ， 代理IP 进入人们视野生活工作中也不过是几年的时间，所以定制IP的出现自然不是很突然， ...
2019年10月26日
人类进入网络时代，信息的传播与交流方式都发生了很大的改变。好比国内你有身份证，出国你有护照，在互联网中你也有自己的身份唯一标识，这就是 IP 。当你访问目标网站时，对方通过记录你的I ...
2019年10月24日
我们知道， 代理IP 按请求信息的安全性分类可以分为透明代理、普通匿名代理和高级匿名代理三种。但是，按照使用的目的不同代理IP可以分为以下十几种。 1、 Http代理 ...
2019年10月24日
作为每天使用 python爬虫 的从业工作者，你是否遇到过 IP地址 一直被目标网站封杀却找不到原因的情况？在这里，专注于高匿可用的 http代理 ip地 ...
2019年10月22日
我们在平时浏览一个网站的时候都发现，如果在一个网站上操作过快，就容易出现 IP地址 受限、限制登录等问题。例如在贴吧发帖的时候，怎么也发布不成功帖子，这就有可能是IP地址被屏蔽。 ...
2019年10月17日
现在市面上 IP 代公司出售的 代理IP ，从隐藏级别上区分，可分为三种，即透明代理、普通代理和高匿名代理。三者区别如下： 1、透明代理：服务器知道你使用了代理I ...
2019年10月17日
常见的 HTTP代理 IP分类有三种：透明代理、普通代理、高匿名代理。其中透明代理和普通代理并不推荐使用，虽然也有代理效果，但是会被网站服务器识别出使用了 代理IP ， ...
2019年10月10日
IP 代表了电脑在Internet因特网上独一无二的地址，用来与其他节点(电脑)相连沟通。作用如同门牌号码一般。 一、什么叫动态 ip代理 软件 动态ip ...
2019年10月10日
首先我们需要在公共场合的电脑上获取一些信息，有了这些信息我们才知道手机上该怎么修改。我们直接到电脑的“网络连接”面板中，找到“本地连接”点击右键，在弹出来的列表中选择“状态”。 此时我们看到 ...
2019年10月8日
动态IP 和 静态IP 的区别在于：动态IP需要在连接网络时自动获取 IP地址 以供用户正常上网，而静态IP是ISP在装机时分配给用户的IP地址，可以直接连接 ...
