在抓取信息的过程中，想必很多人都遇到过被禁止访问网站，但始终找不到原因。出现这类问题一般是以下两种原因，和我爱加倍游HTTP一起来看看吧~

原因一：爬虫程序出问题

如果你发现你抓取的信息与页面上正常显示的信息不同，或者你抓取的是空白信息，那么很可能是在网站上创建页面的程序有问题；如果爬行频率超过网站设置的阈值，将被禁止访问。解决办法就是优化爬虫程序，减缓抓取速度，减少对目标网站的压力。

原因二：IP地址被禁用

一般网站的反爬虫机制都是根据IP识别爬虫，服务器把你的IP记录下来，导致现有IP地址不可用。所以我们需要想办法修改现有的爬虫或者修改相应的IP地址。

这时我们会通过设置代理IP继续爬取工作，像我爱加倍游HTTP就有企业爬虫专用IP，支持更大并发、更快响应速度，更高的可用率，可以满足企业用户的爬虫使用需求。