新手进行数据的爬取，没有使用代理IP，是不是会疑问怎么IP突然被封住了呢？爬虫IP被限制会怎么样？

　　大家都知道，在网络爬虫爬取数据时，一般都需要使用代理IP突破限制，这样才能正常的采集到数据。

　　因为在网络爬虫抓取信息的过程中，如果抓取频率高过了网站的设置阀值，将会被禁止访问。通常，网站的反爬虫机制都是依据IP来标识爬虫的。

　　一、爬虫IP被限制会怎么样

　　知己知彼百战不殆，对于竞争对手或者目标消费群体的数据收集，我们乐此不疲。在ip代理盛行的今天，爬虫技术已经可以被我们充分发挥，海量收集数据，毫不手软。如果不用代理ip，我们的爬虫行动往往会受到很多限制，以至于爬虫IP被限制，采集不了数据。

　　要想成功的采集数据，可以使用代理IP来突破，比如精灵代理。

　　二、怎么选择爬虫代理IP

　　作爬虫采集的工程师们对高匿动态爬虫代理ip肯定不陌生，也接触过不少爬虫代理ip的提供商家，那么对于爬虫工作，要如何去选择爬虫代理IP呢？哪样的ip代理提供商更加适合自己呢？

　　1.ip量一定要大，都知道爬虫消耗起ip来是非常可怕的事情，一个爬虫项目一天消耗几百万上千万的ip资源是非常常见的事情，在我看来，能跟爬虫项目比消耗ip数量的，当属刷量业务了，当然咱们今天先不谈。

　　2.高质量，这里的高质量包括了ip的稳定性、可用率、连接速度，好的代理ip这几项都必须要确保，有些朋友说匿名级别，事实上收费的代理ip，高匿是基本要求，如果这点都做不到，只能说是骗钱的。

　　3.价格，事实上大部分的代理ip提供商的价格套餐都是不一样的。

　　而精灵代理，在时长套餐上特别灵活，提高六种时长套餐，时间越短，价格越优惠，可以根据实际需求来定，保证最大限度满足客户需求，确保资源不浪费，节约客户成本。

　　三、代理根据匿名程度分类

　　1.透明：服务器知道你使用了代理ip而且知道你真实ip

　　透明代理的意思是客户端根本不需要知道有代理服务器的存在，但是它传送的仍然是真实的IP。你要想隐藏的话，不要用这个。

　　2.匿名：服务器知道你使用了代理ip但不知道你的真实ip

　　普通匿名代理能隐藏客户机的真实IP，但会改变我们的请求信息，服务器端有可能会认为我们使用了代理。不过使用此种代理时，虽然被访问的网站不能知道你的ip地址，但仍然可以知道你在使用代理，当然某些能够侦测ip的网页仍然可以查到你的ip。

　　3.高匿名：服务器不知道你使用了代理ip和不知道你真实ip

　　高匿名代理不改变客户机的请求，这样在服务器看来就像有个真正的客户浏览器在访问它，这时客户的真实IP是隐藏的，服务器端不会认为我们使用了代理。