网络爬虫（Web crawler），是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本，它们被广泛用于互联网搜索引擎或其他类似网站，可以自动采集所有其能够访问到的页面内容，以获取或更新这些网站的内容和检索方式。

说到爬虫，自然就想到了python爬虫，python可谓是爬虫入门的不二选择。但是，在爬虫工作中，遇到最多的一个问题就是封IP。由于频繁抓取网站信息，你很可能面临IP被封，爬虫和反爬虫从一直以来都是一个道高一尺魔高一丈的架势。反爬虫技术增加了爬取的难度，各路crawler的爬取过程可以说是一个和各种网站站长斗智斗勇的过程，各种解决方式可谓层出不穷，比如你可以使用HTTP代理IP来解决。

精灵代理IP平台针对python爬虫用户提供非常优质的HTTP/HTTPS代理IP，提供API端口，日更新IP量数以万计，满足各种规模的代理IP需求。