对初学者来说，最好是先抓取网页页面简单、反爬虫关不上的网址，先让自己有个人爱好科研，再从抓取过程中一点点抓取爬虫的基本要素：下载网页，剖析网页页面，准确定位，获取数据信息。
如果遇到反爬虫网站，首先可以搞清楚什么是反爬虫。反爬虫是防止互联网技术爬虫随意收集站内信息的防范措施。一般有严格的IP限制、验证码短信、文字加密等。遇到反爬虫很简单，马上解决办法就是换IP，尤其是使用质量非常好的变极ip修改器，会大大提高反爬虫的概率。芝麻HTTP代理包括全国ip资源支持定制提取、快速响应、低延迟、稳定配合爬虫工作，地址：http://h.zhimaruanjian.com/?utm-source=yj&utm-keyword=?1
刚刚接触Python爬虫时，十几行编号，居然可以轻松抓取无数网页的网页信息，自动选择网页元素，自动整理成结构文本文档，令人嗔目结舌。而且这种基于爬虫抓取的数据信息可以应用于各种场景，如制造业分析，市场调研等。
对于互联网技术爬虫新手来说，Python语言粘性最好，可以用各种框剪结构作为突破点进行培训学习。经过一段培训学习，很多新手发现经常被网站限制IP，可以用代理IP解决这个问题。