一、准备工作

之前不理解爬虫的时候，感觉很强大，当你理解后会发现确实很强大，哈哈，开个小玩笑。言归正传，当你深入的了解，会发现爬虫其实就是解析网页内容，利用xpath、selector、re等语法抽取所需要的数据内容。所以说学习爬虫，首先要学会处理HTML的文本页面（包括抽取中间的文本内容，下载图片，抽取url等）。

     在处理网页抽取数据的时候可以用以上5个模块，不过3、4、5是比较常用的，具体可根据自己的喜好选择用哪个，以上模块不用全部学习，多了也不一定都能记着（如果你的记忆力超强，算我没说，哈哈），选一两个学就好。既然已经学会了数据的抽取接下来就是如何获取网页的数据内容了。

二、获取网页数据及处理

​

       当学习完以上后基本就选小成了，以下推荐一个爬虫的小游戏可以练练手，一共四关，当过了第一关后，第二关才会出现，当然你也可以直接在网上搜索第二关的地址，​​，这几关网上有答案，但一定要先自己写然后再去参考答案哦，办法不止一种，相信自己

     还可以参考这两个地址，主要讲爬虫的思路及一些实现，参考地址：

​