前面几篇博客主要介绍的是对于爬虫所需要的库以及相关知识点的介绍，这篇博客就是让我们练习一下真正的爬虫该怎么写。下面我主要讲两个实例，一个是b站新番的信息爬取，另一个是猫眼电影TOP100的相关信息爬取。

首先我们需要request和re模块，我采用函数结构话来写爬虫，你们可以看看，首先我们找到我们需要爬取的详情页b站新番排行榜。 我们需要爬取得信息有上面的新番排名，动漫名称，播放量，弹幕量，追番数，以及最后的综合得分。首先我们看一下网页源代码，发现信息都在源代码中。怎么看源代码我就不讲解了。我就直接开始讲怎么开始爬虫吧。

我采用函数的形式，设置相关参数，然后请求的时候就直接传递url这个参数就行啦。

由于这个网站比较简单，对于请求头等参数我们不需要配置，然后我们直接调用它。

这里我就不显示返回的结果，我们发现返回的信息就是网页源代码了，现在我们需要分析了，因为每部新番在网页展示的时候，也是一种列表形式的呈现，所以我们只要找到相似的列表单元格式，就可以用正则表达式匹配。在我看了一会源代码发现：

每一条新番的信息都是这样呈现的，现在我们只需要将对应正则表达式写出来就可以了，结合上篇博客，我花了一两分写的一个比较简单的刚好匹配出来，你们可以看一下：

猫眼存在轻微的反爬虫，如果速度过快，则会无响应，所以这里又增加了一个延时等待。最后我们看看运行结果，只显示部分：

这个爬虫是不是很简单，通过这两个简单的实例我们了解到爬虫的基础流程，也大致掌握前面这些库的用法，此外我们在做数据采集少不了保存，后面我会有一篇博客专门介绍这个。