这篇文章主要介绍了python爬虫爬取微博评论，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧

数据格式：{“name”:评论人姓名,“comment_time”:评论时间,“comment_info”:评论内容,“comment_url”:评论人的主页}

以上就是我们需要的信息。

具体操作流程：

我们首相将主页获取完成以后，我们就会发现，其中 的内容带有相关的反爬措施，获取到的源码中的信息含有很多的转义符“”，并且其中的相关“”是通过html的语言直接编写的，这样会导致我们的页面解析出现一定的问题，我们可以用replace方法直接将这些转义符全部去掉，然后我们就可以对这个页面进行正则处理，同时我也尝试过用其他的解析方法，但是其中遇到了很多 的问题，所以我就不过多的介绍了。

当我们获取到了每一篇微博的链接，Axitrader返佣http://www.fx61.com/brokerlis...，还需要获取一个很关键的值 id ，这个值有什么用呢，其主要的作用就是在评论页面的ajax页面的拼接地址上需要使用到。接下来就是需要寻找出我们找到的这两个ajax的url有什么特点或者是规律：

当我们从这些ajax中找到规律以后，不难发现，这个爬虫差不多大功告成了。

下面我就展示一下我的代码：

注意：请在headers中添加自己的cookie