爬虫时用requests解析到的内容与原网页内容不一致,实测有效!!!

您所在的位置:网站首页 python获取浏览器数据 爬虫时用requests解析到的内容与原网页内容不一致,实测有效!!!

爬虫时用requests解析到的内容与原网页内容不一致,实测有效!!!

#爬虫时用requests解析到的内容与原网页内容不一致,实测有效!!!| 来源: 网络整理| 查看: 265

在爬取数据时,遇到用requests解析到的内容与原网页内容不一致,且状态都为200. 原网址内容如下: 在这里插入图片描述 用requests解析到的内容如下:在这里插入图片描述 两者不一致,经过查询资料,得到解决方案如下: 加一个headers即可 在这里插入图片描述 那么headers中参数找法如下: 检查要爬取网页,找到headers一栏,对应找取相应信息在这里插入图片描述 最终结果如下: 在这里插入图片描述 大功告成!!!



【本文地址】


今日新闻


推荐新闻


CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3