Selenium 的初衷是打造一款优秀的自动化测试工具，但是慢慢的人们就发现，Selenium 的自动化用来做爬虫正合适。

我们知道，传统的爬虫通过直接模拟 HTTP 请求来爬取站点信息，由于这种方式和浏览器访问差异比较明显，很多站点都采取了一些反爬的手段，而 Selenium 是通过模拟浏览器来爬取信息，其行为和用户几乎一样，反爬策略也很难区分出请求到底是来自 Selenium 还是真实用户。而且通过 Selenium 来做爬虫，不用去分析每个请求的具体参数，比起传统的爬虫开发起来更容易。Selenium 爬虫唯一的不足是慢，如果你对爬虫的速度没有要求，那使用 Selenium 是个非常不错的选择。

本文为什么使用Selenium呢？就是因为在爬取携程网的过程中通过传统的urllib.request.urlopen无法识别延迟加载或ajax或动态生成的哪些tag和数据。

所以在第一篇主要使用了urllib.request.urlopen和BeautifulSOAP，在第二篇解析每个酒店的时候使用了selenium 和BeautifulSOAP，在本篇完全没办法解决延迟加载问题，不得已使用了selenium，又嫌在BeautifulSoap之间切换过于麻烦，不得已一边学一边写，使用了更多的特性，比如find_element_by_css_selector、find_element_by_id，也用到了模拟事件点击问题和窗口翻滚，总之一边踩坑一边进步。

对了最重要的一件事就Chrome浏览器的开发者工具，不停的查看一层层的tag。