python爬虫爬取艺龙国际酒店信息

项目需要用到数据，在网上找了好久的数据都没有结果，就自己写了爬虫。没咋写过程序，为了简单都没有用函数。中间遇见了不少问题，首先爬虫只能爬取前十条信息。为了解决这个问题，上网搜了一些信息。网上说动态网页抓取可以用selenium。于是按照书本和网上的教程安装了selenium和phantomjs。但是问题仍然没有解决，后来试了下用匿名ip的方法，失败。接着添加了模拟下拉网页的代码。成功获取了第一页的30条信息。接着想办法模拟翻页，找了几行代码结果就成功了。这样我就可以爬取某一天纽约所有酒店的信息了。然后考虑连续爬取30天的信息。这个部分想了好久

给一张艺龙选择日期的截图

本来以为可以模拟点击，但是搞了一会不行
然后发现了可以直接输入日期。模拟输入。不得不赞selenium的强大
下面是源代码，不想说太多话

# -*- coding: utf-8 -*- 
from selenium import webdriver
#import urllib2
import time 

from bs4 import BeautifulSoup
#import urlparse
#service_args=['--proxy=127.0.0.1:9150','--proxy-type=socks5',]<