爬虫
如果悲伤有颜色,那么一定是黄昏
未来可能转战掘金平台,请关注https://juejin.cn/user/1337472272565623
展开
-
Python爬取携程最新车票(附导出EXCEL)
这里使用的不是最优最快方式,没有选择爬取Api,而选择了使用爬取html分析dom的方式(略麻烦)以娱乐学习为主首先,我们先找到要爬取的网站 ,第一个第二个参数是中文出发地和目的地,day是yyyy-MM-dd格式日期,最后两个参数是URL编码的第一个和第二个参数,使用urllib进行编码https://trains.ctrip.com/TrainBooking/Search.aspx?fro...原创 2019-09-17 17:08:13 · 2791 阅读 · 1 评论 -
Python爬取豆瓣电影(附生成图表)
Python爬取豆瓣电影,最简单,最暴力,直接搞Api首先是api地址(地址去官网溜达一圈很容易就找到):requests.get('https://movie.douban.com/j/search_subjects?type=movie&tag={}&sort=recommend&page_limit={}&page_start=0'.format(tag,...原创 2019-09-17 17:30:13 · 1914 阅读 · 0 评论 -
Python爬取小说(附GUI图形界面)
Python爬取小说(附图形界面)首先爬的是基本全部免费小说的网站URL:http://www.quanshuwang.com/modules/article/search.php?searchkey={}&searchtype=articlename这里的搜索关键字是URL编码所以要通过urllib去把字符编个码才行,然后这搜索结果的界面分两种,一种就是只有索引名称唯一的比如(剑...原创 2019-09-26 11:55:01 · 3014 阅读 · 6 评论