![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
爬虫
文章平均质量分 92
于科技人文间徘徊
收和颜而静志兮,申礼防以自持。
展开
-
金融数据分析(六)亚马逊商品信息自定义获取(requests库)
案例(三)简单金融数据分析项目一:不同按揭额度下还款总额的变化趋势设计一个程序,比较在相同贷款额度(如100万元人民币)但不同按揭(月)额度(至少计算三种按揭额度)的情况下各自还款总额的变化趋势。...原创 2020-09-18 09:11:49 · 703 阅读 · 0 评论 -
金融数据分析(五)爬取股票数据——方法二:scrapy爬虫框架
项目二:用两种不同的方法爬取股票数据方法二:scrapy爬虫框架此案例是运用scrapy框架对相关内容进行抓取。安装scrapy框架打开cmd,输入以下代码进行安装:pip install scrapy验证是否安装成功:scrapy -h创建一个新的Scrapy爬虫工程scrapy安装成功后,继续在cmd里输入代码创建工程。将目录切换到想要创建爬虫项目的路径下,执行:scrapy startproject baidustocks执行完毕后,会在目录下生成一系列文件夹和.py等文原创 2020-09-17 08:30:21 · 1924 阅读 · 0 评论 -
金融数据分析(四)爬取股票数据——方法一:requests&bs4&re
案例(二)爬虫预热项目二:用两种不同的方法爬取股票数据方法一:requests&bs4&reimport requestsfrom bs4 import BeautifulSoupimport redef getHTMLText(url, code="utf-8"): kv = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, li原创 2020-09-16 16:15:58 · 1570 阅读 · 3 评论 -
金融数据分析(三)当当网店铺商品爬虫——爬虫类书籍为例:requests&bs4
案例(二)爬虫预热项目:京东店铺商品爬虫——以华为为例原创 2020-09-15 14:49:58 · 607 阅读 · 1 评论 -
金融数据分析(二)python预热:用bs4爬取某省的大学排名
案例(一)python预热项目三:爬取某省的大学排名输入某省名称,从上海交通大学研发的“软科中国最好大学排名2020”(http://www.zuihaodaxue.cn/zuihaodaxuepaiming2020.html)爬取数据,输出该省2020年的大学排名。输入: 广东输出:import requestsfrom bs4 import BeautifulSoupimport bs4def getHTMLText(url): try: r = reques原创 2020-09-15 10:02:32 · 268 阅读 · 0 评论