编程
文章平均质量分 64
ChigoStar
你如何吃掉一头大象
展开
-
Python爬虫之路
上周温习完张新民在网易公开课上讲的《企业财务报表分析》。犹记得初学时看到报表上一串串的数字,是空洞的,了无生机。温习时再看,那些数字仿佛活了,争先恐后地述说它们背后的故事。阅读财报可以是一件有趣的事情。本周偶然阅读到“他山攻石”的文章和其开发的他山石软件。我惊叹于开发者对财报获取,分析研究,可视化等的自动化和集成化。直观简明,十年四季,所有财报,鼠标点击间,统统囊括。如此阅读财报,不要太爽啊!惊叹...原创 2018-01-22 19:51:29 · 504 阅读 · 0 评论 -
爬虫Scrapy一点儿笔记
在学习爬虫的过程中遇到的一些问题梳理一下。Chrom复制的XPath爬取为空在爬取某些网站时会遇到一件令人沮丧的事情。例如,爬取网易财经中贵州茅台的财务数据:scrapy shell http://quotes.money.163.com/f10/zcfzb_600519.html#01c05在Google Chrome浏览器中,选择贵州茅台2017-09-30资产负债表当中货币资金的值,并复制出...原创 2018-02-04 23:15:40 · 262 阅读 · 0 评论 -
Scrapy爬虫数据入库
爬取的数据如何存储?使用数据库存储数据。数据库有许多,大至MySQL、Oracle,小至SQLite,用哪种数据库?用SQLite。使用SQLite数据库需要掌握一下知识:SQLite数据库的安装与使用;SQLite语法;Python操作SQLite数据库的方法。...原创 2018-02-06 22:35:30 · 653 阅读 · 0 评论 -
腾讯股票数据接口
0:未知 1:名字:name 2:代码:code 3:现价:trade 4:昨收:yestclose 5:今开:open 6:成交量(手):volume 7:外盘 8:内盘 9:买一10:买一量(手)11-18:买二 买五19:卖一20:卖一量21-28:卖二 卖五29:最近逐笔成交30:时间31:涨跌:change32:涨跌幅:changepercent33:最高:high34:最低:low3...原创 2018-03-12 23:12:20 · 6316 阅读 · 0 评论 -
第三章 Scrapy爬虫实战(1):爬取structurae.net结构列表
转载请注明作者和出处:https://blog.csdn.net/lettmefly运行平台:WindowsPython版本:Python 3.7IDE:Pycharm目录1. 引言2. 要点3. scrapy项目编写3.1 创建项目structurae3.2 scrapy shell 分析网站3.3 编写items.py3.4 编写structure....原创 2018-12-23 22:30:01 · 276 阅读 · 0 评论 -
第一章 Scrapy入门
转载请注明作者和出处:https://blog.csdn.net/lettmefly运行平台:WindowsPython版本:Python 3.7IDE:Pycharm目录1. 引言2. 创建项目3. 编写Spider4. How to run our Spider5. 下一步1. 引言本章仅介绍Scrapy的基础,学习目标是:掌握创建Scrapy项目的...原创 2018-12-16 21:50:35 · 190 阅读 · 0 评论