python数据分析
快乐成长吧
努力努力再努力!
展开
-
【python数据分析+实战】【3.1】网络数据的获取与表示
一、爬虫简介•自动抓取互联网信息的程序• 利用互联网数据进行分析、开发产品基本架构• URL 管理模块 对计划爬取的或已经爬取的URL进行管理(比如失效的URL、已经抓取的URL、新来的呀爬取的URL)• 网页下载模块 将URL管理模块中指定的URL进行访问下载• 网页解析模块 解析网页下载模块中的URL, 处理或保存数据,如果解析到要继续爬取的URL,返回U...原创 2019-04-26 11:27:45 · 283 阅读 · 0 评论 -
【python数据分析+实战】【2.2】本地数据的采集与操作(CSV、Excel文件操作)
一、CSV文件• Comma-Separated Values• 以纯文本形式存储的表格数据(以逗号作为分隔符),通常第一行为列名但是可以用它打开,这里就自动解析成了行和列的显示风格了• 文件操作• numpy 的 np.loadtxt(), 较复杂• 利用pandas处理,快捷方便• 1、读操作• df_obj = pd.read_csv(),返回DataF...原创 2019-04-25 22:29:12 · 371 阅读 · 0 评论 -
【python数据分析+实战】【2.1】本地数据的采集与操作(txt、JSON操作)
一、概述:常用的本地文件格式• TXT 文件操作• JSON文件操作• CSV文件操作• Excel文件操作SQLite数据库基本操作SQL常用语法• 多表连接实战案例:欧洲职业足球数据库分析二 、常用的本地文件格式1、TXT文件操作• 由字符串行组成,每行由EOL (End Of Line) 字符隔开, ‘\n’• 打开文件• fi...原创 2019-04-25 22:15:11 · 375 阅读 · 0 评论 -
【python数据分析+实战】【1】Python语言及工作环境准备
一、数据分析-----定义:• 用适当的统计分析方法对收集来的大量数据进行分析• 提取有用信息和形成结论• 对数据加以详细研究和概括总结-----目的:从数据中挖掘规律、验证猜想、进行预测------涉及的能力:• 计算机知识 编程能力、量化操作、算法思想…• 数学和统计知识 常见的分布、最小二乘法…• 行业知识 业务场景、专业知...原创 2019-04-20 16:50:06 · 193 阅读 · 0 评论