- 博客(31)
- 收藏
- 关注
转载 《金融数据分析导论:基于R语言》习题答案(第一章)
《金融数据分析导论:基于R语言》是芝加哥大学的教授Ruey S.Tsay所著,李洪成、尚秀芬、郝瑞丽翻译,机械工业出版社出版,是一本学习R语言和金融数据分析的很好的参考书籍。** 注:这些答案都是本人自己做出的结果,可能有错,仅供参考,发现有错的地方欢迎大家指出。 **** **** 第一章 **1.首先,将数据包放在当前工作目录下library(fBasics)da = read.table("d-axp3dx-0111.txt",header=T) % 读出数据he
2021-07-02 19:37:54
3960
2
转载 《Python数据分析与展示》讲解numpy,Matplotlib,pandas 详细笔记第0周 Python基本语法元素第1周 数据分析之表示第2周 数据分析之展示week3 padas
第0周 Python基本语法元素conda : 一个工具,用于包管理和环境管理,其中:包管理与pip类似,管理Python第三方库环境管理能够允许用户使用不同版本Python,并能灵活切换 anaconda :一个集合,包括conda、某版本Python、一批第三方库等 conda将工具、第三方库、Python版本、conda都当作包,同等对待 ipython 第1周 数据分析之表示单元1 NumPy库入门 一维数据 :由对等关系的有序或无序数据构
2021-07-02 19:33:15
483
转载 《Python数据分析与挖掘实战》第八章学习-关联规则Apriori
import pandas as pd #自定义连接函数,用于实现L_{k-1}到C_k的连接 def connect_string(x, ms): x = list(map(lambda i:sorted(i.split(ms)), x)) l = len(x[0]) r = [] for i in range(len(x)): for j in range(i,len(x)...
2021-07-02 19:29:53
735
转载 《Python数据分析与挖掘实战》第12章(下)——协同推荐1 基于物品的协同过滤推荐2 随机推荐3 按照流行度推荐
# 确定用户未浏览的网页(可推荐的)的数据表格 TEST = 1-df_test test2 = DataFrame(TEST, index = test.columns, columns=test.index) print test2.head() print test2.shape # 确定网页浏览热度排名: hotPopular = data['fullURL'].value_counts() hotPopular = pd....
2021-07-02 19:28:24
140
转载 《Python数据分析与挖掘实战》第12章(上)——协同推荐
counts1_ = DataFrame(counts1) counts1_[1]=1 # 添加1列全为1 a = counts1_.groupby('realIP').sum()#统计各个“不同点击次数”分别出现的次数# 也可以使用counts1_['realIP'].value_counts()功能 a.columns=[u'用户数'] a.index.name = u'点击次数' a[u'用户百分比'] = a[u'用户数']/a[u'用户数'].sum...
2021-07-02 19:27:10
200
转载 《Python数据分析与挖掘实战》第10章 热水器用户行为分析与事件识别
本文是《Python数据分析与挖掘实战》的实战部分的第10章的数据——《家用电器用户行为分析与事件识别》做的分析。1.背景与挖掘目标国内某智能热水器,在状态发生改变或有水流状态时会采集数据,该厂商根据采集到的数据进行用户行为分析,热水器不仅可以用来细雨还可以洗手、洗脸、刷牙、洗菜等。本案例基于热水器采集的时间序列数据,将顺序排列的离散的用水时间节点根据水流量和停顿时间间隔划分不同大小的时间区间,每个时间区间可以理解成一次完整用水事件。挖掘目标: 第一,根据热水器采集到的数据,划分一次完整用水事件
2021-07-02 19:25:38
1749
转载 《Python数据分析与挖掘实战》第9章——svm1 背景与目标分析2 数据预处理3 模型构建
import pandas as pd from pandas import DataFrame import numpy as np # 读取类型1的表格中的颜色矩数据 d1 = pd.read_csv('type1.csv',encoding="gbk") # 读取类型2的表格中的颜色矩数据 d2 = pd.read_csv('type2.csv',encoding="gbk") # 读取类型3的表格中的颜色矩数据 ...
2021-07-02 19:23:23
253
转载 _PowerBI_数据分析之Power BI Desktop数据整理
界面功能介绍Power BI中的查询编辑器根据下列要求将销售记录表导入Power BI Desktop中将数据导入Power BIPower BI中的模型关系新建度量值及调整度量值新建列输入数据新表(链接回表)SUMMARIZE函数 把其他表的字段调取&汇整到新表引用 公式:SUMMARIZE(表,GroupBy_ColomnName1,……) 第一个参数:表名称必须是多端的 第二个参数:其他的字段必须是和多端有关系
2021-07-02 19:21:43
513
转载 _Excel_ 数据分析之初识Power Pivot&Power View
Power Pivot VS ExcelPower Pivot 与 Power BI 其他组件的关系图解用Power Pivot 创建一个简单的多表数据模型并生成Power View报告导入源数据创建关系两种方法,如以下两图所示:*多端对多端无法创建关系,创建关系的两列数据中必须有一列的数据是不含重复项的。创建度量值生成数据透视表创建Power Pivot数据透视表报告创建Power View演示报告
2021-07-02 19:20:19
1071
转载 [面试]腾讯数据分析秋招四面经历
一、先放上腾讯招聘公众号查询到的信息二、面试问题秋招提前批,所以没有笔试,但腾讯数据分析笔试一直很简单,略过。初始:自我介绍+问实习经历/项目经历+问很基础的sql题(让你直接说答案)+算法原理(随机森林、决策树和xgboost等,主要是基于项目),时间大概在二十五分钟左右复试:一个小哥哥,晚上十点多打过来的,估计工作太忙了。自我介绍+实习的项目细节(不能说你做提数、周报和ppt那些没有意义的活,直接问实习贡献了什么价值)+学校数据分析项目的具体思路(为什么不用xx方
2021-06-29 20:11:14
469
转载 [狗子的PM之路]PM的数据分析思路
_参考自: http://www.woshipm.com/pmd/354728.html ,侵删 _一、数据分析目的:明确数据分析的目的,比如产品改版效果分析,寻找产品使用缺陷确定改版方向等。然后根据目的搜集相关的数据。二、数据收集:1、数据收集离不开数据埋点,关于埋点的介绍可参照 https://blog.csdn.net/TOMOCAT/article/details/81114298 。2、产品数据指标: 新增:新用户增加的数量和速度。如:日新增、月新增等。
2021-06-29 20:09:54
168
转载 [办公] Excel 数据分析两个变量的相关性分析
准备数据拓展Excel数据分析功能选择excel加载项:勾上分析工具库:分析相关系数数据分析 - 相关系数 - 选择输入范围 - 输出范围点击确认计算出相关R值 :R值0.4~0.6属于弱相关计算R方:插入散点图 - 添加线性 - - 显示公式和R方ps: 会使用python的同学可以直接用pandas的矩阵相关系数corr()输出...
2021-06-29 20:03:02
3319
转载 [SQL Server玩转Python] 二.T-SQL查询表格值及Python实现数据分析一. T-SQL调用Python脚本入门知识二. T-SQL含查询的Python脚本三. Python读取文
在开发项目过程中,更多的是通过Python访问SQL Server数据库接口,进行数据挖掘的操作;而SQL Server2016版本之后,嵌入了强大的R、Python、Machine Learning等功能,尤其是Python代码置于存储过程中,可以实现一些便捷数据分析功能。本系列文章主要讲解SQL Server 2017实现Python数据分析的文章,同时对比两者的优劣。前一篇文章主要讲解SQL Server开发Python环境的安装过程及基本的数据分析代码实现,本文主要讲解T- SQL实现表的查询及
2021-06-29 20:01:39
347
转载 [python数据分析]美国波士顿犯罪数据
import pandas as pd import numpy as np import matplotlib.pyplot as plt import seaborn as sns import time from folium import Map from folium.plugins import HeatMap[/code]folium是一个地理信息可视化库,这里我用作画热力图## 读入数据读入数据,再查看一下每一年有...
2021-06-29 19:31:18
1250
转载 [python数据分析] 简述幂率定律及绘制Power-law函数
这篇文章主要是最近研究人类行为应用的内容,主要简单叙述下复杂网络的幂率分布以及绘制Power- law函数一些知识,同时是一篇在线笔记。希望对您有所帮助,如果文章中存在不足或错误的地方,还请海涵~ 1.幂率分布 2.Zipf定律 3.Scale free 4.Python绘制幂率分布 这篇文章基础知识转载了别人的内容,这里强烈推荐大家阅读原文。此篇文章主要是讲述代码部分,定律我也还在学习中,和大家共勉。一. 幂率分布在我们的日常生活中Power Law(幂次分布,Power-law Distri
2021-06-29 19:29:39
2526
转载 PART 6 业务数据分析(占比 30%)
PART 6 业务数据分析(占比 30%)总体要求理解业务数据分析方法、掌握业务数据分析流程、能够使用及设计创建业务指标、能够 结合业务模型及业务分析方法正确理解业务问题,找到问题原因,并能够提出解决问题建议1 、数据驱动型业务管理方法 ( 占比 3% )【熟知】熟知数据从业务中来到业务中去的全过程熟知数据驱动型业务管理的价值意义熟知数据驱动型业务管理流程熟知数据驱动型业务管理思维方式数据 + 经验决定业务策略,经验比数据更重要【应用】能够通过数据驱动型业务管理流
2021-06-29 19:22:15
458
转载 [从零掌握数据分析必备Excel技能(一)数据的输入]
写在前头尽管数据科学方向常用python、R和scala等工具,但简单的数据可视化和数据处理往往也需要Excel的辅助。 一方面本系列教程面向数据分析新手 ,详尽地介绍Excel的各种操作,也同样适合中级分析师查漏补缺; 另一方面本教程面向数据处理和分析,适合需要全面且系统掌握Excel数据分析技能的同学 。本章主要介绍Excel数据输入一些需要注意的点。基本数据的输入1、日期和时间型数据输入日期和时间虽然也是数字,但是 Excel识别出你输入的数字是日期/时间格式 时,单元格的格式..
2021-06-29 17:35:34
293
转载 pandas & matplotlib 用于数据分析和可视化
上一个任务通过requests、BeautifulSoup4两个功能强大、用法简洁的函数库已经获取到了楼盘名、地址和价格这些新房信息,并且保存为csv格式文件,csv文件可以用excel打开并进行编辑。当然爬取数据只是第一步,“白嫖”网站辛苦整理的数据毕竟不太合适,所以这些数据如何产生价值呢? 设置一个场景:当你想要在一座城市买房,在去各个售楼部踩点之前要做一些准备工作。现在新房的信息已经收集完了,excel可以很快得出在售楼盘的数量、房价最高和最低,利用手机中的地图app可以很快搜索到楼..
2021-06-29 17:32:16
999
转载 django框架使用views.py的函数对表进行增删改查内容操作详解【models.py中表的创建、views.py中函数的使用,基于对象的跨表查询】
本文实例讲述了django框架使用views.py函数对表进行增删改查内容操作。分享给大家供大家参考,具体如下:models之对于表的创建有以下几种:一对一:ForeignKey("Author",unique=True), OneToOneField("Author")一对多:ForeignKey(to="Publish",to_field="id",on_delete.CASCADE)多对多:ManyToManyField(to="Author")首先我们来创建几张表 .
2021-06-22 20:09:11
365
转载 Django框架设置cookies与获取cookies操作详解
本文实例讲述了Django框架设置cookies与获取cookies操作。分享给大家供大家参考,具体如下:在Django里面,使用Cookie和Session看起来好像是一样的,使用的方式都是request.COOKIES[XXX]和request.session[XXX],其中XXX是您想要取得的东西的key, 很久以前,写过一篇 django怎么处理session 的文章: django 自定义session 处理 , 今天对cookies 进行了同样的操作: from djan..
2021-06-22 20:06:30
1786
转载 django框架forms组件用法实例详解
""" Form classes """ from __future__ import unicode_literals import copy from collections import OrderedDict from django.core.exceptions import NON_FIELD_ERRORS, ValidationError # BoundField is imported for b...
2021-06-22 20:03:55
499
转载 django框架cookie和session用法实例详解
本文实例讲述了django框架cookie和session用法。分享给大家供大家参考,具体如下:首先知道http协议http协议它是无状态的协议,验证的信息不会保留基于请求响应,短连接cookie指一段小信息,内部是一组组的键值对,保存在客户端访问一个地址时,服务器生成一个cookie,由浏览器保留在本地,再次访问地址时就会携带这个cookie,一般用于用户信息的验证cookie的设置: obj.set_cookie(key,value,...) 下面...
2021-06-21 21:26:21
125
转载 Django分组聚合查询实例分享
多表查询 增删改 一对多:先一后多,外键可以为对象或依赖表的主键(publish and book) publish = Publish.objects.create() Book.objects.create(....publish=publish|publish_id=publish.id)删: 默认存在级联删除改: book修改外键,外键一定存在多对多:关系表的获取(book(主键) and author) book.author增:book.au...
2021-06-21 21:24:52
656
1
转载 Django对接支付宝实现支付宝充值金币功能示例
很多网站里都有金币、积分之类的虚拟货币,获取这些往往需要充值。那么问题来了,如何在Django中对接支付宝实现支付宝充值金币的功能呢?网上很多资料都是电商的,那些都会带有订单系统之类比较复杂,而充值金币功能不需要实现那么多功能。效果图如下:现在就来实现Django对接支付宝支付功能吧!登录支付宝开放平台点击进入蚂蚁金服开放平台 https://open.alipay.com/platform/home.htm 进入支付宝沙箱环境 https://openhome.alip
2021-06-21 21:21:04
690
转载 Django单元测试工具test client使用详解
The test client test client是一个python类,来模拟一个简单的“哑”浏览器,允许你来测试你的view函数.你可以使用test client完成下列事情:1.模拟"Get"和"Post"请求,观察响应结果--从HTTP(headers,status codes)到页面内容. 2.检查重定向链(如果有的话),在每一步检查URL和status code。 3.用一个包括特定值的模板context来测试一个request被Django模板渲染。 >>&g..
2021-06-21 21:17:55
1249
转载 Django ORM 练习题及答案
1.modles中表结构 #出版社 class Publisher(models.Model): name = models.CharField(max_length=32) city = models.CharField(max_length=32) def __str__(self): return "<Publisher object: {} {}>".format(self.id, self.name)...
2021-06-17 21:30:31
594
转载 Django 路由控制的实现
一 Django中路由的作用URL配置(URLconf)就像Django 所支撑网站的目录。它的本质是URL与要为该URL调用的视图函数之间的映射表;你就是以这种方式告诉Django,对于客户端发来的某个URL调用哪一段逻辑代码对应执行典型的例子: from django.urls import path urlpatterns = [ path('articles', views.special), ] articles这个路由对应...
2021-06-17 21:26:12
125
转载 Django Rest framework之认证的实现代码
django rest framework 官网 在学习django rest framework(下面简称drf)之前需要知道 对RESTful API设计有一定了解 对django框架有一定认识,本身drf就是基于django做的 对python面向对象编程有了解(drf会对一些原生的django类做封装) ** 一、前言 **在学习 drf 之前的时候,先简单说一下需要的预备知识。在 django 中,路由匹配之后,会进行路由分发,这个时候会有两种选择模式的选择。
2021-06-17 21:23:51
111
转载 APIStar一个专为Python3设计的API框架
为了在 Python 中快速构建 API,我主要依赖于 Flask 。最近我遇到了一个名为 “API Star” 的基于 Python 3 的新 API 框架。由于几个原因,我对它很感兴趣。首先,该框架包含 Python 新特点,如类型提示和 asyncio。而且它再进一步为开发人员提供了很棒的开发体验。我们很快就会讲到这些功能,但在我们开始之前,我首先要感谢 Tom Christie,感谢他为 Django REST Framework 和 API Star 所做的所有工作。现在说回 API Star
2021-06-15 19:22:28
295
原创 15款Python编辑器的优缺点,别再问我“选什么编辑器”啦
本文介绍了多个 Python IDE,并评价其优缺点。读者可以参考此文列举的 Python IDE 列表,选择适合自己的编辑器。写 Python 代码最好的方式莫过于使用集成开发环境(IDE)了。它们不仅能使你的工作更加简单、更具逻辑性,还能够提升编程体验和效率。每个人都知道这一点。而问题在于,如何从众多选项中选择最好的 Python 开发环境。初级开发者往往面临这个问题。本文将概述最受程序员欢迎的 Python IDE,以及其他值得考虑的选项。在此之前,我们先来看看 IDE 是什么。什
2021-06-15 18:07:44
272
转载 10个易被忽视但应掌握的Python基本用法
我一辈子都在写代码,但从来没有掌握编码的精髓。大部分情况下使用Visual Basic,因为我用VB最舒服。同时还略微了解一点其他语言(R、C、JavaScript、Applescript、Hypertext和1979年学习的BASIC)。几年前,我决定只用Python,以此来提高我的编码能力。在此过程中重复发明了许多轮子,但我并不介意,因为我享受解决问题的乐趣。同时有时能发现更有效、Python式的解决方案。时间长了以后,会有顿悟的时刻,意识到根本没必要用困难且冗长的方式处理问题。下面列出10条Pytho
2021-06-15 18:01:47
110
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人