开始数据分析之旅
文章平均质量分 83
yibo17071
希望成为数据分析的大牛
展开
-
引人深思的9张数据逻辑图
大牛的九张图,帮您更清晰地了解自己的行为、目标和思考方式。当我们追逐梦想的时候,方向决定着对错,方法决定着成败。1、生活总是在不经意之间错过了哪些最美好的东西;当数据分析饼图遇到逻辑关系时要这样去理解。2、当下是通向未来的台阶,明天总比今天更重要;数据分析中精确预测比较难,生活也是一样。3、和得到的相比,关系可以让你得到更多满足;数据分析的柱形图,能转载 2014-11-18 17:34:21 · 903 阅读 · 0 评论 -
SPSS因子分析经典案例分享
http://www.datasoldier.net/post/40.html因子分析已经被各行业广泛应用,各种案例琳琅满目,以前在百度空间发表过相关文章,是以每到4至6月,这些文章总会被高校毕业生扒拉一遍,也总能收到各种魅惑的留言,因此,有必要再次发布这经典案例以飨读者。什么是因子分析?因子分析又称因素分析,传统的因子分析是探索性的因子分析,即因子分析是基于相关关转载 2014-12-10 18:07:32 · 31822 阅读 · 0 评论 -
SPSS案例分析3:因子分析
http://hi.baidu.com/datasoldier/item/6689c4a50ec250dc5af1914c因子分析在各行各业的应用非常广泛,尤其是科研论文中因子分析更是频频出现。小兵也凑个热闹,参考《SPSS统计分析》书中的案例,运用SPSS进行因子分析,作为我博客 SPSS案例分析系列 的第三篇文章。【一、概念】探讨具有相关关系的变量之间,是否存在不能直转载 2014-12-10 18:10:17 · 33875 阅读 · 6 评论 -
20171106即将开启的一段艰难的旅程
时光流逝,似乎一切一切都是命中注定的故事 2014年7月入职到CSDN,2015年9月离职去乐视,这一年里接触了文本挖掘,但是自己做的并不好,完全是懵懵懂懂的状态下给别人当小弟,还是被看不起的小弟!所以那时候觉得很害怕,觉得自己真的做不好这个,这个太难了! 2015年9月入职乐视,2015年11月离开乐视休假待产,在乐视短短不到2个月的时间里其实更多的是折磨,因为迷茫,原创 2017-11-06 18:28:25 · 527 阅读 · 5 评论 -
python启动http服务
好久没有更新啦,最近又有一些新的学习与尝试,所以来更新下,以便以后遇到同样的问题还记得怎么处理! 最近在做资讯推荐算法,大体就是基于内容的推荐,还可以的一点是走实时推荐,即可以根据用户最近的浏览来捕捉用户的兴趣点,从而根据用户即时兴趣做相似度召回以及排序,算法方面没有什么可说的,使用了 gensim,jieba,hanlp 模块 hanlp模块的安装也有一些坑,其实可以直接装p...原创 2018-04-23 11:19:46 · 8359 阅读 · 0 评论 -
Hadoop Shell命令-(spark学习前奏)
有时候感觉自己就像一只瘦小的绵羊,被放在了一片无边无际的草原上,这里的小草丰腴而鲜美,面对着唾手可得的美味,只能默默的叹息,自己的胃是辣么辣么的小,啃呀啃呀消化不了,什么时候才能啃完,才能消化完,去外面的世界看一看呢?! 机器学习领域就像这片大草原一样,需要学习的东西太多太多,有时候好希望自己有魔法,魔法棒挥动之后,深度学习、spark等等各种算法各种工具我就都使用自如啦!然而现...原创 2018-04-25 13:52:35 · 435 阅读 · 0 评论 -
轻轻掀开你的面纱来,嗨,spark
标题起的挺有意思,但是最近的心情挺没意思,有人的地方就有江湖,有时候人与人的相处真是复杂,实在觉得没必要那么复杂,开心了笑,不开心了哭,像小孩子一样不好嘛!唠叨的话不说了,干正事!!! 学习spark是希望数据量大起来的时候,能够用spark跑起来,当初的一个瓶颈就是在协同过滤(cf),所以学习spark的时候先从简单数据的协同过滤开始吧!pyspark能跑通得感谢那个素未谋面...原创 2018-04-27 19:10:18 · 245 阅读 · 0 评论 -
一些杂碎知识(python中的map、lambda、reduce、zip)以及神经网络的前向传播和反向传播手工推导
一直没有系统的学习过代码,数学系毕业,学校期间接触C,考了计算机等级考试二级,后面出来工作,先用vb(又是暴露年龄的编程语言啊),后面java,到现在基本稳定在python,一直都觉得自己是一个不求甚解的人,只要能出正确结果,不考虑代码的陈旧性,感觉自己的代码还停留在最基本的语句的应用,其实每种语言再不断的优化迭代,更新了很多很方便的自带函数,今天就遇到了python中的map、lamb...原创 2018-06-22 11:33:37 · 593 阅读 · 0 评论 -
一些关于人性的思考~
总想写点什么,但是一直没捕捉到那个点,我想这些点就是每个人的欲望和恐惧吧!在公司里与各式各样的人接触,尤其是同组的同事,能够真真切切的感受到每个人的欲望和恐惧!发觉欲望与恐惧总是匹配而来,没有一个人能够逃脱,甚至我自己!记得以前自己最喜欢的作家是台湾的林清玄,一个佛系的作家,读他的书内心是那样的平静与安宁,而现实的生活里总是充斥着各种欲望与恐惧!有时候自己在想真的能够超脱的人会是什么样的...原创 2018-06-18 15:22:11 · 1299 阅读 · 0 评论 -
gensim中的word2vec的使用
本着尊重原著的想法,我们先把一些引用的文章贴上来,供大家参考word2vec的理论知识,这个真的蛮详细的,我表示没有耐心全部搞透啊!:https://blog.csdn.net/itplus/article/details/37969519苏剑林苏大神的博客,我很喜欢的一位大神:https://kexue.fm/archives/3863刘建平Pinard 大神的博客:https://...原创 2018-08-21 16:07:34 · 8473 阅读 · 7 评论 -
pycharm使用anaconda环境的遇到问题的一些记录
最近换了工作,领完新电脑就需要装环境啦!1. anaconda和miniconda任选一种,装起来,我比较喜欢anaconda,但是这个占空间好像蛮大的。2. anaconda装完(勾选Add path to your environment一定要将conda环境添加到系统变量中,否则在pycharm中使用时会报错)之后整两个环境,我一般都是python2.7和python3.7各来一个,...原创 2019-09-06 15:07:56 · 1464 阅读 · 0 评论 -
python的趣味小应用--windows下.exe小程序生成
换了份工作,换了种心情,有业务需要,搞了个自动化报表的小工具,使用的是python自动生产.exe的包pyinstaller,来到这边新同事很nice,直接上名字,带我一起熟悉业务,一起做事情的刘圣义,谢谢他! 主要解决问题,是从几个表里面把数据进行整合计算,最终输出一张excel表格,python脚本开发没啥问题,按照正常开发就行,要有main函数,然后如果有需...原创 2019-09-12 17:15:14 · 1337 阅读 · 3 评论 -
Excel的hyperlink函数使用方法详解
http://www.datasoldier.net/post/hyperlink.htmlhyperlink()可不是一个简单的excel超链接函数,它让excel电子表格和你想要的目标关联在一起,把电子表格变身为一个简单的操作平台,你想去哪里就可以创建去往哪里的快捷方式。当单击hyperlink函数所在的单元格时,将打开链接的文件或跳转到指定工作表的单元格区域,或者指定的网页。转载 2014-12-10 17:43:05 · 20558 阅读 · 0 评论 -
SPSS典型相关分析案例
http://www.datasoldier.net/post/44.html相关分析,两个变量之间密切程度的一种常见统计分析方法,能够简单有效说明两变量间存在什么关系,这些关系的常见描述语句有:线性相关、正相关、负相关等。【数据集说明】某公司员工的基本情况,数据集含3列,分别为:性别、年龄、工资,现在希望了解员工年龄和工资水平之间的关系(企业人事部门的读者可关心一下)转载 2014-12-10 17:58:20 · 31397 阅读 · 0 评论 -
8个案例让数据不再撒谎
最近关于数据造假的评论很多,数据说谎的情况有两种,一种是出于某种目的,人为的将公示的数据注入一些水分;另一种“假”则是因为对业务不了解或经验的不足而在数据解读上的一种误读。什么被平均啊,什么统计局这些都是老生常谈的案例,EC数据分析网重新收录整理了一些案例供大家参考。【案例一】、@曹政 通过可控的客户端采样监测,得到了一定样本的,包含google搜索url特征的日志记录,得到goo转载 2014-11-18 17:56:57 · 487 阅读 · 0 评论 -
数据分析非小事,审慎对待才是真
多一分谨慎,总会多一分回报。数据分析也需要审慎地去看待,走得进去,也需要走得出来,多转换角度,或许就会有更多的精彩降临。[1]、数据分析、数据挖掘技术叫得很响,却未必最靠谱数据分析现在是一个热门词语,大到集团 ,小到部门的各领导都比较喜欢挂在嘴上。这个时候对于数据分析人员,最易出现的问题就是“为了分析而分析”!什么方法最新、最体面、最深奥就用什么方法进行数据分析,往往是“就目前这个问题,我能不能用转载 2014-11-19 10:47:43 · 578 阅读 · 0 评论 -
为什么说数据分析只是辅助决策的工具而非绝对依据
http://www.datasoldier.net/post/fuzhu.html很久之前,科学界的先辈们就已经意识到人类的主观感觉并不可靠,由主观感觉得出的结论也往往漏洞百出,从伽利略站在比萨斜塔上丢下那一对小球开始,人们就不断在探寻那些看似和主观感觉大相径庭的真理,而在现实生活特别是商业分析中,正确的决策往往和科学理论一样,是不同于我们的主观感受的。数据分析作为一转载 2014-11-19 10:15:11 · 661 阅读 · 0 评论 -
按流程进行数据分析
数据分析不是简单的“分析数据”,它是一种解决问题的方法,一个解决问题的过程,甚至可以认为是一种方法观。作为一名数据分析工作者,这里所说的数据分析是一个相对狭义的概念,如果没有合理的执行体系和标准化的工作流程,就会形成表面化的错误,从而影响到工作效率,更重要的是影响最终的分析结论,都说“按流程办事”,数据分析也不例外。 【1】明确目的用数据说话,从数据分析的角度解转载 2014-11-21 09:57:01 · 632 阅读 · 0 评论 -
聚类分析介绍
http://www.itongji.cn/article/1209142R012.html物以类聚,人以群分,聚类分析是一种重要的多变量统计方法,但记住其实它是一种数据分析方法,不能进行统计推断的。当然,聚类分析主要应用在市场细分等领域,我们也经常采用聚类分析技术来实现对抽样框的分层,我就不多罗嗦了。 聚类分析:顾名思义是一种分类的多元统计分析方法。按照个体或样品(in转载 2014-12-16 10:47:35 · 1690 阅读 · 0 评论 -
中国式数据分析报表的5宗罪
http://www.datasoldier.net/post/5zui.html学Excel可以不去管函数,不去管宏,只需把握一个要点就可以了:学会设计一张个标准、正确的源数据表。我们使用Excel的最终目的,是为了得到各式各样用于决策的分类汇总表,一个源数据表完全可以满足要求。它的设计理念却很简单,就是是一张中规中矩、填满数据的一维明细表。这个表有三大优势:通用、简转载 2014-12-06 16:03:46 · 409 阅读 · 0 评论 -
图说:数据分析方法那些事
http://www.datasoldier.net/post/fangfa.html现在,数据分析被提到了一个高度,今天就和大家一起翻一翻那些年我们常用的数据分析方法。(图/来自微博)转载 2014-12-06 16:11:54 · 400 阅读 · 0 评论 -
统计会撒谎:要人命的平均值!
http://www.datasoldier.net/post/pingjun2.html张家有钱一千万。九个邻居穷光蛋。平均起来算一算,个个都是张百万。这是互联网上的一首打油诗。诗中所讲的九个穷光蛋邻居因为与“张千万”一起来算平均财产,不幸“被富人”了,都成了“百万”级的富翁。这种说法显然有些夸张,但是它揭示了一个道理,即,仅靠平均值来了解一个转载 2014-12-06 15:49:48 · 400 阅读 · 0 评论 -
方差分析:不同组间的差异真的显著吗
http://www.datasoldier.net/post/chayi.html在数据分析中,按照具体维度将数据分组进行组间比较是十分常见的,例如在零售业态中,按照性别、城市、收入水平将消费者进行分组进行对比分析。看似简单,其实这其中经常伴随着拍脑袋决策的危险。以下数据案例可以说明。原创案例数据、分析思路来自数据小宇军《数据分析企业的贤内助》。数据案例说明:转载 2014-12-09 14:32:18 · 10795 阅读 · 0 评论 -
让“数据分析”告诉商家哪种饲料效果更好
http://www.datasoldier.net/post/anova.html案例:为了提高收益,农场主开始饲养猪,现在,有四种不同品牌的饲料推广员来到农场,都说自己的饲料效果最好,农场主难以在他们之中做出选择,因此,他请了你帮助他选择最好的饲料来饲养猪。作为数据分析师,你需要获取数据作为你观点的支撑,现在问题就摆在面前,你很自信这个问题一定能够通过数据分析得转载 2014-12-24 17:55:18 · 1138 阅读 · 0 评论 -
以电商为例,数据分析的5个思维方法
http://www.datasoldier.net/post/5siwei.html在博主雪言舟语看来,数据分析真的很重要,能从一堆看似杂乱的数据里,找到问题并解决问题。从数据上的变化,来判断甄别效果得失;简直是居家旅行,运营生意的必备良品。首先,我们要知道,什么叫数据分析。其实从数据到信息的这个过程,就是数据分析。数据本身并没有什么价值,有价值的是我们从数据中提取出转载 2014-12-08 17:51:26 · 1033 阅读 · 0 评论 -
pycharm需要注册的问题
pycharm的破解问题一直以为pycharm是一款开源的软件,都不知道之前是怎么安装的竟然都没觉得注册是个事,今天早上发现pycharm过30分钟就提示注册,然后就给关闭了,才发现这是一款付费软件,上网找教程,花费了20分钟搞定吧!之所以想说说是因为感觉到网友真的是太伟大了废话少说,尊重原创,发布链接https://blog.csdn.net/lengyuewusheng99/articl...原创 2019-10-08 11:07:09 · 1965 阅读 · 0 评论