说说大数据

阅读文本大概需要 2.3 分钟。

最近有读者问我这么一个问题：

张哥，老是听说大数据，到底什么才是大数据？大数据能用来做什么？我是非 IT 行业人士，但是看你的文章比较接地气，并且通俗易懂，所以这次想请您帮忙普及下。

这位读者虽然没说，但是我猜测也是想转行 IT 行业，然后看中了大数据方向，估计这样的人不少，那么今天姑且帮大家普及下大数据方面的知识。

所谓大数据，其实主要包括数据分析、数据挖掘、数据开发。

数据分析与挖掘有点类似，简单来说，就是从大量数据中提取、分析或挖掘有价值的信息或知识。

解释有点抽象，举个例子，你们大概就明白了。

就拿公众号举例吧，公众号后台自带各种完备的数据，包括阅读量、转发量、新关注用户人数、取关人数以及各种用户属性数据，包括性别、省份、城市、终端机型等等数据。运营公众号，其实内容是最基本的，但是要想做的好，内容背后你要做各种数据分析工作，比如你公众号几点发布效果最好？你要早中晚都实验下，然后对比阅读量。你的读者主要人群是什么？他们分布在什么地方？他们更关注什么样的内容？你的内容好不好？等等等，这些通过对后台数据做分析都会给你很大的参考，帮助你更好的运营与决策。而这些我在我运营公众号的时候背后都做了大量的数据分析工作。

当然，这些都是最基础的数据分析工作，数据分析与挖掘其实最重要的就是要具备「数据思维」，一切基于数据做判断，用数据去帮助你做决策。我以前说过，做产品，其实最难的不是创意，而是决策，但是如果你具备数据思维，可以帮你做很多省事的决策。

举个例子，做产品的经常要开发功能，而且迭代周期很快，基本两三周就发布一个版本，但是版本发布之后，功能到底好不好是需要跟踪的，而不是做完就不管了，而跟踪就是要观察数据，新版本发布之后，你的产品的留存、日活、日均使用时长、销售等等这些数据有没有改善，如果说再深入点，做功能之前，其实产品经理要对一个功能做提前的假设，比如我改进了一个引导机制，减少了新用户的使用门槛，你判断这个功能上线之后会对新用户的次日留存有很大改善，那么上线之后就要时刻关注这个数据的变化，看下有没有跟预期表现一致，这是做产品的一个常用思维，产品人也一定要具备数据思维。

当然，以上还是比较简单的数据应用，再举一个更深入的例子。

我们知道，做数据分析之前，一定要先有数据，也就是首先要做数据收集的工作，假设我们要了解我们的用户详细的情况，你需要得到一些有效的数据，进而做用户建模，给你的用户做画像，你怎么做呢？

这里给大家透漏一个业内人士才知道的一个乱象，在 Android 系统有个 api 可以获取用户手机安装的 App 列表，有不少公司就未经用户同意，直接获取用户手机内安装的所有应用列表，有人问了，要这个 App 列表有什么用呢？

这个用处可就大了，比如你手机里如果安装了类似「平安好车主」这类 App，那么代表你是有车一族，起码经济能力还可以。

如果安装了「房贷计算器」或者类似的应用，那么判断，这个用户有买房需求的，经济能力更是不错。

如果你安装了母婴类 App，那么认为你是有小孩的。

如果你安装了很多类似淘宝的电商 App，那么认为你是一个喜欢购物的女性。

......

等等等，我可以得到各种用户更详细的信息，如果获取了你的地理位置，通过观察你每天的两点一线位置，甚至可以知道你工作的地方以及所在的小区。

当然要这么详细的消息，是为了精准的定位你这个用户，给你做画像，比如你居住的小区是高档还是低档，你工作的地方是陆家嘴金融狗还是张江程序猿，也基本对你的职业有个大概的了解。这里需要说明的是，用户画像跟你实际也许不符，比如，你手机安装了一大堆电商 App，也许是个男的，你只是喜欢给你的女朋友买东西而已，但是没关系，从数据分析和用户建模上，也认为你是一个爱购物的女性。

有了这些数据分析之后可以干嘛呢？那可做的就很多了，我对你打上一些标签，然后可以精准给你推广告，你是对车感兴趣还是对键盘感兴趣，根据数据对你的描述来精准推荐，转化率会更高，然后也可以给你推各种各样的产品和服务，等等。

这只是数据应用的一些场景，数据的应用远不止于此，这就是为什么大数据比较火的原因，因为它可做的事太多了，但是重要的是，你一定要具备数据思维，数据思维可以应用在生活的方方面面，数据是理性的，是讲逻辑的，但是凭感觉做事不靠谱因素就比较大了。

如果说，数据分析挖掘是相对技术门槛相对较低的方向，那么大数据还有另外一个方向「数据开发」，数据开发主要是负责大规模数据的处理和应用，可以算是一个纯技术岗了，要求更高，技术含量也更高。需要你懂建模、懂编程、懂算法，同时还要学习 Hadoop、Storm、Spark 等数据处理平台，门槛更高，当然了，具备这些技能，前景和钱景一样很高。

以上，简单的给大家普及了下大数据的概念以及应用，大数据目前的人才缺口也是蛮大的，各行各业可以说都需要大数据人才，我能给大家普及的就到这里，毕竟我也不是专业做大数据的，而且单纯靠一篇文章无法面面俱到，如果你对大数据感兴趣，想学习了解相关的知识与技能，这里给大家推荐一个大数据相关的免费直播。

此次讲座特别联合阿里云合作伙伴，11 年大数据项目开发经验、500 强企业资深大数据架构师 Arry 老师，并且讲座分两个批次，针对不同阶段的人群：

零基础到初级大数据工程师；

适合人群：小白新手、初级 Java 工程师、初级 Python 工程师

中高级大数据工程师批次；

适合人群：1-2 年开发人员

有对大数据方向的任何疑问都可以扫码加 Arry 老师的个人微信进行咨询。

微信 id：arrybj