- 博客(27)
- 收藏
- 关注
RSS订阅原创 大数据学习资源之DataCamp
《Nature》杂志早在2008年第一次提出“Big Data”的概念，到2015年国务院正式印发《促进大数据发展行动纲要》，标志着大数据正式上升至国家战略，再到2017年的大数据市场全面打开，各省市积极响应中央号召，大数据行业出现井喷之势。 与大数据紧密相关的教育行业当然也不甘落后，各类培训认证课程也如雨后春笋般席卷各大网络平台，真可谓是“迅雷不及掩耳盗铃”。（逃...(ૢ˃ꌂ˂ૢ)）...
2019-01-30 12:35:56
1085
原创 万丈高楼平地起——大数据配置管理之HDFS（上）
众所周知，Hadoop是目前最流行的大数据计算平台，它由众多的框架（或者称为模块，组件）组成，共同完成大数据的计算任务。实际上，大数据需要解决的两大核心问题是数据的存储和数据的计算。Hadoop对数据的存储采用的是分布式方式，对数据的计算也采用分布式方式。具体来说，Hadoop包含以下核心框架： HDFS：实现数据的分布式存储 MapReduce：实现数据的分布式计算 ...
2019-01-29 12:37:54
526
原创 全球大数据产业现状及投资前景预测
纵观国内外，大数据已经形成产业规模，并上升到国家战略层面，大数据技术和应用呈现纵深发展。面向大数据的云计算技术、大数据计算框架等不断推出，新型大数据挖掘方法和算法大量出现，大数据新模式、新业态层出不穷，传统产业开始利用大数据实现转型升级。人工智能、深度学习、工业物联网、虚拟现实、智慧城市等领域的发展推动大数据的应用普及。新兴行业、传统行业围绕数据服务体系，已经形成了传统行业数据平台、互联网数据平台...
2019-01-28 10:22:01
1164
原创 知乎高赞！BAT大牛的大数据学习之路！
前几天，网易云音乐公布了一份年度音乐总结。让我惊叹的是在这个大数据时代底下，比起我们自己，大数据似乎更懂得我们。如果科技更进一步，就像《奇葩说》中一集辩题里所说的，它有可能可以帮我们匹配到那个灵魂相契的人。有人觉得这个现象很恐怖，但在我看来，人的恐惧是源自于未知。如果能顺应着时代的步伐，一起向前，对它了解再加深一点，也许我们就会爱上它。 在这里相信有许多想要学习大数据的同学...
2019-01-27 11:34:44
748
原创 大数据与中国的战略选择
今天，大数据(big data)一词正越来越多地被提及，人们用它来描述和定义信息爆炸时代产生的海量数据。随着经济社会的发展，大数据可能带来的深刻影响和巨大价值日益被认识，它通过技术的创新与发展，以及数据的全面感知、收集、分析、共享，为我们提供了一种全新的看待世界的方法，其带来的信息风暴正全方位地改变着我们的生活、工作和思维。面对这样一种情势，我们应当以什么态度来迎接大数据时代的到来?如何使大数据为...
2019-01-26 11:09:00
313
原创 科普 | 通俗易懂的介绍云计算、大数据和人工智能
今天跟大家讲讲云计算、大数据和人工智能。为什么讲这三个东西呢？因为这三个东西现在非常火，并且它们之间好像互相有关系：一般谈云计算的时候会提到大数据、谈人工智能的时候会提大数据、谈人工智能的时候会提云计算……感觉三者之间相辅相成又不可分割。但如果是非技术的人员，就可能比较难理解这三者之间的相互关系，所以有必要解释一下。 在这里相信有许多想要学习大数据的同学，大家可以+下大数据学习裙...
2019-01-25 11:36:29
1101
原创 FusionInsight，一个融合的大数据平台
随着物联网技术和应用的普及，以运营商、互联网以及实体经济行业为代表的企业产生了越来越多的数据，大数据的发展越来越蓬勃。从2007年开始，大数据应用成为很多企业的需求，2012年兴起并产生了大数据平台，使用者主要是程序员；2013年到2017年间，数据逐渐增多，大数据平台变成了融合大数据平台，使用者从程序员变成数据管理员和数据分析师；从2018年开始，大数据进入企业数据智能新阶段，普通的工程...
2019-01-24 12:45:15
13114
2
原创 大数据驱动5G网络与服务优化
摘要：5G时代的到来将进一步加速移动数据的发展。介绍了移动大数据的来源，分析了大数据分析在5G网络优化中的应用方向。针对5G网络的新特点，系统阐述了大数据在5G网络中的大规模天线与分布式天线、无线接入网资源管理、异构接入组网、云网、移动边缘计算、终端与云端的智能、SDN与NFV、网络切片、跨层联合优化、源选路优化等方面可能的应用。并结合5G大数据的特点，分析了其在智慧城市、智慧医疗、智慧交通...
2019-01-23 14:03:29
4233
原创 大数据：数字化转型利器
在数字经济时代，数字化转型正在重新定义并支撑企业管理的进化。对传统企业而言，数字化转型涉及从根本上对战略、运营和技术进行彻底改造。企业数字化转型的关键在于组织变革与管控模式转型、制造模式与业务模式创新，以及基于大数据的智能分析、智能决策，最终实现颠覆式创新、全渠道多接触点的客户体验和运营数字化、智能化的目标。 工欲善其事，必先利其器在这里相信有许多想要学习大数据的同学，大家可以+下大...
2019-01-22 14:26:04
909
原创 运营入门，从0到1搭建数据分析知识体系
数据分析在运营工作中无处不在，无论是活动复盘、专题报告、项目优化，还是求职面试，数据分析都有一席之地。 对于数据分析，我发现很多运营都有这样一些困惑： 不知道从哪里获取数据； 不知道用什么样的工具； 不清楚分析的方法论和框架； 大部分的数据分析流于形式； 在这里相信有许多想要学习大数据的同学，大家可以+下大数据学习裙：957205962，即...
2019-01-21 10:57:12
397
原创 大数据时代的职场征信，你了解吗？
导读 企业想要将用工风险降至最低，从雇前招聘到雇中在职管理再到雇后离职，要步步把关，层层把控。云考拉在职大数据审计可以为企业提供在职员工身份真实度、忠诚度、违法度、信用度、滋事度等多维度审计服务。近几年，有关职场失信问题越来越突出。员工职场失信行为不仅发生在入职时的身份隐瞒、履历造假等方面，还发生在员工在职期间。如企业高管任职期间私自在外注册了同业竞争关系的公司，员工刻意隐瞒网贷失信行...
2019-01-20 10:31:30
813
原创 英特尔及合作伙伴技术团队访问云创大数据
2019年1月17日，Intel（美商英特尔亚太科技有限公司）技术应用经理陈世旻、业务经理赖宜洵以及QNAP[威联通科技（北京）有限公司]总经理叶国盛等一行莅临云创，云创大数据总裁刘鹏教授、人工智能总监曹骝、项目总监袁在康以及项目经理高秀斌共同接待了来宾。 此次来宾一行莅临云创，旨在围绕人工智能领域的合作进行深入探讨。刘鹏教授首先向来宾介绍了云创的核心业务、技术优势、产品应用等企...
2019-01-19 09:34:54
256
原创 大数据挖掘分析领域的划分
当刚涉足数据挖掘分析领域的分析师被问及，数据挖掘分析人员最重要的能力是什么时，他们给出了五花八门的答案。其实我想告诉他们的是，数据挖掘分析领域最重要的能力是：能够将数据转化为非专业人士也能够清楚理解的有意义的见解。简单地来说，分析可被划分为。在这里相信有许多想要学习大数据的同学，大家可以+下大数据学习裙：957205962，即可免费领取套系统的大数据学习教程1.可视化分析：大数据分...
2019-01-18 08:31:06
852
原创 大数据杂谈之初窥Kafka
随着时代的发展，信息爆炸，大量的数据信息需要捕获、传递、处理，传统的ActiveMQ、Rabbit MQ等消息系统越来越适应不了当前数据信息高吞吐的时代要求。由Linkedin公司设计开发的Kafka，一款基于zookeeper管理的分布式消息系统应运而生。Kafka以其并行处理、高吞吐、易扩展、高容错等特性逐渐应用于各种大数据场景。因其功能的不断完善，整合各种应用场景，Kafka逐步由单一的消息...
2019-01-16 10:44:47
236
原创 大数据应用常见的6种商业模式
每一个新兴的行业都会衍生出很多种商业模式，每一种商业模式都能抵达成功，都有可能实现盈利，大数据作为一个新兴的行业，商业模式需要从事于这一行业的人不断探索，不断优化改进，不断创新挖掘出有价值的商业模式。 大数据创业，不一定是大公司的专利，这也是许多小公司或者创业型公司崛起的机遇。很多小规模企业，尤其是初创企业，通过大数据手段，能够“小而精”“快而准”地针对一个行业的实际需求，创造出改变行业格...
2019-01-15 09:49:27
818
原创 大数据
概述前段时间写spark入门的时候，本来想着把spark的算子和核心等一并慢慢整理发布到公众号。但是最近的职业变化以及spark在生产环境中基本都是运行在hadoop yarn上，因此将从hadoop开始整理，逐步推广到hive等组件。需求：Linux基础知识，Java SE基础知识。大数据特征:数据量速度多样性，复杂性基于高度分析的新价值在这里相信有许多想要学习大数...
2019-01-14 08:02:51
162
原创 大数据系统计算技术展望
大数据是新一代信息技术的核心方面和竞争前沿，也是制约大数据产业快速发展的关键瓶颈。大数据技术创新能力已经成为后信息时代衡量国家竞争力的重要指标。与传统信息产业的发展过程相似，大数据必将逐渐形成一个相对独立、体系完善的产业形态，完成传统信息产业的升级换代。互联网和云计算的发展过程与趋势已经证明，大数据未来的产业形态将是以服务为核心的新型产业形态，大数据产业体系的各个环节将提供极为丰富的服务。大...
2019-01-13 10:26:16
715
原创 早报|大数据行业资讯一览
北京市通信管理局：加快推进5G基础设施建设”日前，北京市通信管理局召开会议，研究了2019年重点工作。下一步，北京管局将结合重点工作安排，做好局工作会和民主生活会的准备工作；高质量完成好加快推进5G基础设施建设和规范北京市商务楼宇通信配套设施建设与运营相关工作；在做好2018年工作总结和重点任务持续跟进的基础上，助力“四个中心”功能建设，提高“四个服务”水平。“菜鸟与普洛斯共同增资...
2019-01-12 10:45:00
414
原创 大数据来袭，你应该懂点ETL
信息是现代企业的重要资源，是企业运用科学管理、决策分析的基础。目前，大多数企业花费大量的资金和时间来构建联机事务处理OLTP的业务系统和办公自动化系统，用来记录事务处理的各种相关数据。据统计，数据量每2～3年时间就会成倍增长，这些数据蕴含着巨大的商业价值，而企业所关注的通常只占在总数据量的2%～4%左右。因此，企业仍然没有最大化地利用已存在的数据资源，以至于浪费了更多的时间和资金，也失去制定关键商...
2019-01-11 10:54:18
196
原创 大数据学习资源之DataCamp
“有很多事情我们做的并不完美，但这可能是当时当刻唯一正确的决定。” ——托尼老师 《Nature》杂志早在2008年第一次提出“Big Data”的概念，到2015年国务院正式印发《促进大数据发展行动纲要》，标志着大数据正式上升至国家战略，再到2017年的大数据市场全面打开，各省市积极响应中央号召，大数据行业出现井喷之势。 与大数据紧密相关的教育行业当然也不甘落后，各类培...
2019-01-09 10:31:11
4806
原创 社会工作行业发展与“大数据”
“大数据”是指以多元形式， 自许多来源搜集而来的庞大数据组，往往具有实时性。而在这些大数据中获取有价值的信息进而分析和研究的技术即为大数据技术。社会工作作为一种助人的专业和职业，具有服务对象多和服务场域广等特点，顺应大数据这个时代潮流进行自我拓展，有助于社会工作行业更好地挖掘自身潜力，实现集成式和高效化发展，以更好地服务于社会。 数字化助人服务的内容很多初学者，对大数据的概念都...
2019-01-08 10:54:34
1901
原创 大数据到底是什么意思？
首先来说一下什么是大数据，上世纪90年代末，美国航空航天局的研究人员创造了大数据一词，自诞生以来，它一直是一个模糊而诱人的概念，直到最近几年，才跃升为一个主流词汇。其实简单的来说，大数据就是通过分析和挖掘全量的非抽样的数据辅助决策。大数据可以实现的应用可以概括为两个方向，一个是精准化定制，第二个是预测。比如像通过搜索引擎搜索同样的内容，每个人的结果却是大不相同的。再比如精准营销、百度的推广...
2019-01-07 10:28:44
21613
3
原创 大数据的魔力你到底知道多少
都说如今是大数据的时代，那大数据到底是怎样的存在？ 打开买买买新格局 基友们一定有过这样的经历：网购时收到相关推荐，这些产品正是你想买的或近期搜索的，这就是大数据在消费上的应用。 零售巨头沃尔玛就将大数据应用的淋漓尽致。每小时100多万笔的电子交易记录，这都是推动销售的“宝贝”啊！沃尔玛分析海量网络数据，将这些数据个人化，再有针对性地提供购买建议给消费者。要知道，如果...
2019-01-06 11:27:11
276
1
原创 大数据的魔力你到底知道多少
都说如今是大数据的时代，那大数据到底是怎样的存在？ 打开买买买新格局 基友们一定有过这样的经历：网购时收到相关推荐，这些产品正是你想买的或近期搜索的，这就是大数据在消费上的应用。 零售巨头沃尔玛就将大数据应用的淋漓尽致。每小时100多万笔的电子交易记录，这都是推动销售的“宝贝”啊！沃尔玛分析海量网络数据，将这些数据个人化，再有针对性地提供购买建议给消费者。要知道，如果...
2019-01-05 10:34:27
252
原创 大数据与中国的战略选择
今天，大数据(big data)一词正越来越多地被提及，人们用它来描述和定义信息爆炸时代产生的海量数据。随着经济社会的发展，大数据可能带来的深刻影响和巨大价值日益被认识，它通过技术的创新与发展，以及数据的全面感知、收集、分析、共享，为我们提供了一种全新的看待世界的方法，其带来的信息风暴正全方位地改变着我们的生活、工作和思维。面对这样一种情势，我们应当以什么态度来迎接大数据时代的到来?如何使大数据为...
2019-01-04 11:15:27
423
原创 PostgreSQL简介及安装
一、 PostgreSQL 简介PostgreSQL 是以加州大学伯克利分校计算机系开发的 POSTGRES，版本 4.2 为基础的对象关系型数据库管理系统（ORDBMS），现更名为 PostgreSQL。PostgreSQL 支持大部分 SQL 标准并且提供了许多其他特性：复杂查询、外键、触发器、视图、事务完整性、MVCC。PostgreSQL 可以用许多方法扩展，比如，通过增...
2019-01-03 10:31:06
489
原创 大数据 比你更懂你
大数据具有海量的数据规模、快速的数据流转、多样的数据类型、巨大的数据价值等特性。运用大数据技术，可以从各种不同类型的海量数据中，快速分析挖掘隐藏信息和知识。大数据技术的广泛应用给社会和经济带来了深刻影响，让我们的生活更加便利。在这里我还是要推荐下我自己建的大数据学习交流qq裙： 957205962， 裙 里都是学大数据开发的，如果你正在学习大数据 ，小编欢迎你加入，大家都是软件开发党，不定期...
2019-01-02 11:21:45
470
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人