大数据
andyguan01_2
这个作者很懒,什么都没留下…
展开
-
大数据集群搭建汇总
在CeontOS6.9安装JDK1.8:https://blog.csdn.net/andyguan01_2/article/details/86701213在CentOS6.9搭建Hadoop2.6.5集群:https://blog.csdn.net/andyguan01_2/article/details/86595985在CentOS6.9搭建Spark2.4.0集群:https://b...原创 2019-01-30 18:07:11 · 485 阅读 · 0 评论 -
各类人工智能&大数据相关比赛
(本文转载自:https://www.imooc.com/article/72863)随着近几年人工智能和大数据的快速发展和应用,使得相应的工智能&大数据相关比赛比赛近几年火热了起来,下面就我知道到的人工智能&大数据相关比赛,为大家简要说下,感兴趣的可以参加一些比赛,锻炼一下自己,也能知道一些前沿的技术,说不定还能拿些奖金呢?哈哈建议:现在AI比赛非常多,如果想学习的话,...转载 2019-02-18 10:01:28 · 1257 阅读 · 0 评论 -
基于大数据的数据仓库
(内容整理自大讲台学习视频)1、数据仓库的概念和ER实体模型2、实体关系(ER)建模理论及应用场景3、Data Vault建模理论及应用场景4、大数据体系技术架构以及Hadoop、Spark基础架构5、hive体系结构与优化6、hive优化7、大数据仓库周边技术-sqoop、flume等8、数据采集与同步9、数据仓库维度建模10、实战案例-偏业务性行业数据仓库设计11、偏流量...原创 2019-05-15 16:37:46 · 550 阅读 · 0 评论 -
基于大数据的数据仓库-数据仓库的概念
一、什么是数据仓库1、什么是数据库?a)数据库是按照数据结构来组织、存储和管理数据的建立在计算机存储设备上的仓库。b)数据库是长期存储在计算机内、有组织的、可共享的数据集合。数据库中的数据指的是以一定的数据模型组织、描述和储存在一起、具有尽可能小的冗余度、较高的数据独立性和易扩展性的特点并可在一定范围内为多个用户共享。2、什么是数据仓库?定义:面向主题的、集成的、相对稳定的、反映历史变化...原创 2019-05-15 16:36:40 · 8314 阅读 · 0 评论 -
基于大数据的数据仓库-数据仓库建模基本理论
(内容整理自网络学习视频)一、数仓建模的目标访问性能:能够快速查询所需的数据,减少数据I/O。数据成本:减少不必要的数据冗余,实现计算结果数据复用,降低大数据系统中的存储成本和计算成本。使用效率:改善用户应用体验,提高使用数据的效率。数据质量:改善数据统计口径的不一致性,减少数据计算错误的可能性,提供高质量的、一致的数据访问平台。所以,大数据的数仓建模需要通过建模的方法更好的组织、存储...原创 2019-05-16 14:51:00 · 8217 阅读 · 1 评论