- 博客(3)
- 收藏
- 关注
转载 阿里、腾讯内部十二个大数据项目实战,你都做过吗?
随着社会的进步,大数据的高需求,高薪资,高待遇,促使很多人都来学习和转行到大数据这个行业。学习大数据是为了什么?成为一名大数据高级工程师。而大数据工程师能得到高薪、高待遇的能力在哪?自然是项目经验。下面给大家大概介绍一下在阿里的”双11”、”双12”、”双旦”即将到来的”618”与腾讯大数据都用上的十二个大数据项目:一个大数据分析项目关键构成如下:信息采集组、数据清洗组、数据融合组、数据挖...
2018-08-29 19:15:44 702
原创 大数据项目实战必备技能之Spark
导读: spark是基于内存计算的大数据并行计算框架,对于spark,Apache spark官方给出的定义:spark 是一个快速和通用的大数据引擎,可以通俗的理解成一个分布式的大数据处理框架,它基于Rdd(弹性分布式数据集),立足于内存计算,因为是基于内存计算,所以提高了在大数据环境下数据处理的实时性,同时保证了高容错和高可伸缩性,允许用户将spark部署在大量廉价的硬件之上,形成集群,由于s...
2018-08-29 14:33:40 244
原创 关于大数据相关的问答汇总,每天持续更新中~
重点内容 一 .简述如何安装配置apache 的一个开源的hadoop使用root账户登陆2.修改ip3.修改host主机名4.配置ssh 免密登陆5.关闭防火墙6.安装JDK7.解压hadoop安装包8.配置hadoop的核心配置文件 hadoop-env.sh? core-site.xml? mapred-site.xml yarn-site.xml hd...
2018-08-28 17:32:38 1256
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人