![](https://img-blog.csdnimg.cn/20201014180756918.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 84
wsppstwo
这个作者很懒,什么都没留下…
展开
-
CDH5和Cloudera Manager5对环境的要求
说明: 1.一下内容针对Cloudera 5.X 版本, 2.内容来源http://www.cloudera.com/documentation/enterprise/release-notes/topics/rn_consolidated_pcm.html#xd_583c10bfdbd326ba--5a52cca-1476e7473cd--7f8d CDH与Cloudera Manan...原创 2016-12-01 14:42:29 · 883 阅读 · 0 评论 -
CCA175考试心得
CCA175考试心得 1.考试内容,总计有10题,全部为实践操作题 1>前五题分别为(sqoop,hive) 1).sqoop-import 2).sqoop-export, 3).hive创建表,并且将已经存在于hdfs上的表导入到新建表中 4).hive创建avro类型的表 5).hive创建一个分区表,并且导入数据 2>6-9题为spark的pytho...原创 2016-12-01 14:50:36 · 1699 阅读 · 1 评论 -
基于eclipse的spark开发环境搭建-scala篇
安装前说明: 根据我在配置过程中遇见的各种情况给出如下建议,仅供参考 不建议在现有的eclipse的中安装scala IDE插件,建议使用scalaIDE官网提供的已经集成好的eclipse作为开发工具,这样避免在插件安装过程中遇到的各种稳定,而且集成的版本比较稳定。 如果必须在现有的eclipse环境中安装scalaIDE,不建议采用离线安装的方式安装,建议采用在线安装的方式...原创 2017-02-16 15:33:20 · 339 阅读 · 0 评论 -
基于eclipse的spark开发环境搭建-python篇
软件版本说明 java版本 :64位jdk-8u111-windows-x64.exe eclipse版本:64位scala-SDK-3.0.3-2.10-win32.win32.x86_64.zip下载地址: python版本:python2.7下载地址:https://www.python.org/downloads/windows/ spark版本spark-1.6.0-bin...原创 2017-02-16 16:15:01 · 604 阅读 · 1 评论