- 博客(4)
- 资源 (2)
- 收藏
- 关注
原创 Hadoop开发入门与实践(三)
Hadoop开发入门与实践(三)一、配置ssh免密码登陆1、查看隐藏文件:[root@xtwyhadoop ~]# ls -la [root@xtwyhadoop ~]# cd .ssh known_hosts 知道的主机2、生成ssh免登陆密钥[root@xtwyhadoop .ssh]# ssh-keygen -t rsa 3、查看生在的文件: 执行完这个命令后,会生成两个
2017-12-31 23:40:27 463
原创 Hadoop开发入门与实践(二)
Hadoop开发入门与实践(二)一、Linux Hadoop环境开发(一)安装JDK1、下载Oracle JDK安装文件[root@localhost ~]# wget http://download.oracle.com/otn-pub/java/jdk/8u151-b12/e758a0de34e24606bca991d704f6dcbf/jdk-8u151-linux-x64.tar.gz2、解
2017-12-31 22:26:16 558
原创 Hadoop开发入门与实践(一)
Hadoop开发入门与实践(一)一、Hadoop简介 Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 Hadoop由 Apache Software Foundation 公司于 2005 年秋天作为Lucene的子项目Nutch的一部分正式引入。它受到最先由 Google Lab 开发的 Map/Reduce 和 Google File System(GF
2017-12-28 22:07:30 393
原创 Spark开发入门与实践(一)
Spark开发入门与实践(一)(一)Spark简介 Spark于2009年诞生于加州大学伯克利分校AMPLab。目前,已经成为Apache软件基金会旗下的顶级开源项目。 相对于MapReduce上的批量计算、迭代型计算以及基于Hive的SQL查询,Spark可以带来上百倍的性能提升。目前Spark的生态系统日趋完善,Spark SQL的发布、Hive on Spark项目的启动以及大量大数据
2017-12-28 22:05:32 1745
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人