大数据
文章平均质量分 61
周杰伦演唱会
这个作者很懒,什么都没留下…
展开
-
hadoop_9.06
ssh 必须安装并且保证 sshd一直运行,以便用Hadoop 脚本管理远端Hadoop守护进程。安装软件:集群安装所需软件。 sudoapt−getinstallssh sudo apt-get install ssh sudo apt-get install rsync 远程同步功能。 免密码ssh设置现在确认能否不输入口令就用ssh登录localhost: $ ssh local原创 2017-09-06 16:46:16 · 251 阅读 · 0 评论 -
HBase
1.概念:在HDFS之上的面向列的分布式数据库,不支持SQL。 web查询:直接使用HBase的Java API、所有对表的访问都要通过表的主键。 HBase主控机master负责启动bootstrap一个全新的安装,把区域分配给注册的regionserver,恢复regionserver的故障。HBase依赖ZooKeeper。 HBase通过Hadoop文件系统API来持久化存储数据。HB原创 2017-09-17 16:47:33 · 381 阅读 · 0 评论 -
HDFS、Zookeeper
在MapReduce中,首先打开HDFS文件,然后map任务流式处理文件内容,最后关闭文件。 用户界面、度量(Metric) Zookeeper是Hadoop分布式协调服务 解压:tar xzf zookeeper-x.y.z.tar.gz 二进制文件加入命令行路径: % export ZOOKEEPER_INSTALL=/home/tom/zookeeper-x.y.z % expor原创 2017-09-17 17:08:35 · 732 阅读 · 0 评论 -
Nexus私服以及Maven
前边简单介绍了Maven,而Maven默认提供的中央仓库是在远程网络服务Appache提供的,这对于我们开发时不合理的。如果我们没网了或者什么情况,我们怎么办?也就是说我们队中央仓库的依赖性太大。而Nexus私服则可以解决我们这个问题。先看下这张图应该大家就非才明白了: 这样就相当于在我们本地的局域网搭建了一个类似中央仓库的服务器,我们开始将中央仓库的一些资料下载到私服务器上,然后平时我们的m转载 2017-09-21 17:13:49 · 288 阅读 · 0 评论