大数据存储的前期准备

HBase 启动步骤

1、启动 hadoop，master 虚拟机，切换 root 用户，输入终端命令：start-all.sh

2、启动 zookeeper，分别在 master、slave1、slave2 虚拟机终端命令执行：zkServer.sh start 3、启动 hbase，master 虚拟机终端输入命令：start-hbase.sh

4、输入 hbase shell，进入 hbase 操作命令。

Mongodb的启动与关闭 

一、启动步骤

1、mongodb服务启动：

（1）master输入终端命令：mongod --journal -f /home/app/mongodb/master.conf

（2）slave1输入终端命令：mongod --journal -f /home/app/mongodb/slave1.conf

（3）slave2输入终端命令：mongod --journal -f /home/app/mongodb/arbiter.conf

2、打开数据库：

master输入终端命令：mongo 192.168.226.132

启动python的命令：

hbase thrift start      

spyder

 

Neo4j的启动与关闭 

一、服务启动：

1、打开master、slave1、slave2虚拟机终端，输入：cd /home/app/neo4j/bin

2、master、slave1、slave2虚拟机终端分别输入:    ./neo4j start

3、master中打开浏览器输入网址：192.168.226.132:7474

4、用户名：neo4j，密码：123456

相关操作：

1.ls显示目录下的所有文件或者文件夹

          使用方法：hdfs fs -ls [URI形式目录]

             示例：显示根目录下的所有文件和目录

                 hdfs dfs -ls /  

         显示目录下的所有文件可以加-R选项

             示例：hdfs dfs -ls -R /

      2.cat查看文件内容

          使用方法：hdfs dfs -cat URI [URI …]

             示例：hdfs dfs -cat /in/test2.txt

      3.mkdir创建目录

          使用方法：hdfs dfs -mkdir [URI形式目录] 

             示例：hdfs dfs -mkdir /test

          创建多级目录加上 -p 

             示例：hdfs dfs -mkdir -p /a/b/c

      4.rm删除目录或者文件

           使用方法：hdfs dfs -rm [文件路径]  

             示例: hdfs dfs -rm /test1.txt

           删除文件夹加上-r，

             示例：hdfs dfs -rm -r /test

      5.put复制文件

将文件复制到HDFS系统中，也可以是从标准输入中读取文件，此时的dst是一个文件。

使用方法：hdfs dfs -put <localsrc> ... <dst>

示例：hdfs dfs -put /in/test1.txt /out/hadoopFile

从标准输入中读取文件：hdfs fs -put - /out/myword

       6.cp复制系统内文件

使用方法：hdfs dfs -cp URI [URI …] <dest>

将文件从源路径复制到目标路径。这个命令允许有多个源路径，此时目标路径必须是一个目录。 

示例：hdfs dfs -cp /in/word.txt /out/hadoopFile

       7.copyFromLocal复制本地文件到HDFS

使用方法：hdfs dfs -copyFromLocal <localsrc> URI

除了限定源路径是一个本地文件外，和put命令相似。

       8.get复制文件到本地系统

使用方法：hdfs dfs -get[-ignorecrc] [-crc] <src> <localdst> 

复制文件到本地文件系统。可用-ignorecrc选项复制CRC校验失败的文件。文件和CRC校验和可以通过-crc选项拷贝。

示例：hdfs dfs -get /out/word.tx /in

       9.copyToLocal复制文件到本地系统

使用方法：hdfs dfs -copyToLocal [-ignorecrc] [-crc] URI <localdst>

除了限定目标路径是一个本地文件外，和get命令类似。

示例：hdfs dfs - copyToLocal /out/word.txt /in

      10.mv移动文件

将文件从源路径移动到目标路径。这个命令允许有多个源路径，此时目标路径必须是一个目录。不允许在不同的文件系统间移动文件。

使用方法：hdfs dfs -mv URI [URI …] <dest>

示例：hdfs fs -mv /in/test1.txt /test2.txt

      11.du显示文件大小

使用方法：hdfs dfs -du URI [URI …]

示例：hdfs dfs -du /

显示当前目录或者文件夹的大小可加选项-s

示例：hdfs dfs -du -s /

      12.touchz创建空文件

使用方法：hdfs dfs -touchz URI [URI …] 

创建一个0字节的空文件

示例：hdfs dfs -touchz /empty.txt

       13.chmod改变文件权限

使用方法：hdfs dfs -chmod[-R] <MODE[,MODE]... | OCTALMODE> URI [URI …]

与Linux平台下chmod命令相似，改变文件的权限。使用-R将使改变在目录结构下递归进行。命令的使用者必须是文件的所有者或者超级用户。

       14.chown改变文件所有者

使用方法：hdfs dfs -chown [-R] [OWNER][，[GROUP]] URI [URI]

改变文件的拥有者。使用-R将使改变在目录结构下递归进行。命令的使用者必须是超级用户。

       15.chgrp改变文件所在组

使用方法：hdfs dfs -chgrp [-R] GROUP URI [URI …]

改变文件所属的组。使用-R将使改变在目录结构下递归进行。命令的使用者必须是文件的所有者或者超级用户。