大数据云平台搭建
文章平均质量分 66
程序员QQ
Your Keyboard Has The Power To Change The World !
展开
-
hbase的基本语法
1.查看Hbase的版本 hbase version 2.启动Hbase start-hbase.sh 3.获取帮助 help 4.创建一张表 create ‘tableName’,’column’ 5.列出标的信息 list ‘tableName’ 6.向表中插入一条数据 put ‘tableName’,’column:a’,’value’ 7.扫描表中的数据原创 2017-12-26 23:20:44 · 375 阅读 · 0 评论 -
hive的基本语法
显示命令 •show tables; •show databases; •show partitions ; •show functions •describe extended table_name dot col_name 1.展示hive中所有的表: SHOW TABLES; 2.正则匹配要查询的表 SHOW TABLES ‘sb_gbsj*’; 3.创建简单表: CRE原创 2017-12-26 23:24:35 · 615 阅读 · 0 评论 -
hadoop的基本语法
hadoop 1.查看hadoop根目录下的文件 hadoop fs -ls / 2.进行递归查看文件 hadoop fs -lsr / 3.创建一个文件夹 hadoop fs -mkdir /temp 4.上传一个文件到指定的目录 hadoop fs -put /home/hadoop/input hdfs://node1:9000/tmp原创 2017-12-26 23:25:53 · 2257 阅读 · 0 评论 -
大数据平台搭建(2)
注意:因为博客中美元符号有特殊含义,所以将美元符号替换为& 10.安装hadoop a.上传:将hadoop-2.7.3.tar.gz压缩包上传到/user/local路径下 b.解压:将上传的hadoop包解压缩到当前的目录下(tar -zxvf hadoop-2.7.3.tar.gz) c.配置环境变量:在profile文件末尾添加配置(vim /etc/prof原创 2017-12-26 23:55:34 · 354 阅读 · 0 评论 -
大数据平台搭建(1)
设计技术: JDk1.8+zookeeper-3.4.10+hadoop-2.7.3.tar.gz+ hbase-1.3.1+scala-2.11.8.tgz+spark-2.1.0-bin-hadoop2.7+ apache-hive-2.3.2-bin.tar.gz+ mysql-5.7.20-linux-glibc2.12-x86_64.tar.gz1.机器准备(一共准备5台机器,其中原创 2017-12-26 23:41:56 · 1681 阅读 · 0 评论 -
大数据平台搭建(3)
i.配置hdfs-site.xml<configuration> <property> <name>dfs.namenode.name.dir</name> <value>file:/usr/local/hadoop-2.7.3/dfs/name</value> </property> <property> <name>dfs.datanode.原创 2017-12-27 00:01:46 · 428 阅读 · 0 评论 -
大数据平台搭建(4)
12.安装hbase a.上传:将hbase-1.3.1-bin.tar.gz压缩包上传到/user/local路径下 b.解压:将上传的hadoop包解压缩到当前的目录下(tar -zxvf hbase-1.3.1-bin.tar.gz) c.修改 hbase-env.sh export JAVA_HOME=/usr/java/jdk1.8原创 2017-12-27 00:09:49 · 860 阅读 · 0 评论 -
大数据平台搭建(5)
17.安装mysql a.上传:将mysql-5.7.20-linux-glibc2.12-x86_64.tar.gz压缩包上传到/user/local/mysql路径下 b.解压:将上传的mysql-5.7.20-linux-glibc2.12-x86_64.tar.gz包解压缩到当前的目录下(tar -zxvf mysql-5.7.20-linux-glibc2.12-x86原创 2017-12-27 00:13:30 · 472 阅读 · 0 评论