- 博客(9)
- 收藏
- 关注
原创 通过java在hbase上进行表单的增删改查
https://gitee.com/shuijin666/hbase_java_api-by-whj.git
2018-08-14 19:22:01 782
原创 hive和hbase区别
1. 两者分别是什么? Apache Hive是一个构建在Hadoop基础设施之上的数据仓库。通过Hive可以使用HQL语言查询存放在HDFS上的数据。HQL是一种类SQL语言,这种语言最终被转化为Map/Reduce. 虽然Hive提供了SQL查询功能,但是Hive不能够进行交互查询--因为它只能够在Haoop上批量的执行Hadoop。 Apache HBase是一种Key/V...
2018-08-13 19:57:53 142
原创 hbase一些小总结(增删改查)
HBase概述 1)构建在HDFS之上 2) 分布式: 分而治之 3)面向列: HBase特点 1)大 2)面向列:数据构成,列族(多个列) 3)稀疏:null 4)数据类型单一:string 5)无模式: 每行数据所对应的列是可以不同 user: id name password age info.... 在创建表的时候就需要指定的 6)数据多版本 Cell HBase...
2018-08-13 16:47:54 2312
原创 2018.8.8hive一些常用命令总结
登陆(docker中): beeline -u "jdbc:hive2://localhost:10000/default 建库: select current_databases(); usedefault create database myhive1 use myhive1 建表:(有LOCATION的是外部表) CREATE EXTERNAL TABLE IF NOT EXISTS e...
2018-08-08 14:03:24 550
原创 hive基础入门------建(外)内表导入数据
连接hive beeline beeline -u "jdbc:hive2://localhost:10000/default" 查看数据库下的表 show tables; 查询数据库 show databases; 新建一个数据库 create database myhive2 再次查询 show databases; 使用此数据库 use ...
2018-08-08 14:01:47 1098
原创 求全年最高温度(通过mapreduce)
首先发地址 https://gitee.com/shuijin666/MRtemperature.git 里面有个测试文件以及源码 打开idea开始同步 完成将jar导出 然后xshell定位到文件目录 执行如下操作 hadoop jar temperaturem.jar mapreduce.temperature /demo/temperature.txt /demo/tem...
2018-08-06 12:25:21 1562
原创 mapreduce小项目
wordcount可以说是学大数据中的helloworld,码云代码传送门 打包编译 虚拟机执行命令 有设置参数,而不是固定输出,语法 hadoop jar qqq.jar mavend.Mapreduce /demo/ceshi /demo/new 第一个地址参数自己put上去个例子,第二个文件夹会自动创建 先put测试文件,空格作为分割统计,出现次数 完成之后去hadoop找自...
2018-08-04 15:33:50 954
原创 hdfs读写
码云地址 上面是源码 执行的时候打开我们的虚拟机 进入我们的jar包目录 java -cp qqq.jar mavend.HDFSAPItest -r /biaoshi hdfs://sandbox-hdphellowords.com:8020 ~helloworlds.txt 解释一下首先我们把本地文件put到了我们hadoop集群上 记得命令使用绝对路径,如何put...
2018-08-04 14:55:54 206
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人