- 博客(2)
- 资源 (9)
- 收藏
- 关注
RSS订阅原创 sqoop抽取数据到hbase上
jdbc:oracle:thin:@//192.168.3.94/xmhealthy 指的是数据库 jdbc连接的IP和数据库实例名username cmmi --password cmmi 指的是数据库的用户名和密码query " " 中间是oracle数据库查询语句where 1 = 1 因为抽取语句中有and出现 而oracle查询语句 没有where 条件存在的话就要写上 w...
2019-02-18 10:17:38
866
原创 hive创建hbase外部表
hive 启动命令：$HIVE_HOME/bin/hivehive 创建hbase外部表：ihr_pes为hive表名：CREATE EXTERNAL TABLE ihr_pes(id string comment “hbase rowkey”,identity_no string comment “身份证号”,org_code string comment “医院编号”,patie...
2019-02-12 11:15:05
4862
spark自定义分区以及写了一个例子，对文件进行处理
用spark自定义了一个分区，并且写了一些数据！写了一个scala类，进行测试！里面备注详细，对于初学者来说是一个不错的例子！
2018-01-12
scala API 操作hbase表
最近看了hbase的源码根据源码写了一些scala调动hbase表的API，话不多说直接上代码！Hadoop的版本是2.7.3，scala版本是2.1.1，hbase的版本是1.1.2
如果版本不同可以修改pom的依赖项，但要注意版本冲突。
并且在scala，maven项目中，还有创建一个resources包（这个网上多的是）主要是放core-site,xml和hdfs-site.xml以及hbase-site.xml
2018-01-11
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人