- 博客(2)
- 资源 (9)
- 收藏
- 关注
RSS订阅原创 hbase常用shell命令
hbase建表：create 'test:medication', {NAME=>'p'}其中test是表空间，hbase表名是medication，列族是p添加数据： put 'test:medication','2','p:ICD_CODE','B23'向hbase中添加数据，rowkey是2查询前几条数据：scan 'test:medication',{LIMIT=...
2018-11-02 09:13:59
242
原创 spark 连接flume传输数据
1，编写FlumePushWordCount运行程序，启动监听端口88662. cd /usr/share/flume,编写脚本其中，在/usr/data.txt是一个空文件写脚本data.sh然后先运行flume-ng agent -c conf -f conf/flumesparktest.conf -n agent -Dflume.root.logger=INFO,con...
2018-11-01 15:34:42
515
spark自定义分区以及写了一个例子，对文件进行处理
用spark自定义了一个分区，并且写了一些数据！写了一个scala类，进行测试！里面备注详细，对于初学者来说是一个不错的例子！
2018-01-12
scala API 操作hbase表
最近看了hbase的源码根据源码写了一些scala调动hbase表的API，话不多说直接上代码！Hadoop的版本是2.7.3，scala版本是2.1.1，hbase的版本是1.1.2
如果版本不同可以修改pom的依赖项，但要注意版本冲突。
并且在scala，maven项目中，还有创建一个resources包（这个网上多的是）主要是放core-site,xml和hdfs-site.xml以及hbase-site.xml
2018-01-11
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人