- 博客(2)
- 资源 (9)
- 收藏
- 关注
RSS订阅
原创 logstash脚本抽取数据到es或kafka，上
logstash从oracle抽数据到kafka input { jdbc { jdbc_driver_library => “ojdbc6-11.2.0.3.0.jar 插件的” jdbc_driver_class => “Java::oracle.jdbc.OracleDriver” ...
2018-08-31 15:31:50
2780
2
原创 spark从oracle读取数据写到hbase
package com.analysis import java.sql.DriverManager import java.text.SimpleDateFormat import org.apache.hadoop.hbase.client.Put import org.apache.hadoop.hbase.io.ImmutableBytesWritable import org....
2018-08-29 11:31:01
1852
1
spark自定义分区以及写了一个例子，对文件进行处理
用spark自定义了一个分区，并且写了一些数据！写了一个scala类，进行测试！里面备注详细，对于初学者来说是一个不错的例子！
2018-01-12
scala API 操作hbase表
最近看了hbase的源码根据源码写了一些scala调动hbase表的API，话不多说直接上代码！Hadoop的版本是2.7.3，scala版本是2.1.1，hbase的版本是1.1.2
如果版本不同可以修改pom的依赖项，但要注意版本冲突。
并且在scala，maven项目中，还有创建一个resources包（这个网上多的是）主要是放core-site,xml和hdfs-site.xml以及hbase-site.xml
2018-01-11
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人