scala
TracyGao01
保持专注
展开
-
windows本地sparkstreaming开发环境搭建及简单实例
1:开发环境IDEA选择:IntelliJ IDEA Community Edition 2017.1.1 (相比eclipse更方便,不用装那么多插件,且提供免费版,官网直接下载安装就可以)2:环境配置:(开发语言scala)由于公司网络原因,下载不方便,没有用mavn,直接拖了本地的jar包(1) spark core开发jar包: (2) spark streami...原创 2017-05-28 23:00:05 · 5164 阅读 · 0 评论 -
maven项目配置报错,scala、junit版本报错解决
报错如下:Error:scalac: error while loading JUnit4, Scala signature JUnit4 has wrong version expected: 5.0 found: 4.1 in JUnit4.class 解决:创建archetype,注意修改版本为1.6 ...原创 2018-01-04 09:56:13 · 2728 阅读 · 0 评论 -
spark hbase读写
1、通过hadoop API操作Hbaseimport org.apache.hadoop.hbase.HBaseConfigurationimport org.apache.hadoop.hbase.client.{Put, HTable}import org.apache.hadoop.hbase.mapreduce.TableInputFormatimport org.apache.spar...原创 2017-10-26 11:23:00 · 964 阅读 · 0 评论