- 博客(5)
- 资源 (7)
- 收藏
- 关注
RSS订阅原创 Spring boot 消费kafka 写入hbase
新建spring boot添加maven依赖<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http:/
2017-11-29 11:22:13
3123
1
原创 spark2.1 Row_number，Window使用
有这种情况,一个项目下一个设备多次上报检测成功记录,但我只要最早上报记录代码如下:package com.sparkimport org.apache.spark.sql.SparkSessionimport org.apache.spark.sql.expressions.Windowimport org.apache.spark.sql.functions._object LastestTi
2017-11-17 11:43:22
1156
原创 Spark 读取mysql表统计
添加maven依赖 <dependency> <groupId>mysql</groupId> <artifactId>mysql-connector-java</artifactId> <version>5.1.6</version> </dependency>读取数据库package com.spa
2017-11-17 11:20:42
1856
原创 hbase docker本地开发环境
部门需求hbase做数据存储,只有一个正式环境集群,没有测试环境. 所以考虑本地部署一个hbase测试环境.hbase本地环境部署安装docker容器,windows只支持win10. 我是mac,直接从官网下载https://www.docker.com/docker-mac 安装启动docker:#拉取容器docker pull harisekhon/hbase#启动容器docker
2017-11-10 11:53:50
6936
3
原创 Spark本地开发环境scala版本
SBT-Scala 参考上篇http://blog.csdn.net/baifanwudi/article/details/78354339 配置hadoop环境变量新建SBT项目sbt配置name := "SparkScalaTest"version := "1.0"scalaVersion := "2.11.8"libraryDependencies += "org.apache.s
2017-11-01 14:44:53
1521
hadoop初级程序源代码
2013-07-02
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人