- 博客(6)
- 收藏
- 关注
原创 异常报错:An SQLException was provoked by the following failure: java.lang.InterruptedException
原因是mysql-connector-java的jar包版本问题,升级至与mysql版本一致即可 请检查是否下载了该jar包
2019-08-02 18:09:43 5078
原创 SQl语句中的 case when用法
Case具有两种格式。简单Case函数和Case搜索函数。 简单Case函数 CASEsex WHEN'1'THEN'男' WHEN'2'THEN'女' ELSE'其他'END --Case搜索函数 CASEWHEN sex ='1'THEN'男' WHEN sex ='2'THEN'女' ELSE'其他'END 种方式,...
2019-04-26 19:05:41 185
原创 Flume的相关介绍
Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统. flume中无法直接监听数据库,因为没有jdbc插件 但是可以自定义数据源 直接通过extend abstractsource. 还可以自定义sink通过extend abstractsink 在flume中用来保证事务操作的source是taildirsource,可以监听文件夹和其中的文件...
2019-04-21 19:42:01 116
原创 ELK集中式日志系统
ELK是一整套解决方案,是三个软件产品的首字母缩写,Elasticsearch,Logstash 和 Kibana。这三款软件都是开源软件,通常是配合使用,而且又先后归于 Elastic.co 公司名下,故被简称为 ELK 协议栈。 Elasticsearch是一个实时的分布式搜索和分析引擎,它可以用于全文搜索,结构化搜索以及分析。它是一个建立在全文搜索引擎 Apache Lucene 基础上的...
2019-04-21 19:28:08 213
原创 大数据中的数据是什么? spark的作用是什么?
数据一个很宽泛的定义,一切可以记录的都可以称之为数据.比如文字 视频 音频等. 大数据领域把数据分为三类:结构化数据 半结构化数据 和非结构化数据.一般我们处理结构化数据(mysql和oracle中的表)和半结构化数据(html和json格式),非结构数据(视频 音频)这个处理起来有难度,一般涉及人工智能领域. 大数据的价值体现三方面:增加收入减少支出 控制风险 数据的作用:通过大...
2019-04-20 18:26:14 1768
原创 Hbase和HIve的区别
Hive和Hbase是两种基于Hadoop的不同技术, Hive是一种类SQL的引擎,并且运行MapReduce任务,hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。 Hbase是一种在Hadoop之上的NoSQL 的Key/vale数据库。 这两种工具是可以同时使用的。...
2019-04-20 17:58:32 175
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人