- 博客(17)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 CDH-Flume报错：org.apache.flume.Context.getSubPropertiesLcom/google/common/collect/ImmutableMap;
前言Mvn编译打包见Maven命令行编译Git源码 & flume-ng-sql-source源码编译打包问题使用CDH中的flume监听sql数据时，需要打一个 flume-ng-sql-souce.jar 的插件，将其编译打包后，运行flume任务会出现如下的报错：java.lang.NoSuchMethodError: org.apache.flume.Context....
2019-12-26 20:14:38
1486
2
原创 Maven命令行编译Git源码 & flume-ng-sql-source源码编译打包
文章目录概述过程概述本文描述使用Maven编译Git下载的源码在实现flume同步SQL数据到HDFS时，由于需要使用Git开源项目flume-ng-sql-source，而Git上面只有源码，因此需要自行编译。过程从Git开源项目flume-ng-sql-source上下载源码zip包解压此zip包:（unzip flume-ng-sql-source-develop.zi...
2019-12-26 12:10:43
698
1
原创 mvn package执行jar包名称
如下的fileName即可指定jar包名称: <build> <finalName>jar包名称</finalName> <plugins> <plugin> <groupId>org.spark.hadoop</groupId> <artifactId>*****<...
2019-12-26 12:07:39
490
转载 ubuntu 手动释放内存&crontab定时释放
其中/proc/sys/vm/drop_caches中的值有4个，分别为0-3：0 – 不释放1 – 释放页缓存2 – 释放dentries和inodes3 – 释放所有缓存sudo sh -c “echo 1 > /proc/sys/vm/drop_caches” # 释放页缓存sudo sh -c “echo 2 > /proc/sys/vm/drop_cache...
2019-12-26 09:34:39
671
原创 第十一章 并发控制
文章目录概述11.1 并发控制概述11.1.1 丢失修改11.1.2 不可重复读11.1.3 读“脏”数据11.2 封锁11.2.1 封锁定义11.2.2 基本封锁类型11.2.3 封锁协议11.2.4 活锁和死锁11.2.4.1 活锁11.2.4.2 死锁11.2.4.3 死锁的诊断与解除11.3 并发调度的可串行性11.3.1 可串行化调度11.3.2 冲突可串行化调度 概...
2019-12-25 14:19:58
737
原创 Hive版本兼容问题：java.sql.SQLException: Method not supported
问题描述SLF4J: Class path contains multiple SLF4J bindings.SLF4J: Found binding in [jar:file:/home/yeluo/.m2/repository/org/slf4j/slf4j-log4j12/1.7.16/slf4j-log4j12-1.7.16.jar!/org/slf4j/impl/StaticLogg...
2019-12-24 20:14:52
7002
2
原创 第六章 关系数据理论（上）数据依赖+码+范式
文章目录6.1 为什么学习关系数据理论6.1.1 问题提出6.1 为什么学习关系数据理论6.1.1 问题提出关系数据库的基本概念关系模型关系数据库的标准语言关系数据库逻辑设计：针对一个具体问题,应如何构造一个适合于它的数据模式,即应该构造几个关系,每个关系由哪些属性组成等。那么，什么是一个好的数据库逻辑设计？...
2019-12-24 20:13:23
3169
原创 第十章 数据库恢复技术
文章目录10.1 事务的基本概念10.1.1 事务的定义10.1.1.1 事务定义方式10.1.2 事务的ACID特性10.1.3 破坏事务ACID特性的因素10.2 数据库恢复10.2.1 数据库恢复概述10.2.2 故障的种类10.2.2.1 事务内部的故障 10.1 事务的基本概念 10.1.1 事务的定义定义：事务(Transaction)是用户定义的一...
2019-12-24 20:08:51
585
原创 hive报错：Required field 'client_protocol' is unset!
问题描述在使用客户端连接Hive时，发现无法连接上上hiveserver2报错信息如下：SLF4J: Class path contains multiple SLF4J bindings.SLF4J: Found binding in [jar:file:/home/yeluo/.m2/repository/org/slf4j/slf4j-log4j12/1.7.16/slf4j-log...
2019-12-10 00:39:01
1255
原创 Spark性能调优 之 合理规划资源配置
文章目录1. 合理规划资源配置1.1 简介1.1.1 资源配置调优原理1.2 资源配置说明1.2.1 资源配置种类1.2.2 资源配置方式1.2.3 调优原则2. 调节并行度2.1 简介2.1.1 并行度简介2.1.2 并行度调优原理2.2 并行度调节说明2.2.1 并行度调节方式2.2.2 并行度调节原则3. 重构RDD架构与RDD持久化3.1 说明1. 合理规划资源配置1.1 简介性...
2019-12-10 00:20:47
853
1
转载 Maven更新卡住：解决Maven无法下载相关依赖
问题记录方法一在Eclipse下用Maven创建项目并构建相关的Maven依赖是意见非常方便的事情，配置好pom.xml文件中的dependency，update project的时候如果出现无法下载相关依赖。那么可以在pom.xml文件里面配置相关中央仓库。 <repositories> <repository> <...
2019-12-09 23:50:26
1871
原创 Zookeeper启动报错：The current epoch, 5, is older than the last zxid, 30064771074
概述解决Zookeeper启动报错The current epoch, 5, is older than the last zxid, 30064771074 问题描述在CDH启动Zookeeper时遇到如下问题：Reading snapshot /usr/local/zk/data/version-2/snapshot.8000000032019-12-09 23:16:...
2019-12-07 00:57:10
1761
原创 ZooKeeper报错：Unable to access datadir, exiting abnormally
概述解决Zookeeper报错问题描述2019-12-09 23:18:41,425 INFO org.apache.zookeeper.server.quorum.QuorumPeerConfig: Reading configuration from: /var/run/cloudera-scm-agent/process/604-zookeeper-server/zoo.cfg2...
2019-12-07 00:49:34
9824
1
原创 解决虚拟机Ubuntu18.04系统初始内存占用过高（Ubuntu 18.04开机进入命令行及还原）
文章目录概述1. 普通设置2. 核心设置--进入命令行模式2.1 设置开机进入命令行模式2.2 还原到图形界面模式2.3 ubuntu命令行模式与图形桌面切换方法3. CDH相关特殊设置 概述在使用CDH时，搭建的环境为1实体机+2虚拟机的方式：实体机 : Master 172.20.10.100虚拟机1 : Slave1 172.20.10.10虚拟机2 : Slave...
2019-12-06 18:59:23
4575
原创 CDH报错解决：该主机与 Cloudera Manager Server 失去联系的时间过长。该主机未与 Host Monitor 建立联系。
说明下，qichu这里是由于集群资源有限，在最初配置如下：Master 172.20.10.100Slave1 172.20.10.10Slave2 172.20.10.20如上图所示，该主机与 Cloudera Manager Server 失去联系的时间过长。 该主机未与 Host Monitor 建立联系。要结局此问题，首先请确保以下的配置或设置正确：问题节点所在的机器已...
2019-12-06 18:57:28
9093
2
原创 软件性能测试工具LoadRunner12常见问题说明
文章目录概述概述最近再学习软件测试中的性能测试，二已经9102年了，使用到的工具也已经是LoadRunner12+了，遇到的一些使用上的问题，这里记录一下，以便日后再次碰到能够及时解决。这次在性能测试的过程中，遇到的问题如下：录制方式的选择--------HTML-Based/URL-Based浏览器兼容问题IE/Chrome/Firefox浏览器卡死崩溃问题IE录制脚本为空问题...
2019-12-02 11:44:20
2015
4
原创 windws10下Loadrunner12的使用教程详解
文章目录概述1. LoadRunner介绍1.1 基本介绍1.2 基本组件1.3 菜单及快捷键2. 录制与回放概述本文介绍Win10下性能测试工具LoadRunner的使用。1. LoadRunner介绍1.1 基本介绍从LoadRunner英语字面上进行理解就是负载跑步者，为什么这么说呢？对于从事IT软件行业的工作者如开发人员和测试人员来说一定不会感到陌生就是在承受负载的条件下运行软...
2019-12-02 11:43:37
2547
flume-ng-sql-source-1.5.3.jar
2019-12-26
DBMS课件.zip
2019-12-24
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人