- 博客(5)
- 资源 (1)
- 收藏
- 关注
转载 Hbase snapshot
snapshot(快照)基础原理snapshot是很多存储系统和数据库系统都支持的功能。一个snapshot是一个全部文件系统、或者某个目录在某一时刻的镜像。实现数据文件镜像最简单粗暴的方式是加锁拷贝(之所以需要加锁,是因为镜像得到的数据必须是某一时刻完全一致的数据),拷贝的这段时间不允许对原数据进行任何形式的更新删除,仅提供只读操作,拷贝完成之后再释放锁。这种方式涉及数据的实际拷贝,数据量大的情
2018-01-19 18:06:10 1247
转载 HDFS配置Kerberos认证
本文主要记录 CDH Hadoop 集群上配置 HDFS 集成 Kerberos 的过程,包括 Kerberos 的安装和 Hadoop 相关配置修改说明。1. 环境说明系统环境:操作系统:CentOs 6.6Hadoop版本:CDH5.4JDK版本:1.7.0_71运行用户:root集群各节点角色规划为:192.168.56.121 cdh1
2018-01-12 10:23:50 623
转载 Impala和Hive集成Sentry
本文主要记录 CDH 5.2 Hadoop 集群中配置 Impala 和 Hive 集成 Sentry 的过程,包括 Sentry 的安装、配置以及和 Impala、Hive 集成后的测试。使用 Sentry 来管理集群的权限,需要先在集群上配置好 Kerberos。关于 Hadoop 集群上配置 kerberos 以及 ldap 的过程请参考本博客以下文章:HDFS配置K
2018-01-12 10:21:57 1062
转载 数据库四大特性(ACID)及事务隔离级别
本篇讲诉数据库中事务的四大特性(ACID),并且将会详细地说明事务的隔离级别。 如果一个数据库声称支持事务的操作,那么该数据库必须要具备以下四个特性:⑴ 原子性(Atomicity) 原子性是指事务包含的所有操作要么全部成功,要么全部失败回滚,这和前面两篇博客介绍事务的功能是一样的概念,因此事务的操作如果成功就必须要完全应用到数据库,如果操作失败则不能对数据库有任何影响
2018-01-11 15:07:27 195
原创 hbase几大过滤器
Hbase几大Filters1、Comparision Filters 比较过滤器1.1 RowFilter (过滤row,例如RowFilter(CompareOp.LESS_OR_EQUAL, new BinaryComparator(Bytes.toBytes("pbrry"))),返回按字母排序在pbrry之前的那些row的内容)1.2 FamilyFilter
2018-01-10 14:06:16 1889
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人