- 博客(15)
- 资源 (2)
- 问答 (1)
- 收藏
- 关注
原创 HDFS Trash 整理
CM配置步骤:Configuring HDFS TrashThe Hadoop trash feature helps prevent accidental deletion of files and directories. If trash is enabled and a file or directory is deleted using the Hadoop
2015-07-28 10:32:33 2034
原创 zookeeper无法启动"Unable to load database on disk"
自己的虚拟机集群,一次强制关机后,发现slave2的zookeeper起不来了下午5点29:53.411 INFO org.apache.zookeeper.server.quorum.QuorumPeerConfig Reading configuration from: /var/run/cloudera-scm-agent/process/517-zookeeper-server
2015-07-27 17:42:44 10089 3
原创 通过Cloudera Manager为datanode增加数据目录
CDH4安装成功后,datanode数据默认存放在/dfs目录下。如果dfs目录不是逻辑卷创建的,那么当它使用率过大时,我们需要添加数据目录1.登录Cloudera Manager : http://localhost:7180 2.点击配置—>查看和编辑 3.选择你要添加加数据目录的datanode,点击添加 4.如图,我添加了/fan目录,之后点击保存更改 5.保存后,返回实例页面,选择
2015-07-26 23:29:38 5442 2
原创 通过Cloudera Manager修改机架
分布式的集群通常包含非常多的机器,由于受到机架槽位和交换机网口的限制,通常大型的分布式集群都会跨好几个机架,由多个机架上的机器共同组成一个分布式集群。机架内的机器之间的网络速度通常都会高于跨机架机器之间的网络速度,并且机架之间机器的网络通信通常受到上层交换机间网络带宽的限制。 具体到Hadoop集群,由于hadoop的HDFS对数据文件的分布式存放是按照分块block存储,每个bloc
2015-07-26 23:21:19 2482
原创 HDFS SnapShot学习
官方文档链接:http://hadoop.apache.org/docs/r2.7.1/hadoop-project-dist/hadoop-hdfs/HdfsSnapshots.html概述 HDFS快照是一个只读的基于时间点文件系统拷贝。可以为文件系统中的某个子目录或者整个文件系统拍摄快照。快照通常用来作为数据备份,防止用户错误和容灾。HDFS快照的创建是高效的: 快照的创建是”瞬间
2015-07-26 15:10:09 2082
原创 Configuring HDFS High Availability
Configuring HDFS High Availability原文请访问 http://blog.csdn.net/ashic,突袭新闻小灵儿,linux公社,各种爬虫
2015-07-23 16:36:59 1625
转载 HDFS HA QJM
本文转载自http://itindex.net/detail/50686-hdfs-ha-qjm本文主要介绍HDFS HA特性,以及如何使用QJM(Quorum Journal Manager)特性实现HDFS HA。 一、背景 HDFS集群中只有一个Namenode,这就会引入单点问题;即如果Namenode故障,那么这个集群将不可用,直到Namenode重启或者其他Nam
2015-07-23 09:46:35 692
原创 一键DG脚本(静默安装创建实例创建DG)
首先,这只是为了练习shell而写大神们不屑请别看不懂shell的可以看看,做个参考,把一些功能当做魔板我知道红黑联盟,linux公社等会盗转,所以提前问候你们全家了脚本大致步骤是:1.判断是否创建oracle用户,如果没有创建就创建,并设置密码为oracle2.解析config.conf文件,获取用户输入的SID等等参数3.做安装前的参数配置,创建所需目录4.安装数据库软件,配置监听,
2015-07-17 10:29:28 5530 38
原创 通过expect执行scp,传输文件不完整的解决方法
写了一个脚本来传输文件,类似于这样:sendsystem(){expect -c " spawn scp $ORACLE_BASE/oradata/$ORACLE_SID/system01.dbf oracle@$S_IP:$ORACLE_BASE/oradata/standby/ expect { yes/no { sen
2015-07-16 17:03:08 15251 4
原创 Creating a Physical Standby Database 11g
Creating a Physical Standby Database 11gItemPrimary databasestandby databasePlatformRedhat 5.4Redhat 5.4Hostnamegc1gc2DatabaseOracle 11.2.0.1.0
2015-07-15 12:01:10 736
原创 一键安装ORACLE并建库脚本
最近学shell,练习而写,只贴了一部分,没法直接用,但是可以作为例子吧#!/bin/bashSETPASSWD(){#set passwordexpect -c " set timeout 2; spawn passwd oracle expect { password { send \"oracl
2015-07-12 20:28:24 3765 1
原创 Mysql最简单的复制环境部署方法
最简单的复制环境部署方法 这里环境如下: Master一直没有写操作 Master和Slave在一台虚拟机中,端口号分别为3306和3307 1.关闭Master数据库服务mysqladmin -umysql -p -S /data/mysqldata/3306/mysql.sock shutdown2.复制数据文件cp -r /data/mysqldata/
2015-07-08 17:35:47 900
原创 sublime列模式
1苹果:OS X-鼠标左键+Option-或者鼠标中键-增加选择:Command,减少选择:Command+Shift2Windows:-鼠标右键+Shift-或者鼠标中键-增加选择:Ctrl,减少选择:Alt3Linux:-鼠标右键+Shift-增加选择:Ctrl,
2015-07-07 10:06:59 3574
原创 Sublime Text自动换行
解决方法是:打开 Preferences -> Setting - User添加如下内容即可:{ "word_wrap" : true }
2015-07-07 10:04:13 1415
原创 Mysqldump
查看帮助mysqldump --help-?,--help帮助信息-u,--user指定连接的用户名-p,--password指定用户的密码,可以只指定参数,mysqldump随后将提示输入密码-S,--socket指定socket文件连接,本地登录才会使用-h,--
2015-07-07 09:03:37 661
MongoDB实战 Kyle Banker
2016-09-18
Oracle如何避免partial write
2017-01-05
TA创建的收藏夹 TA关注的收藏夹
TA关注的人