linux
枫叶的记忆
勤奋 欣赏 包容 感恩
展开
-
Hive metastore三种配置方式
Hive的meta数据支持以下三种存储方式,其中两种属于本地存储,一种为远端存储。远端存储比较适合生产环境。Hive官方wiki详细介绍了这三种方式,链接为:Hive Metastore。 一、本地derby这种方式是最简单的存储方式,只需要在hive-site.xml做如下配置便可[html] view plaincopyprint?转载 2015-01-28 23:30:44 · 1805 阅读 · 0 评论 -
linux下硬盘读写速度测试
1. 测试读取速度haparm -Tt /dev/xxx1.1 获取硬盘设备名称:fdisk -lDisk /dev/xvdf: 365.0 GB, 365041287168 bytes255 heads, 63 sectors/track, 44380 cylindersUnits = cylinders of 16065 * 512 = 8225280 by转载 2015-12-11 17:31:17 · 957 阅读 · 0 评论 -
zookeeper3.4.5+tomcat7+solr-4.10.1分布式集群搭建
一、 说明本次分布式部署solr是在两台服务器(10.21.16.31和10.21.16.34)上部署5个结点,10.21.16.31服务器部署3个结点,10.21.16.34服务器部署2个结点二、 下载需要的工具包zookeeper-3.4.5.tar.gz,tomcat-7.0.50.tar.gz,solr-4.10.1.tgz(jdk必须是7,可以使用系统自带的openJ原创 2015-04-02 22:39:17 · 1718 阅读 · 1 评论 -
hive的简单介绍和基本命令整理
Hive是数据仓库工具,可以把hadoop下的原始结构化数据变成hive中的表;支持一种与SQL几乎完全相同是语言HiveQL,除了不支持更新、索引和事务,几乎SQL的其他特性都能支持;可以看成是从SQL到Map-Reduce的映射器;提供shell、JDBC/ODBC、Thrift、Web等接口。 Hive的安装模式:(1)内嵌模式:元数据保持在内嵌的Derby模式,只允许一个会话连原创 2015-01-30 13:29:58 · 542 阅读 · 0 评论 -
linux下修改文件权限、切换用户、添加文本、修改文本、hadoop执行jar文件等常用命令
1.修改文件权限chown -R hadoop hdfs1.jarchgrp -R hadoop hdfs1.jar2.查看文件权限ll3.切换用户su - hadoop4.添加文本touch word.txt5.修改文本gedit word.txt6.执行jar文件hadoop jar hdfs1.jar com.ailk.security.had原创 2015-01-18 17:16:25 · 2181 阅读 · 0 评论 -
linux下hadoop 2.4的编译安装.
1.下载需要的工具包jdk-7u5-linux-i586.gz,apache-maven-3.0.5-bin.tar.gz,cmake-2.8.12.1.tar.gz,hadoop-2.4.0.tar.gz,protobuf-2.5.0.tar.gz,zlib127.zip(如果机器已经安装了zlib或gzip即可不用安装)2.安装工具(1)安装JDK进入jdk的tar包目原创 2015-01-18 00:58:51 · 449 阅读 · 0 评论 -
Linux系统下文件属性权限说明及修改
Linux系统下文件属性权限说明及修改drwxr-xr-x 4 oracle dba 4096 May 20 11:47 oralog1-rwxr-xr-x. 1 root root 57480 5月 25 2010 traceroutelrwxrwxrwx. 1 root root 10 6月 23 2014 traceroute6 -> t原创 2015-02-06 10:59:36 · 1595 阅读 · 0 评论 -
Oracle VM VisualBox 创建共享文件夹
1.在CentOS中点击“设置”,选择“共享文件夹”,添加固定分配2.在虚拟机中新建文件夹,本人新建文件夹目录为“/home/twolf/D”3.打开命令行4.执行命令 sudo mount -t vboxsf D_DRIVE /home/twolf/D其中D_DRIVE为固定分配的名称,如果选择本地D盘,则默认为D_DRIVE/home/twolf/D为在/home/twol原创 2015-01-17 23:17:22 · 657 阅读 · 0 评论 -
linux切换用户显示路径
本人在切换到hadoop用户时出现修饰符与其他的不一样,所以,1.首先先切换到hadoop用户下 su hadoop2.编辑. bash_profile文件vi .bash_profile3.添加如下内容:PS1=hadoop@10.21.16.47 ~4.保存退出,并重新加载该配置文件说明:10.21.16.47是本机的ip,可以写本机的主机名原创 2015-01-30 17:45:51 · 722 阅读 · 0 评论 -
hadoop2.4.0+zooker3.4.5+hbase0.98.9分布式集群搭建
一、下载需要的工具包jdk-7u67-linux-x64.tar.gz,apache-maven-3.0.5-bin.tar.gz,cmake-2.8.12.1.tar.gz,hadoop-2.4.0.tar.gz,protobuf-2.5.0.tar.gz,hbase-0.98.9-hadoop2-bin.tar.gz,zookeeper-3.4.5.tar.gz二、linux基础环原创 2015-01-29 23:22:15 · 1221 阅读 · 0 评论 -
在CRT工具中Hbase Shell输入错误无法删除解决方案
简单几步轻松解决:【选项】——>[终端]——>[仿真]——>右边的【终端(T)】选择Linux ——>【确定】原创 2015-01-28 20:19:54 · 553 阅读 · 0 评论 -
linux下一些常用命令
1.添加用户adduser solr2.修改用户密码passwd solr3.将文件授权给solr用户chown -R solr test.txt4.将文件授权给solr用户组chgrp -R solr test.txt5.将文件传送给另外一个服务器指定用户的指定目录下scp /home/solr/test.txt solr@1原创 2015-04-02 22:58:10 · 510 阅读 · 0 评论