![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Study
文章平均质量分 51
差不多de先生
这个作者很懒,什么都没留下…
展开
-
HDFS环境的安装配置
准备四台能够相互ping通(jdk安装完毕)的机器 NameNode:node001,SecondNameNode:node002 DataNode1:node002,DataNode2:node003,DataNode3:node004 配置免密码登陆 ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa 将NameNode(node001)生成的共有密钥...原创 2018-03-07 01:02:45 · 1918 阅读 · 0 评论 -
Tengine与Memcached解决Session一致性的问题
Tengine的安装安装GCCyum install gcc安装PCREyum install pcre PCRE-devel 安装OpenSSLyum install openssl-devel解压安装包tar -zxvf tengine-2.1.0.tar.gz 执行configure文件,指定安装目录[root@node001 tengine-2.1.0].configure --pref...原创 2018-02-27 22:12:52 · 184 阅读 · 0 评论 -
Hadoop集群环境的搭建
安装Zookeeper tar -zxvf zookeeper-3.4.6.tar.gz 修改Zookeeper的配置文件 tickTime=2000 dataDir=/opt/zookeeper clientPort=2181 initLimit=5 syncLimit=2 server.1=node001:2888:3888 server.2=node003:2888:388...原创 2018-03-17 14:59:18 · 167 阅读 · 0 评论 -
Hadoop-Eclipse
Windows下解压hadoop的部署包和源码包 要找一个没有空格和中文字符的路径(包括JDK的安装目录) 将hadoop-2.6.5.dll复制到C:\Windows\System32目录下 配置环境变量 新建:HADOOP_HOME=D:\Study\hadoop-2.6.5 HADOOP_USER_NAME=root 追加:PATH=%HADOOP_HOME...原创 2018-03-17 21:55:41 · 159 阅读 · 1 评论 -
MapReudce的执行方式
服务器环境 在服务器上,使用命令的方式调用,执行过程在服务器中 直接把MR程序进行打包,然后传送到服务器上 hadoop jar wordCount.jar com.lh.wordCount.RunJob 在本地直接调用,执行过程在服务器上(真正企业运行环境) 1.在src目录下加入Hadoop的配置文件 2.修改Hadoop源码:NativeIO,YARNRunner 3...原创 2018-03-18 16:09:17 · 247 阅读 · 0 评论 -
Hbase的安装步骤
解压Hbase tar -zxvf hbase-0.98.12.1-hadoop2-bin.tar.gz 配置环境变量 vi ~/.bash_profile export HBASE_HOME=/home/hbase-0.98.12.1-hadoop2 export PATH=$PATH:HIVE_HOME/bin 修改hbase-env.sh export JAVA_HO...原创 2018-03-29 22:59:30 · 245 阅读 · 0 评论 -
HBase知识点总结
HBase数据模型术语 Table(表格):HBase表格有多行组成 Row(行):行按照key的字母顺序存储在表格中,Row Key只能存储64k的字节数据 Column(列):包含列族列的限定符 Column Family(列族):列族包含一组列和他们的值,HBase把同一列族里面的数据存储在同一个目录,由几个文件保存 Column Qualifier(列的限定符):列的限定符是列族中数...原创 2018-03-31 16:02:30 · 346 阅读 · 2 评论 -
Hive的安装步骤
安装Mysql yum安装Mysql yum -y install mysql-server 启动Mysql Service服务 service mysqld start 加入到开机启动项 chkconfig mysqld on 创建用户并赋予权限 GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY '123456' ...原创 2018-03-28 01:29:38 · 211 阅读 · 0 评论 -
Hive知识点总结
Hive支持的数据类型 primitive_type array_type map_type struct_type DDL create table t1( id int, name string, ) row format delimited fields terminated by '\t' // 字段之间用'\t'隔开...原创 2018-03-28 01:51:20 · 160 阅读 · 0 评论