2016年08月_河南骏

转载 Windows Server 2008 R2 实现多用户同时登陆

Server 版系统一直都支持多用户同时登陆，这是一个很好用的功能，我们来看看怎么实现的。1、查看系统默认的允许最大用户登录数，一般默认的是2。Start->Administrator tools->Remote Desktop Services->Remote Desktop Session Host Configuration 2、选中RDP-Tcp右键“属性”，点击“NetWor

2016-08-30 10:02:04 1863

原创装完Centos7提示Initial setup of CentOS Linux 7 (core)

装完CentOS后，重新开机启动后显示：Initial setup of CentOS Linux 7 (core) 1) [x] Creat user 2) [!] License information(no user will be created) (license not accepted)Please make your choice from above ['q' t

2016-08-25 13:25:19 405

转载 Cloudera Manager 中Oozie 配置HIVE workflow

参考博客地址:http://shiyanjun.cn/archives/664.html前提是你的hive和你的oozie都已经配置好了。hive配置很简单，oozie配置中的问题可以看我的上一篇博客。分为几步，1 hive-site.xml 及对应版本的hive的jar包，都要上传到hdfs。你肯定在hdfs上已经建立了对应的目录。针对我装的cm5.7，相

2016-08-24 15:49:50 5298 1

原创基于Hadoop集群的HBase集群的配置

1> 准备工作 a> 已经配置完成的Hadoop集群 b> 所需要的软件包 zookeeper-3.4.4.tar.gz hbase-0.94.5.tar.gz2> 单独安装的ZooKeeper集群，不基于HBase集群管理 a> 在master01上解压zookeeper-3.4.4.

2016-08-22 09:33:08 435

原创 Hive之——启动问题及解决方案

问题1：Caused by: javax.jdo.JDODataStoreException: Required table missing : "`VERSION`" in Catalog "" Schema "". DataNucleus requires this table to perform its persistence operations. Either your M

2016-08-22 09:31:39 15248

Hive是基于Hadoop构建的一套数据仓库分析系统，它提供了丰富的SQL查询方式来分析存储在Hadoop 分布式文件系统中的数据。其在Hadoop的架构体系中承担了一个SQL解析的过程，它提供了对外的入口来获取用户的指令然后对指令进行分析，解析出一个MapReduce程序组成可执行计划，并按照该计划生成对应的MapReduce任务提交给Hadoop集群处理，获取最终的结果。元数据——如表模式——

2016-08-22 09:24:18 793

原创搭建hadoop 2.6.0集群

一、规划（一）硬件资源 192.168.15.60 master192.168.15.61 slave1192.168.15.62 slave2（二）基本资料用户： hadoop 目录：/opt/hadoop二、环境配置（一）统一用户名密码，并为jediael赋予执行所有命令的权限 #groupadd hadoop# use

2016-08-22 09:18:07 484

原创安装Hue后的一些功能的问题和解决

1、HUE中hive 查询有问题，页面报错：Could not connect to localhost:10000解决方法：在安装的HIVE中启动hiveserver2 &,因为端口号10000是hiveserver2服务的端口号，否则，Hue Web 控制无法执行HIVE 查询。2、Hue中配置DB 查询（mysql）。解决方法：编辑hue.ini[rdbms]/[li

2016-08-12 15:27:36 9160

原创 Hive在hadoop2.50-cdh5.3.6的安装部署

1、安装环境JDK1.7.0centOS6.4hive0.13.1cdh5.3.6hadoop2.5.0mysql2、Hive的功能架构介绍Hive是一种以SQL风格进行任何大小数据分析的工具，其特点是采取类似关系数据库的SQL命令。其特点是通过 SQL处理Hadoop的大数据，数据规模可以伸缩扩展到100PB+，数据形式可以是结构或非结构数据。Hive与传统关系数据

2016-08-11 18:03:59 2024

原创 hadoop2伪分布式安装步骤

1.安装环境安装前的准备：hadoop2.5.0 下载地址：https://archive.apache.org/dist/hadoop/common/hadoop-2.5.0/jdk7 下载地址：http://www.oracle.com/technetwork/java/javase/downloads/java-archive-downloads-javase7-521261

2016-08-11 18:02:24 450

原创 oozie安装部署在hadoop2.50.0-CDH5.3.6

最近在这几天在搞伪分布式安装hue,在安装oozie的时候总是启动不了web界面，花了很长时间搞定，下面是安装oozie的步骤总结一下：安装环境：centOS6.4Java JDK 1.7Mavenhadoop-2.5.0-cdh5.3.6oozie-4.0.0-cdh5.3.6ext-2.2.zip安装前注意事项Download ExtJS library (it mus

2016-08-11 17:44:18 2928

原创为什么cdh5.3.6 oozie 4.0无法连接 hadoop ha，认不到share lib？

安装oozie有些问题，按照教程执行以下命令导入oozie share libsudo -u oozie /usr/lib/oozie/bin/oozie-setup.sh sharelib create -fs hdfs://cloud61 -locallib /usr/lib/oozie/oozie-sharelib-yarn一直报Caused by: java.net.ConnectEx

2016-08-10 10:27:05 1364

转载 cdh5.3.6下hue3.7.0的安装部署

由于在CM5.7.0中执行HUE的hive workflow有问题，网上说是oozie仅支持0.13.1版本的hive，故搭建的集群暂时用不上，需要重新搭建一个伪分布式的cm，网上找到一篇，在下载下面的组件的时候，确实是有些版本限制，按下文走一遭试试！帮的上忙的链接：http://suncf1985.iteye.com/blog/2012926！！！本文介绍如何在centOS6.4

2016-08-08 16:28:08 5519 9

原创 cloudera manager5.7.0中编译oozie的hive workflow一直heart beat 问题总结

这个问题折腾了很久，现在还是有点困惑，废话少说，先把我趟的KENG说一下：1、修改/tmp 文件的权限 -------> sudo chmod a+wrx /tmp2、把mysql 的驱动jar包放到 hdfs上3、把hive-site.xml(一般在/opt/cm-5.7.0/run/cloudera-scm-agent/process/64-hue-HUE_SERVER/h

2016-08-04 18:53:16 2761 2

翻译 Hive中的三种不同的数据导出方式介绍

根据导出的地方不一样，将这些方式分为三种：（1）、导出到本地文件系统；（2）、导出到HDFS中；（3）、导出到Hive的另一个表中。为了避免单纯的文字，我将一步一步地用命令进行说明。一、导出到本地文件系统　　hive> insert overwrite local directory '/home/wyp/wyp' > select *

2016-08-02 16:11:27 457

河南骏的博客