xiaofeng 代*zuo*毕业##设计**

联系qq :193459197

hive安装测试及Hive 元数据的三种存储方式

一  hive安装测试 1、下载解压 tar -xf hive-x.y.z.tar.gz(本次安装为hive-0.8.1.tar.gz) 将解压后的hive-0.8.1文件放在系统的/home/hadooptest/中。 2、环境变量配置 ...

2014-03-31 22:27:51

阅读数 3144

评论数 0

移动namenode、secondarynamenode和jobTracker的节点(使其成为独立节点)

由于集群规模差异较大,对于主节点守护进程的配置也差异很大,包括namenode、辅助namenode和jobtracker。对于一个小型集群来说(几十个节点),可以直接将这些守护进程放到单独的一台机器上。但是对于大型集群来说,则最好让这些守护进程分别运行在不同机器上。 namenode在内存中保...

2014-03-29 23:09:25

阅读数 2617

评论数 0

单节点配置SecondaryNameNode

一、SecondaryNameNode概念:     光从字面上来理解,很容易让一些初学者先入为主:SecondaryNameNode(snn)就是NameNode(nn)的热备进程。其实不是。ssn是HDFS架构中的一个组成部分,但是经常由于名字而被人误解它真正的用途,其实它真正的用途,是...

2014-03-29 22:35:25

阅读数 1347

评论数 0

整合Struts2、Spring、Hibernate构建J2EE应用

【论文摘要】 J2EE即是以Java 2平台为基础的体系结构,又是一组旨在简化企业解决方案的开发、部署、运行、维护等相关复杂问题的技术规范与指南。Struts2、Spring、Hibernate是当今符合J2EE技术规范的三个流行的开源框架。本文通过对这三个框架的工作机制的分析引伸出它们在J2E...

2014-03-24 21:12:08

阅读数 5891

评论数 0

hbase 的shell操作中相关属性说明

Hbase 是一个分布式的、面向列的开源数据库,其实现是建立在google 的bigTable 理论之上,并基于hadoop HDFS文件系统。     Hbase不同于一般的关系型数据库(RDBMS)。是一种适用于非结构化数据存储的数据库,且Hbase是基于列的数据库。      下面的内容基...

2014-03-19 16:06:11

阅读数 4438

评论数 0

HBase条件查询(多条件查询)

Author:Pirate Leo myBlog: http://blog.csdn.net/pirateleo/ myEmail: codeevoship@gmail.com 转载请注明出处,谢谢。 文中可能涉及到的API: Hadoop/HDFS:http://hadoop.apac...

2014-03-19 15:36:18

阅读数 6688

评论数 0

hadoop+hbase导致报错(NoClassDefFoundError: org/apache/hadoop/hbase/HBaseConfiguration)

Exception in thread "main" java.io.IOException: Error opening job jar: ./ADReport2Hbase_0309.jar         at org.apache.hadoop.util.RunJar.m...

2014-03-19 14:40:49

阅读数 52475

评论数 0

仿QQ聊天程序(java)

仿QQ聊天程序 转载请标明出处:牟尼的专栏 http://blog.csdn.net/u012027907 一、设计内容及要求 1.1综述 A.系统概述 我们要做的就是类似QQ这样的面向企业内部的聊天软件,基本功能和QQ类似。首先,系统分为两大部分,第一部分是客户端,...

2014-03-17 15:52:47

阅读数 115145

评论数 155

联通研究院处长王志军:Hadoop在电信业大数据的应用

联通研究院处长王志军:Hadoop在电信业大数据的应用 摘要:联通研究院处长王志军发表《Hadoop在电信业大数据的应用》主题演讲,据他介绍,联通第一次采用了开源技术,在这之前在电信行业当中比较少见,使用Hadoop、HBase等技术。 6月29日,第七届“开源中国 开源世...

2014-03-17 15:50:14

阅读数 3858

评论数 0

数据挖掘常用的方法(分类,回归、聚类、关联规则)

原文出自:http://www.vsharing.com/k//2013-10/690272.html 在大数据时代,数据挖掘是最关键的工作。大数据的挖掘是从海量、不完全的、有噪声的、模糊的、随机的大型数据库中发现隐含在其中有价值的、潜在有用的信息和知识的过程,也是一种决策支持过程。其主...

2014-03-15 17:19:57

阅读数 39153

评论数 0

shell函数日期之间的操作(日期转秒,日期间隔秒,日期间隔天)

#!/bin/sh #接收日期转换为秒数 function mydate(){         date --date="$1" +%s } #接收两个日期,比较相差秒数 function differdate(){            #将接收到的日期转换为秒...

2014-03-12 16:54:36

阅读数 4941

评论数 0

shell中的比较(if运算)

比较两个字符串是否相等的办法是:     if [ "$test"x = "test"x ]; then     这里的关键有几点:     1 使用单个等号     2 注意到等号两边各有一个空格:这是unix shell的要求     3 注意...

2014-03-12 16:29:11

阅读数 10095

评论数 0

linux下的shell运算(加、减、乘、除)

((i=$j+$k))    等价于 i=`expr $j + $k` ((i=$j-$k))     等价于   i=`expr $j -$k` ((i=$j*$k))     等价于   i=`expr $j \*$k` ((i=$j/$k))     等价于   i=`expr $j /$k...

2014-03-12 16:25:53

阅读数 193705

评论数 0

linux安装mysql出错( file /usr/share/mysql/czech/errmsg.sys from install of MySQL-server-5.5.31-2.el6.i6)

linux下安装MySQL出错!   [root@hadoop0 local]# rpm -i MySQL-server-5.5.31-2.el6.i686.rpm         file /usr/share/mysql/czech/errmsg.sys from install o...

2014-03-11 17:49:38

阅读数 10926

评论数 1

Could not establish connection to hadoop0:10000/default: Connection refused: connect

今天在完成Hive的安装配置后,通过java客户端连接Hive进行操作时抛了一个异常: Exception in thread "main" java.sql.SQLException: Could not establish connection to hadoop...

2014-03-11 17:41:58

阅读数 7465

评论数 1

FAILED: Error in metadata: MetaException(message:Got exception: java.net.ConnectException

今天在安装配置玩hive后,进入了hive的命令行执行show databases时抛出一下错误: FAILED: Error in metadata: MetaException(message:Got exception: java.net.ConnectException Call to ...

2014-03-11 12:51:19

阅读数 6017

评论数 3

Java读取文件时第一行出现乱码“?”问号

我们在使用Java在读取文件(txt、dat等)时,如果文件不是utf-8格式的话,读取结果会出现,中文字符变乱码的 情况,所以一般在读取时转为UTF-8格式读取。 但这时会出现一种情况,第一次读取第一行第一个字符时会出现“?”的乱码 这个是java本身编码格式转换的问题,可以采用一下方...

2014-03-09 23:59:03

阅读数 7325

评论数 1

no java virtual machine was found after searching& Failed to load the JNI shared library

Eclipse打开出现“no java virtual machine was found...." 这个错误一般是环境变量设置错误导致 在cmd里面输入java -version看有没有版本的提示?有的话说明你的JDK是对的,那么就是Eclipse的问题了。 否则你就要设...

2014-03-09 11:18:34

阅读数 6788

评论数 0

ERROR: org.apache.hadoop.hbase.MasterNotRunningException: Retried 7 times

今天在配置好hbase分布环境后,进行shell操作,在创建表时出现了如下错误: ERROR: org.apache.hadoop.hbase.MasterNotRunningException: Retried 7 times 进入hbase目录下的logs目录中查看MASTAR的日志信...

2014-03-08 23:27:02

阅读数 6900

评论数 1

windows下SecureCRT无法使用backspace(空格键)和上下左右键

在使用SecureCRT登陆liunx(我的为CenterOS)系统,发现删除(backspace)键、和上下左右键不起作用,郁闷了很久没有找到解决办法, 今天终于看到了一篇有用的文章,在此记录一下! 解决方法:   先打开Options–>Session Opti...

2014-03-08 22:53:28

阅读数 25484

评论数 3

提示
确定要删除当前文章?
取消 删除
关闭
关闭