- 博客(18)
- 资源 (40)
- 收藏
- 关注
原创 eclipse Unable Run on hadoop? 解决办法
目前的集群环境,需要远程连接hdfs在使用eclipse3.3 是可以连接到hdfs,不过很遗憾,每次在运行程序时,run on hadoop都会报异常奇异常界面: 解决办法是: 我是使用eclipse3.7 可以完美使用,而且在linux系统下试了下连接hbase 也okmyeclipse 也能够运行所使用的插件都是
2012-05-29 17:04:01 23046
原创 有谁碰到过这类问题没??? eclipse 连接hbase
## A fatal error has been detected by the Java Runtime Environment:## SIGSEGV (0xb) at pc=0xedffea41, pid=27022, tid=4138047248## JRE version: 6.0_30-b12# Java VM: Java HotSpot(TM) Client
2012-05-28 20:15:25 4138 1
原创 求助?eclipse连接hbase出现如下异常
eclipse 连接hbase异常为:SLF4J: Class path contains multiple SLF4J bindings.SLF4J: Found binding in [jar:file:/D:/apache/hbase/hbase-0.92.1/hbase-0.92.1/lib/slf4j-log4j12-1.5.8.jar!/org/slf4j/impl/Sta
2012-05-28 15:57:21 7208 6
原创 hadoop+hbase+zookeeper 分布式集群搭建 + eclipse远程连接hdfs 完美运行
之前有一篇文章已经很详细介绍了如何安装hadoop+hbase+zookeeper 文章标题为:hadoop+hbase+zookeeper 分布式集群搭建完美运行其网址:http://blog.csdn.net/shatelang/article/details/7605939 这篇文章要讲述的是hadoop1.0.0+hbase0.92.1+zookeeper3.3.
2012-05-27 09:04:34 26521
原创 hadoop+hbase+zookeeper 分布式集群搭建完美运行
备注: 搭建完(hadoop+hbase)整个集群是能够完美的运行,其中期间出过些小问题,如有一台机器和其他机器时间相差很远,结果是HRegionServer启动的时候超时,这个时候要么时间同步,或者在配置文件中添加相应的参数 我所在的实验室,整个集群是通过ccproxy代理来连接互联网,然后是远程连接整个集群
2012-05-27 08:41:50 7889 2
原创 HBase log中这些日志 说明整个集群正常吗?
HMaster节点: hbase-hadoop-master-hadoop-node8.log2012-05-25 08:54:37,472 INFO org.apache.zookeeper.ClientCnxn: Unable to read additional data from server sessionid 0x1377f608e3f0006, likely serv
2012-05-25 10:08:29 3999 1
原创 大家帮我看看这是怎么回事 8个节点 其中有一个HRegionServer 没有跑起来
这个是 在节点6上的日志:hbase-hadoop-regionserver-hadoop-node6.log:这个是昨天5月24晚上启动时候写的日志,今天早上来看结果node6 jps:没有HRegionServer 进程2012年 05月 24日 星期四 23:12:36 CST Starting regionserver on hadoop-node6uli
2012-05-25 09:41:37 7023 3
转载 ZooKeeper搭建系列集 (这套很全,也很详细)
本篇文章结构:总共包括10个系列 ZooKeeper系列之一:ZooKeeper简介 ZooKeeper系列之二:ZooKeeper数据模型、命名空间以及节点的概念 ZooKeeper系列之三:ZooKeeper的安装ZooKeeper系列之四:ZooKeeper的配置ZooKeep
2012-05-23 21:09:34 49430 3
转载 另一种角度来看待zookeeper
今年年初的时候,写了一篇ZooKeeper的入门文章《初识ZooKeeper》,一直到这一周,才有时间将ZooKeeper整个源码通读了一遍。不能说完全理解了ZooKeeper的工作原理与细节,但是之前心中一直关于ZooKeeper的疑问都得到了解释。 现在网上关于ZooKeeper的文章很多,有介绍Leader选举算法的,有介绍ZooKeeper Server内部原理的,还有介绍ZooKe
2012-05-23 20:16:35 1759
转载 为什么要分析日志 (文章来自百度搜索研发部)
日志在计算机系统中是一个非常广泛的概念,任何程序都有可能输出日志:操作系统内核、各种应用服务器等等。日志的内容、规模和用途也各不相同,很难一概而论。本文讨论的日志处理方法中的日志,仅指Web日志。其实并没有精确的定义,可能包括但不限于各种前端Web服务器——apache、lighttpd、tomcat等产生的用户访问日志,以及各种Web应用程序自己输出的日志。在Web日志中,每条日志通常代
2012-05-23 19:59:39 1569
转载 Hadoop Namenode不能启动(dfs/name is in an inconsistent state)
以下转自:http://www.linuxidc.com/Linux/2012-03/56348.htm前段时间自己的本机上搭的hadoop环境(按文档的伪分布式),第一天还一切正常,后来发现每次重新开机以后都不能正常启动,在start-dfs.sh之后jps一下发现namenode不能正常启动,按提示找到logs目录下namenode的启动log发现如下异常org.apache.
2012-05-23 19:19:21 1716 1
转载 ZooKeeper 工作原理 讲的很全面 (文章来自百度搜索研发部)
ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,它包含一个简单的原语集,分布式应用程序可以基于它实现同步服务,配置维护和命名服务等。Zookeeper是hadoop的一个子项目,其发展历程无需赘述。在分布式应用中,由于工程师不能很好地使用锁机制,以及基于消息的协调机制不适合在某些应用中使用,因此需要有一种可靠的、可扩展的、分布式的、可配置的协调机制来统一系统的状态。Zookee
2012-05-23 19:14:16 1096
转载 HADOOP 之hdfs 使用手册 据说翻译的还不错 所以特地转帖
HDFS用户指南原文地址:http://hadoop.apache.org/core/docs/current/hdfs_user_guide.html译者:dennis zhuang(killme2008@gmail.com),有错误请指正,多谢。目的本文档可以作为使用Hadoop分布式文件系统用户的起点,无论是将HDFS应用在一个Hadoop集群中还是作为一个单独的
2012-05-23 18:00:10 1212
转载 对Hadoop /bin 下的启动文件详细分析
Hadoop Cluster的启动可以说十分简单,最简单的一种方法就是运行$HADOOP_HOME/bin/start-all.sh,我也相信绝大多数的人都是这么启动的。但是这个脚本里面到底做了些什么呢?让我们来抽丝剥茧的看一看:注:不失一般性,我们这里以dfs的启动为例子,mapred的启动道理是一样的。Dfs的启动脚本实际上是$HADOOP_HOME/bin/start-dfs.sh,
2012-05-23 17:50:59 2349
转载 hadoop的namenode和secondnamenode分开部署在不同服务器
一、系统环境: Hadoop 0.20.2、JDK 1.6、Linux操作系统 二、使用背景 网上关于hadoop的集群配置,很多情况下,都是把namenode和secondnamenode部署在同一服务器上。为了降低风险,一个大的集群环境,最好是把这两个配置到不同的服务器上。三、操作 要达到这要求,需要对conf/master、conf/hdfs-site.xml
2012-05-23 17:40:35 1921
转载 hadoop SecondNamenode详解
SecondNamenode名字看起来很象是对第二个Namenode,要么与Namenode一样同时对外提供服务,要么相当于Namenode的HA。真正的了解了SecondNamenode以后,才发现事实并不是这样的。下面这段是Hadoop对SecondNamenode的准确定义:* The Secondary Namenode is a helper to the primary
2012-05-23 17:04:00 2659
转载 Apache ZooKeeper入门2
记得在大约在2006年的时候Google出了Chubby来解决分布一致性的问题(distributed consensus problem),所有集群中的服务器通过Chubby最终选出一个Master Server ,最后这个Master Server来协调工作。简单来说其原理就是:在一个分布式系统中,有一组服务器在运行同样的程序,它们需要确定一个Value,以那个服务器提供的信息为主/为准,当这
2012-05-23 14:46:22 974
转载 Apache Zookeeper入门1
感觉这文章不错,特意转载过来 好让自己随时都可以翻来看看ZooKeeper 是什么? ZooKeeper 顾名思义 动物园管理员,他是拿来管大象(Hadoop) 、 蜜蜂(Hive) 、 小猪(Pig) 的管理员, Apache Hbase和 Apache Solr 以及LinkedIn sensei 等项目中都采用到了 Zookeeper。ZooKeep
2012-05-23 14:30:36 969
(已编译)openstack-java-sdk-master
2014-03-05
Use java connect the openstack ,A sample Java project Demo
2012-12-17
openstack java api jar 包
2012-12-17
锐捷for mac
2012-02-06
linux下使用锐捷认证全过程
2012-02-06
锐捷 for linux
2012-02-06
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人