Hadoop
haveysun
这个作者很懒,什么都没留下…
展开
-
解决方法unable to boot - please use a kernel appropri
使用虚拟机软件Oracle VM VirtualBox来进行安装centos6.2时提示以下信息:This kernel requires the following features not present on the CPU:Unable to boot – please use a kernel appropriate for your CPU.解决方法:选原创 2014-03-18 17:43:22 · 3724 阅读 · 1 评论 -
MapReducer的Job调优
1.如果存在大量的小数据文件,可以使用SequenceFile、自定义的CombineFileInputFormat原创 2014-07-17 21:02:41 · 1008 阅读 · 0 评论 -
com.alibaba.dubbo.remoting.RemotingException: Failed to bind NettyServer
com.alibaba.dubbo.remoting.RemotingException: Failed to bind NettyServer原创 2014-11-07 17:17:22 · 27301 阅读 · 3 评论 -
客户端与NameNode通信过程(源码角度分析)
1.实例代码: final FSDataOutputStream out= fileSystem.create(new Path(FILE_PATH));//创建文件原创 2014-06-17 20:02:42 · 1277 阅读 · 0 评论 -
为什么说Java的序列化不适合Hadoop
java的序列化是把业务类及其子类一起序列化,这使得序列化和反序列化的数据都比较多,而数据是经过网络传输接收的,这样网络的压力就大,这种模式并不适合海量数据处理,海量数据处理只需要序列化和反序列化我们的业务数据,hadoop只序列化基本的数据类型,减少io读写次数,缓解网络压力。为什么序列化对Hadoop很重要?因为Hadoop在集群之间进行通讯或者RPC调用的时候,需要序列化,而且要原创 2014-06-25 09:38:12 · 1019 阅读 · 0 评论 -
Oracle VM VirtualBox:Could not write the clone medium
在伪分布情况下,搭建集群,在原创 2014-04-11 10:22:34 · 1863 阅读 · 1 评论 -
Hadoop Failed to set permissions of path
在Eclipse里面写了个测试程序:把HDFS中的数据批量导入到HBase中原创 2014-04-21 17:09:44 · 1548 阅读 · 0 评论 -
Retrying connect to server: :9000. Already tried 0 time(s)
在测试时,执行hadoop fs -put hello.txt /操作,得到以下错误信息:14/03/24 10:39:33 INFO ipc.Client: Retrying connect to server: hadoop/192.168.80.100:9000. Already tried 0 time(s); retry policy is RetryUpToMaximumCou原创 2014-03-24 10:45:04 · 4686 阅读 · 0 评论 -
CentOS修改系统默认语言与编码
有时候在安装CentOS无意中把默认语言设置为中文,而部分SSH软件不支持中文编码,所以在远程管理的时候会出现些乱码的现象。 如何修改CentOS的默认语言呢?请先使用root权限帐户登陆一、进入语言配置文件vi /etc/sysconfig/i18n用SSH执行以上命令,用vi编辑器修改/etc/sysconfig/i18n文件。原创 2014-03-19 13:45:04 · 926 阅读 · 0 评论