- 博客(10)
- 资源 (25)
- 问答 (1)
- 收藏
- 关注
原创 org.apache.hadoop.hdfs.server.datanode.DataNode: Block pool <registering> (storage id unknown) servi
org.apache.hadoop.hdfs.server.datanode.DataNode: Block pool (storage id unknown) service to master/192.168.20.128:9000 starting to offer service防火墙
2014-04-29 20:50:46 983
转载 Caused by: org.datanucleus.store.rdbms.exceptions.MissingTableException: Required table m
最近需要提取一些数据,故开始使用hive,本机搭建了一个hive客户端环境,但是始终有问题,在本机装好了mysql以后,老是报 Java代码 Caused by: org.datanucleus.store.rdbms.exceptions.MissingTableException: Required table missing : "`DBS`"
2014-04-29 20:47:18 4293
转载 hadoop2.0安装异常详解
异常一:2014-03-13 11:10:23,665 INFO org.apache.Hadoop.ipc.Client: Retrying connect to server: Linux-hadoop-38/10.10.208.38:9000. Already tried 0 time(s); retry policy is RetryUpToMaximumCountWithFi
2014-04-29 19:50:24 647
转载 linux安装Mysql
Redhat 5 下安装Mysql1.下载Server和client Server:Java代码 wget http://mysql.easynet.be/Downloads/MySQL-5.5/MySQL-server-5.5.25-1.rhel5.x86_64.rpm Client:Java代码 wg
2014-04-29 15:35:07 561
转载 CentOs6.4 更改用户名密码
若只是更改密码就是:passwd username.然后输入 两次密码即可。---------------------------------------如果要连用户名一起改:假设原来用户名为aaa,现在准备改成bbb vipw 修改 /etc/passwd,再改 /etc/shadow然后 vigr 修改 /etc/group,再改 /etc/gpasswd最后 mv /home/
2014-04-23 10:32:06 1809
转载 hadoop 0.20.2 多文件输出
inkfish原创,请勿商业性质转载,转载请注明来源(http://blog.csdn.net/inkfish )。 Hadoop默认的输出是TextOutputFormat,输出文件名不可定制。hadoop 0.19.X中有一个org.apache.hadoop.mapred.lib.MultipleOutputFormat,可以输出多份文件且可以自定义文件名,但是从hadoop 0.
2014-04-11 19:55:52 752
原创 如何将多个对象序列化到同一个文件和反序列化
首先这个问题是否可行,java序列化对象后,对象与对象之间有分割符,所以将多个对象序列化到同一个文件,也能清楚的区分出这些对象,序列化到同一个文件时,文件可以以追加的方式打开,然后向输出流里序列化对象就可以了。反序列化时,可以直接冲输入数据流中读取,但这只能读取第一个对象,我们想读下一个对象,就根据前一个对象的大小跳到下一个对象的开始读取;
2014-04-02 20:34:32 3138 1
转载 hadoop如何自定义InputFormats和OutputFormats
Data Mining,NLP,Search EngineHadoop的InputFormats和OutputFormatsInputFormatInputFormat类用来产生InputSplit,并把它切分成record。public interface InputFormat { InputSplit[] getSplits(JobConf
2014-04-02 16:52:39 1839
转载 mapreduce程序中读取文件过程详解
hadoop的inputformat包括他的子类reader是maptask读取数据的重要步骤一、获得splits-mapper数1. jobclinet的submitJobInternal,生成split,获取mapper数量 Java代码 public RunningJob submitJobInternal {
2014-04-02 16:46:07 2299
转载 hdfs文件操作
package com.dj.hadoop; import java.io.BufferedInputStream; import java.io.File; import java.io.FileInputStream; import java.io.FileOutputStream; import java.io.InputStream; import java
2014-04-01 17:06:18 673
绩效考核系统
2013-10-31
图书馆管理系统(网站)ASP.net
2013-10-31
手机网上销售网站管理系统源码
2012-04-25
jenkins自动化测试集成
2015-11-09
TA创建的收藏夹 TA关注的收藏夹
TA关注的人