
hadoop技术
LongfeiZhou
热爱编程,喜欢阅读技术类文章。
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Hadoop,往map/reduce中传值的问题解决方法实例
Hadoop,往map/reduce中传值的问题解决方法实例最近在看一些map/reduce的程序,其中遇到一个问题:就是在类中定义的属性无法被mapreduce程序直接获取。具体代码如下public class KeyJob { public static class myMap extends Mapper<LongWritable, Text, Text, IntWritable> {原创 2017-01-10 14:35:57 · 2478 阅读 · 0 评论 -
读取HDFS上的文件时报错
使用spark读取HDFS上的文件时报错报错使用spark读取HDFS上的文件时报错 Exception in thread “main” java.io.IOException: Failed on local exception: com.google.protobuf.InvalidProtocolBufferException: Protocol message end-group tag原创 2017-05-12 10:18:49 · 1404 阅读 · 0 评论 -
hadoop webUI上不能查看log日志输出信息
hadoop webUI上不能查看log日志输出信息本文由longfeizhou编写,转载请注明出处 问题 原因 报错 解决办法 问题hadoop webUI上查看任务运行输出日志,任务运行中可以正常查看,但当任务完成后却无法查看日志输出报错java.lang.Exception: Unknown container. Container either has not started or h原创 2017-05-08 12:07:07 · 4251 阅读 · 1 评论