技术文章 | Hadoop常见错误和处理方式

本文来源于阿里云-云栖社区，原文点击这里。

常见问题及处理

mysql版本，必须是MYSQL5.1。

查询办法mysqladmin version

在建立hive数据库的时候，最好是:create database hive;

oozie的数据库，同样：create database oozie;

hadoop采集的字符集问题

修改/etc/sysconfig/i18n 更改字符集为en_US.UTF-8

重启机器生效。

重启机器的指令为：在root下敲入如下指令：sync;sync;init 6

修改mapreduce

在gateway/性能下修改：MapReduce 子 Java 基础选项 、Map 任务 Java 选项库 、Reduce 任务 Java 选项库 全部配置成 -Xmx4294967296

在TASKTRACKER/性能下修改:MapReduce 子 Java 基础选项 、Map 任务 Java 选项库 、Reduce 任务 Java 选项库 全部配置成 -Xmx4294967296

必须关注各个任务的详细情况

当出现如下的错误的时候，请及时的将下载的进程数调小。

展开全文