- 博客(6)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 hive -e 和hive -f 重定向数据，清除warn
问题现象：hive -f “hsql.sql” > /tmp/hsql.loghive -e “select * from tmp.table limit 10” > /tmp/hsql.log备注：hive -f与hive -e 作用是相同的。-f 是指定hsql文件。-e 是指定要执行的sqlHIVE执行重定向之后数据最后多了两行日志。WARN: The method c...
2018-10-26 16:37:04
6172
3
原创 linux系统时区问题 导致Spark Streaming 获取时间错误解决办法
问题现象：当前服务器都设置了时间同步，date命令查看服务器的时间是对的，但是通过java获取当前系统时间，时间是晚8小时。解决办法：1、验证java读取本地系统时间是否正确。vim NowString.javaimport java.text.SimpleDateFormat;public class NowString { public static void main(...
2018-10-23 13:39:14
576
1
原创 linux系统时区问题 导致Spark Streaming 获取时间错误解决办法
问题现象：当前服务器都设置了时间同步，date命令查看服务器的时间是对的，但是通过java获取当前系统时间，时间是晚8小时。解决办法：1、验证java读取本地系统时间是否正确。vim NowString.javaimport java.text.SimpleDateFormat;public class NowString { public static void main(...
2018-10-23 13:39:14
694
原创 重启namenode速度慢，耗时很久加载fsimage问题解决办法
如果重启namenode速度慢，耗时很久加载fsimage问题解决办法可以需要定期执行以下命令提前合并元数据。hdfs dfsadmin -safemode enter hdfs dfsadmin -saveNamespacehdfs dfsadmin -safemode leave（在关闭hdfs服务前，执行一上命令，会极大的加快重启namenode速度）...
2018-10-17 18:24:54
2528
原创 Unauthorized request to start container 问题原因
Unauthorized request to start container 问题原因时间不同步会导致 hive不能执行mapreduce，检查服务器时间是否同步。
2018-10-17 17:57:55
1947
原创 Got too many exceptions to achieve quorum 异常解决办法
Got too many exceptions to achieve quorum 异常解决办法org.apache.hadoop.hdfs.qjournal.client.QuorumException: Got too many exceptions to achieve quorum size 2/3. 1 successful responses:10.1.5.103:8485: []...
2018-10-17 17:29:53
3094
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人