自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(3)
  • 收藏
  • 关注

原创 java 内部类总结

        学习和使用java语言已经有相当长一段时间了,一直对java中内部类的概念、作用、调用方法、作用域等几个基本概念模糊不清以至于在某些场合和应用场景显得一知半解。今天抱着学习的目的重新整理java内部类。一、什么叫内部类        在Java中,可以将一个类定义在另一个类里面或者一个方法里面,这样的类称为内部类。内部类作为外部类的一部分,依附于外部类而存在的。    ...

2019-01-23 11:10:23 175

原创 hadoop hdfs 解决磁盘间数据不均衡问题

一、引起磁盘倾斜不均衡的可能原因有哪些 (1)扩容节点,向集群中添加新的数据节点 (2)数据节点之间的磁盘大小不一致二、磁盘倾斜引起的性能问题 (1)MR程序无法很好地利用本地计算的优势 (2)机器之间无法达到更好的网络带宽使用率 (3)机器磁盘无法利用 通过以下脚本可以解决磁盘间数据拷贝以实现磁盘间均衡#!/bin/bashsrc=$1dest=$2top=$3...

2019-01-09 17:23:48 3058 1

原创 hadoop HA 简单运维 命令

一:数据上传至hdfshadoop fs -moveFromLocal /var/url_data/20150806.txt /url_data/input二:运行jar包处理数据hadoop jar /root/run_jar/url_deal.jar三:移动数据处理结果至hive数据目录下hadoop fs -mv /data/tmp_data/20150831/part-r-00000 /d...

2018-07-02 17:02:08 611

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除