- 博客(6)
- 资源 (1)
- 收藏
- 关注
原创 Java IO之File
import java.io.File;import java.io.FileWriter;import java.io.IOException;/** * File类是java.io包下与平台无关的文件和目录;也就是说如果希望在程序中操作文件和目录,都可以通过File类来完成! * 但是File不能访问文件内容的本身,如果需要访问文件内容本身就要使用输入输出流! * @author
2016-07-21 14:00:15 434
原创 Java
import java.io.BufferedReader;import java.io.File;import java.io.FileInputStream;import java.io.IOException;import java.io.InputStreamReader;import java.nio.charset.Charset;import info.monitore
2016-07-21 12:01:13 440
原创 HDFS实际应用场景之文件合并
①场景:合并小文件存放到HDFS上,列如,当需要分析来自许多服务其的Apache日志时,各个日志文件可能比较小,然而Hadoop更合适处理大文件,效率会更高,此时就需要合并分散文件。如果先将所有文件合并,在复制上传到HDFS上的话,需要占用用本地计算机的大量磁盘空间。采取在向HDFS复制上传文件的过程中将小文件进行合并,效果会更好。
2016-01-15 12:26:42 1277
原创 文章标题 Hadoop:编写一个求和排序的MR
搞Hadoop开发,尤其是编写MR程序:总是难免遇到许多奇奇怪怪的问题,第一次编写一个排序求和的MR程序时就是如此。一;遇到的第一个问题:16/01/10 15:40:19 WARN mapred.LocalJobRunner: job_local2074055527_0001java.lang.Exception: java.lang.RuntimeException: java.lang.N
2016-01-10 16:00:34 663
原创 Centos7安装Eclipse
Eclipse是一个集成开发环境(IDE),包含一个基工作区和定制环境的可扩展插件系统。大部分使用 Java 编写,Eclipse 可以用来开发应用程序。通过各种插件,Eclipse 也可以用于其他编程语言开发应用程序:Ada、ABAP、C、C++、COBOL、 Fortran、Haskell、 JavaScript、Lasso、Natural、Perl、 PHP、 Prolog、 Pytho
2016-01-05 09:30:15 949
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人