由于项目需要,所以就涉及到append功能;
HDFS设计之处并不支持给文件追加内容,这样的设计是有其背景的(如果想了解更多关于HDFS的append的曲折实现,可以参考《File Appends in HDFS》:
http://blog.cloudera.com/blog/2009/07/file-appends-in-hdfs/),但从HDFS2.x开始支持给文件追加内容,可以参见
https://issues.apache.org/jira/browse/HADOOP-8230。
可以再看看
http://www.quora.com/HDFS/Is-HDFS-an-append-only-file-system-Then-how-do-people-modify-the-files-stored-on-HDFS。
正如HADOOP-8230所述,只需要将hdfs-site.xml中的以下属性修改为true就行。
hadoop2.4.0:
<property>