hdfs的优缺点
优点:
1、高可靠。有大量备份,内部的机架感知机制。
2、可以搭建在廉价机器上。组成集群。
3、可扩展。可以增加大量的datanode节点。
4、能处理大量数据。
缺点:
1、实时性差。
2、不可随机修改,可以追加。
3、小文件过多会造成寻址缓慢,对应读取块信息时间会延长。
mr的优缺点
优点
1、高可靠,任务失败会自动找其他机器再次执行。
2、可扩展,
3、可搭建在廉价机器中。
缺点
1、不适合流式计算。
2、不适合有向图方式计算。
3、延时比较高,有大量IO性能低。(spark和flink)