由于hadoop的map reduce框架计算性能已经比较老旧,有很多新的框架性能有很大提升,已经很少有基于相关api进行开发的项目,但hadoop streaming工具能帮助开发者兼容任何语言地运行自己的分布式程序,下面来简单介绍。
官方api文档地址
https://hadoop.apache.org/docs/current/hadoop-streaming/HadoopStreaming.html
streaming编程指南
hadoopstreaming需要注意的是它的map和reduce的操作的数据来源/去向都是标准输入和标准输出,下面是两个比较详细的用法及案例介绍:
https://www.cnblogs.com/shay-zhangjin/p/7714868.html
https://blog.csdn.net/2401_83384536/article/details/136907684