大数据集群
jacky-wangjj
这个作者很懒,什么都没留下…
展开
-
大数据集群多用户数据资源隔离管理
用户数据隔离 使用hdfs权限管理及数据加密区 参考:http://hadoop.apache.org/docs/r2.7.3/hadoop-project-dist/hadoop-hdfs/HdfsPermissionsGuide.html http://hadoop.apache.org/docs/r2.7.3/hadoop-project-dist/hadoop-hdfs/...原创 2018-05-24 17:56:30 · 3866 阅读 · 0 评论 -
hadoop-streaming + python 执行hadoop处理程序
命令如下:hadoop jar /usr/local/hadoop/hadoop-streaming-0.23.6.jar \-input /hdfs/input/path -output /hdfs/output/path \-mapper "python mapper.py" -reducer "python reducer.py" \-file mapper.py -file reducer...原创 2018-06-15 11:11:47 · 1425 阅读 · 0 评论