Linux
宝蓓
努力变强的IT男
展开
-
【最详细、亲测】Hadoop Stream的最全总结
【最详细、亲测】Hadoop Stream总结本人在做项目的过程中,想利用Hadoop Stream对现有的python代码进行并行化处理,加速代码运行速度。推荐一个比较好的例子:用python写MapReduce函数——以WordCount为例首先介绍一下Hadoop Stream的优点:让任何语言编写的map,reduce程序能够在Hadoop集群上运行;map/reduce程序只...原创 2018-07-11 16:35:31 · 4527 阅读 · 0 评论 -
【转载】python脚本在crontab中执行的几个坑
【转载】python脚本在crontab中执行的几个坑一、绝对路径问题二、环境变量问题三、文件可执行权限四、crontab命令不可使用函数转载地址:http://flyer0126.iteye.com/blog/2388142一、绝对路径问题crontab中python命令使用绝对路径,如:*/5 * * * * /usr/local/bin/python2.7 /home/work/us...转载 2019-02-19 19:01:46 · 1273 阅读 · 0 评论