专注于互联网架构技术,努力成为一名架构师

专注于互联网架构技术,努力成为一名架构师

Hadoop的Python框架指南

最近,我加入了Cloudera,在这之前,我在计算生物学/基因组学上已经工作了差不多10年。我的分析工作主要是利用Python语言和它来进行的。但Apache Hadoop的生态系统大部分都是用Java来实现的,也是为Java准备的,这让我很恼火。所以,我的头等大事变成了寻找一些Python可以用...

2014-12-19 19:26:58

阅读数:1347

评论数:0

Hadoop Streaming编程总结

1、概述 Hadoop Streaming是Hadoop提供的一个编程工具,它允许用户使用任何可执行文件或者脚本文件作为Mapper和Reducer,例如: 采用shell脚本语言中的一些命令作为mapper和reducer(cat作为mapper,wc作为reducer) $HADOO...

2014-12-19 18:57:57

阅读数:834

评论数:0

wget和curl使用代理总结

一、wget设置代理 eg: wget -Y on -e "http_proxy=http://10.0.0.172:9201" "www.wo.com.cn" 此命令使用10.0.0.172:9201这个代理服务器IP和端口访问站点www.wo.co...

2014-12-08 17:33:43

阅读数:2459

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭