ODPS
梁天超
青春如是,年少而已。 青春年少,如是而已
展开
-
虚拟机ODPS初体验
大数据竞赛的第二阶段需要通过远程桌面的方式连接阿里提供的虚拟机, 所有操作都是在远程主机上进行, 在搞清楚文件回传方式之前真是各种麻烦(写博客都没有办法贴代码)。 用了两个上午初步上手, 希望接下来进展顺利, 不要第一个月就惨遭淘汰。 首先在cmd 通过mstsc 链接远程桌面, 远程桌面上只有一个我的电脑图标。 C盘目录下的TOOLS文件夹中有eclipse ,pyth原创 2014-05-03 18:52:31 · 1831 阅读 · 0 评论 -
ODPS 下map / reduce 的编写
接到阿里电话说实习和竞赛智能二选一, 真伤心, 在实习前发挥余热吧. 总结一下在ODPS下 编写map / reduce 和进行购买预测的过程. 首先这里的hadoop输入输出都是表的形式, 我们需要一张输入表和一张输出表. 输入表为 提供的 t_alibaba_bigdata_user_brand_total_1 输出表为自定义的wc_out w原创 2014-05-08 16:24:55 · 2728 阅读 · 2 评论