hadoop
文章平均质量分 75
不碌
做自己喜欢的事
展开
-
MapReduce FileInputFormat读取两个文件顺序
在用mapreduce写电影推荐系统,需求是将两个矩阵合并,但是读取有顺序,因为要先将第一个文件的数据存到数组。 写的时候发现总会先读第二个文件,改了文件目录的先后也没有改变,改了文件大小也没变。 之后我改了文件名称,对了! 原因猜测是读取是按照文件名字符序读取的。 ...原创 2019-11-28 13:31:43 · 411 阅读 · 0 评论 -
Mac hive更换IP地址之后
Mac hive更换IP地址之后 学习hadoop过程中一直在用macos系统在学习,有一个问题是IP地址一直在变化,更换IP之后需要进入/etc更改hosts的IP地址 今天更换IP之后爆出错误 ERROR [ddc658f0-5f45-42af-8383-88f93872c9ce main] ql.Driver: FAILED: HiveAccessControlException Perm...原创 2019-01-18 17:14:45 · 641 阅读 · 1 评论