分布式
文章平均质量分 93
王负剑!王负剑!
这个作者很懒,什么都没留下…
展开
-
spark搞大数据--填坑笔记(一)
前言:准备利用这段时间好好搞搞大数据这套东西,从很早之前就听闻Google三宝的传说,但是时至今日才得以接触到它们衍生出来各种技术。虽然时常被不知道何处的问题搞的筋疲力竭,可是一旦调通了,真是太有意思了。技术平平,翻阅各种大神的博客,填坑无数,从而写下此笔记。 一.配置与工具 系统版本:ubuntu 18.04LTS 编译器工具:idea 2018.2.1社区版 使用idea自带maven...原创 2018-09-28 16:24:06 · 1032 阅读 · 0 评论 -
Hadoop问题实录
1.使用Hadoop用户启动start-dfs.sh,显示访问不了log文件,这是因为Hadoop文件夹权限归属不对,可能当时是root用户创建的,所以更改文件夹所属即可,sudo chown -R hadoop:hadoop hadoop-2.7.7。把文件夹权限交给Hadoop组下的hadoop用户。 2.免密登录 在hadoop用户下ssh-keygen,生成密钥,ssh-copy-id...原创 2019-08-01 21:39:22 · 312 阅读 · 0 评论