hadoop
fu_jian_feng
以实干为荣;敬重自己的能力和意志,每天都要有进步。
展开
-
学习记录--颤抖吧,hadoop(四)---安装Linux系统
在本机上的伪分布式hadoop,已经在自己的电脑上搭建过了,(上周末回家了)这周计划搭建完全分布式系统。给4-5台电脑安装centos. 1.网上找到centos7的iso, 2.用软碟通把u盘(8g)制作成启动盘。3.开机进入bios安装。 问题: 这个问题网上很常见---找不到u盘启动。网上的解决办法也很一致,但是我试了多次,无法成功。(可能是制成启动盘后原创 2017-08-16 09:23:00 · 174 阅读 · 0 评论 -
学习记录---颤抖吧,hadoop!(三)----搭建伪分布式
今天检测认证完后,自己在电脑上搭建了hadoop的伪分布式模式。 在自己的电脑上的vm下的ubuntu下搭建:大致是这么几步:0.增加用户,1.安装ssh(设置免密码登录),2.安装jdk,3.安装hadoop;效果如下:主要安装流程:(http://www.powerxing.com/install-hadoop/ 感谢,笔芯)原创 2017-08-09 16:16:23 · 443 阅读 · 0 评论 -
学习记录---颤抖吧,hadoop!(二)----hdfs的一些知识
上周看了尚学堂hadoop的一些学习视频,对hdfs做了简单快速的了解,对主要的名词概念有了了解,苦于检测认证的工作,今天整理下。(主要以视频中的截图做为笔记,进行了整理,) 概述原创 2017-08-09 11:46:30 · 237 阅读 · 0 评论 -
学习记录-----颤抖吧!hadoop(一)
刚刚了解redis的知识,公司boss让我研究研究hadoop.并给了个搭建集群的小任务。 哈~哈~哈,加薪升“值”,迎娶白富美的日子不远了~。 第一周:7月31日至8月6日主要工作:原创 2017-08-07 10:39:23 · 185 阅读 · 0 评论 -
学习记录--颤抖吧,hadoop(五)---搭建完全分布式hadoop集群(1)
上周末回了一次家,这周日继续下hadoop集群搭建。 在hadoop(四)中,已经整理出4台主机,3台为centos6.5, 1台centos6.3。 今天来把网络接好,安装了交换机,压制了网线。每台电脑连接上网。 公司搬家后,网络一直没有固定ip,每台电脑都是在自动获取。我计划把4台主机的ip固定下。 设置网络: 在安装linux过程中,原创 2017-08-20 19:05:53 · 249 阅读 · 0 评论 -
学习记录--颤抖吧,hadoop(五)---搭建完全分布式hadoop集群(2)
上周日(8月20日)接通了网络,做了一些准备工作。打铁趁热,周一(21日)完成hadoop完全分布式的全部。 简单梳理下主要步骤:选定一台机器作为 Master在 Master 节点上配置 hadoop 用户、安装 SSH server、安装 Java 环境在 Master 节点上安装 Hadoop,并完成配置在其他 Slave 节点上配置 hadoop 用原创 2017-08-23 09:21:48 · 217 阅读 · 0 评论 -
hadoop安装的那几种模式。
今天看hbase的安装。对hadoop的伪分布式和单机模式有点忘了。记一下原创 2017-09-08 18:34:42 · 585 阅读 · 0 评论 -
zookeeper完全分布式搭建
计划在hadoop基础上增加hbase的集群。 依赖zookeeper,当然hbase自己带了一个zk,启动hbase可以默认启动zk.。但是我这里不用默认的zk.自己搭建一个zookeeper完全分布式集群。 --------------------------------------分隔线为网友的教程(感谢) start-----------------------------原创 2017-09-09 19:16:12 · 1063 阅读 · 0 评论 -
zookeeper完全分布式搭建---linux权限的问题
在上一篇 《zookeeper完全分布式搭建>> http://blog.csdn.net/u011877584/article/details/77917181中,遇到的权限问题,今天做了下分析。 1.用hadoop用户往 /home 下传包不成功: 原因:上图中的/home所有者是root, hadoop是其他用户,hadoop没有对home文件原创 2017-09-11 09:55:33 · 686 阅读 · 0 评论