大数据学习基地
文章平均质量分 94
将所见所闻所感记录下来,有益自己有益大家。
落落free
这个作者很懒,什么都没留下…
展开
-
Linux的root密码忘记了怎么办?用这一招
Linux的root密码忘记了怎么办?用这一招文章目录Linux的root密码忘记了怎么办?用这一招一、Linux系统的运行级别二、找回丢失的root密码 有的时候我们将Linux虚拟机的root密码忘记了咋整?这个是有解决办法滴,不过在解决这个问题之前,我们先要知道一个知识点——Linux系统的运行级别。一、Linux系统的运行级别Linux系统的运行级别分为:关机...原创 2019-11-28 17:09:25 · 357 阅读 · 0 评论 -
Scala的安装及环境配置
Scala的安装及环境配置文章目录Scala的安装及环境配置1.安装Scala到C盘上2.配置本地环境变量3.检测是否安装完成4.在idea中运行scala5.在本地后台运行Scala的jar包1.安装Scala到C盘上(Scala绿色版压缩包 提取码:346r )2.配置本地环境变量3.检测是否安装完成4.在idea中运行scala(1)新建一个maven项目(...原创 2019-04-08 16:12:19 · 4607 阅读 · 1 评论 -
Linux端安装HBase
Linux端安装HBase文章目录Linux端安装HBase1. 安装压缩包2. 配置环境变量本地模式:配置修改伪分布式:配置修改完全分布式1. 安装压缩包1.解压、删除、重命名2. 配置环境变量2.hbase环境变量:(1)配置hbase环境变量:(/etc/profile)export HBASE_HOME=/home/dog/software/hbaseexport...原创 2019-03-29 14:53:18 · 1541 阅读 · 0 评论 -
Linux:HBase知识点笔记
Linux:HBase知识点笔记文章目录Linux:HBase知识点笔记1.HBase是什么?2.hbase的特点3.数据模型4.HBase组件功能5.表和Region(一个表对应一个Region)6.HBase系统架构7.HBase服务器工作原理8.Store工作原理1.HBase是什么? Hadoop database,是一个高可靠、高性能、面向列、可伸缩的分布式数据库,是谷歌Bi...原创 2019-03-26 18:55:27 · 564 阅读 · 0 评论 -
Linux:Zookeeper知识点笔记
Linux:Zookeeper知识点笔记文章目录Linux:Zookeeper知识点笔记1.Zookeeper工作机制2.特点:3.zookeeper数据结构4.Zookeeper提供的服务5.选举机制(面试重点)6.zookeeper节点类型7.zookeeper写数据流程8.监听器原理(面试重点) Zookeeper 是一个开源的分布式的,为分布式应用提供协调服务的 Apache 项...原创 2019-03-26 18:44:20 · 436 阅读 · 0 评论 -
Linux端的两种模式安装Zookeeper及部署
Linux端的两种模式安装Zookeeper及部署文章目录Linux端的两种模式安装Zookeeper及部署本地模式安装Zookeeper及部署1.通过远程工具将Zookeeper压缩包导入2.配置修改3.操作Zookeeper分布式安装部署(分布式部署之前要关闭防火墙)1.集群规划2.解压安装3.配置服务器编号4.配置 zoo.cfg 文件5.集群操作本地模式安装Zookeeper及部署...原创 2019-03-24 14:01:05 · 1793 阅读 · 0 评论 -
Linux端安装hive及其配置
Linux端安装hive文章目录Linux端安装hive前提:参考文章:一、安装二、配置管理三、为Hive创建HDFS目录四、运行前提:在安装Hive之前,要求先:(或者更高版本的都可以)安装JDK 7安装Hadoop-2.2.0安装MySQL 5.6.x关闭防火墙,然后启动集群/各个节点参考文章:集群三部曲之准备工作:Linux端安装jdk和Hadoop集群三部曲...原创 2019-04-10 22:57:38 · 4674 阅读 · 2 评论 -
Linux端安装MySQL及其配置
Linux端安装MySQL及其配置文章目录Linux端安装MySQL及其配置安装前的准备工作:一、下载安装MySQL二、配置MySQL三、修改Mysql服务端的编码方式四、测试五、配置Mysql服务远程可访问导航:—>Linux端安装jdk—>Linux端安装Hadoop—>搭建集群—>克隆虚拟机及修改主机名的操作安装前的准备工作:1.查看系统之前...原创 2019-03-23 19:46:34 · 4577 阅读 · 1 评论 -
克隆虚拟机及修改主机名的操作
克隆虚拟机及修改主机名的操作文章目录克隆虚拟机及修改主机名的操作1.克隆虚拟机2.修改相关配置3.修改主机名1.克隆虚拟机--------->启动虚拟机。。。2.修改相关配置1)先ifconfig查看cd /etc/udev/rules.d/ vim 70-persistent-net.ruleseth0删掉,eth1改成0,复制物...原创 2019-03-06 10:55:10 · 7074 阅读 · 0 评论 -
SSH免密登录原理及步骤
SSH免密登录原理及步骤文章目录SSH免密登录原理及步骤1.什么是SSH?2.SSH的两种认证方式3.SSH背景4.SSH(Secure Shell)最基本的用法:5.SSH密钥登录原理6.密钥登录的操作步骤1.什么是SSH?简单说,SSH是一种网络协议,用于计算机之间的加密登录。• 如果一个用户从本地计算机,使用SSH协议登录另一台远程计算机,就可以认为,这种登录是安全的,即使被中途...原创 2019-03-05 19:21:35 · 4831 阅读 · 2 评论 -
集群三部曲:全分布模式
集群三部曲:全分布模式文章目录集群三部曲:全分布模式1.免密登录三台机器SSH(Secure Shell)2.搭建过程:3.集群启动及测试Cloud01Cloud02Cloud03*!准备三台干净的机器Cloud01、Cloud02、Cloud03 ,并且做好准备工作(请参考集群三部曲之准备工作)。~单机模式~伪分布模式1.免密登录三台机器SSH(Secure Shell)(请查看...原创 2019-04-13 14:16:34 · 1485 阅读 · 1 评论 -
集群三部曲:伪分布模式
集群三部曲:伪分布模式请先做好准备工作:参看文章集群三部曲之准备工作文章目录集群三部曲:伪分布模式1.伪分布式配置2.启动集群3.查看集群1.伪分布式配置1)配置:hadoop-env.sh(/home/hyn/software/hadoop/etc/hadoop)Linux系统中获取jdk的安装路径,然后修改文件:2)配置:core-site.xml(需要在hadoop文件夹下...原创 2019-03-05 15:55:24 · 873 阅读 · 0 评论 -
集群三部曲:单机模式
单机模式:运行wordcount单机模式是最简单的一种集群模式,但是配置单机模式之前一定要先做好准备工作,否则无法完成(请参看文章集群三部曲之准备工作)1)创建在hadoop文件下面创建一个wcinput文件夹mkdir wcinput2)在wcinput文件下创建一个wc.input文件cd wcinputtouch wc.input3)编辑wc.input文件vim w...原创 2019-03-05 15:33:30 · 422 阅读 · 0 评论 -
大数据入门:Hadoop安装、环境配置及检测
文章目录1.导包Hadoop包2.配置环境变量3.把winutil包拷贝到Hadoop bin目录下4.把Hadoop.dll放到system32下5.检测Hadoop是否正常安装5.1在maven项目中检测,将配置文件放入resource包下5.2然后通过一个简单的wordcount程序检测Hadoop是否安装成功5.3保存好之后,写程序:5.4最后我们打开输出文件查看:6.容易出现的错误:6...原创 2019-04-10 22:57:16 · 1207 阅读 · 0 评论 -
大数据入门:Maven项目的创建及相关配置
Maven项目的创建及相关配置文章目录Maven项目的创建及相关配置一、Maven的介绍1.Maven是什么:2.Maven作用:3.Maven项目的目录结构:4.Maven的三点坐标:5.maven的pom文件:6.maven的库:7.maven的生命周期:8.Maven的插件:二、创建maven项目1.创建步骤2.本地库的问题解决一、Maven的介绍1.Maven是什么: M...原创 2018-11-21 23:47:14 · 356 阅读 · 0 评论 -
Linux:修改虚拟机的用户名
Linux:修改虚拟机的用户名文章目录Linux:修改虚拟机的用户名以root权限登录:修改配置文件:1. vim /etc/passwd2. vim /etc/group3. vim /etc/gshadow4. vim /etc/shadow5. 修改/home/olduser为/home/newuser6. 修改sudoers文件以root权限登录:su修改配置文件:1....原创 2019-04-08 19:14:33 · 35323 阅读 · 13 评论 -
集群三部曲之准备工作:Linux端安装jdk和Hadoop
集群三部曲之准备工作1.使用root用户设置hyn用户(自己的用户名)具有root权限:修改 /etc/sudoers 文件,找到下面一行,在root下面添加一行,如下所示:## Allow root to run any commands anywhereroot ALL=(ALL) ALLhyn ALL=(ALL) ALL修改完毕,现在可以用hyn帐...原创 2019-03-05 15:20:47 · 897 阅读 · 10 评论 -
Linux:2. 创建虚拟机
Linux:创建虚拟机文章目录Linux:创建虚拟机1.新建虚拟机向导2.虚拟机设置3.启动虚拟机1.新建虚拟机向导给虚拟机取一个名称,并指定存放目录。指定磁盘容量:默认就行。2.虚拟机设置选择iso镜像文件设置完毕。3.启动虚拟机选择skip:跳过选择English或中文简体都可以。忽略数据设置虚拟机的主机名hostname设置密...原创 2019-04-08 18:24:54 · 356 阅读 · 0 评论