- 博客(18)
- 收藏
- 关注
RSS订阅原创 hadoop HA集群安装部署
1.运行环境1.1 软件环境三个节点OS：64位RHEL5及以上或者64位CentOS6.0及以上JVM：预装64位JDK 1.8及以上版本1.2 浏览器要求Firefox 39.0.0版本及以上或者Google Chrome 54.0.2840.8版本及以上。BEH-Manager-4.1.2安装包于官方网站下载：http://beh.pezy.cn/2 安装准备2.1准备虚拟...
2019-05-23 15:25:26
363
原创 HADOOP生态圈以及各组成部分的简介
HADOOP生态圈以及各组成部分的简介1各组件简介重点组件：HDFS：分布式文件系统MAPREDUCE：分布式运算程序开发框架HIVE：基于大数据技术（文件系统+运算框架）的SQL数据仓库工具HBASE：基于HADOOP的分布式海量数据库ZOOKEEPER：分布式协调服务基础组件Mahout：基于mapreduce/spark/flink等分布式运算框架的机器学习算法库Oozie...
2019-05-20 15:26:45
4943
原创 HADOOP 背景介绍
什么是HADOOP(1)HADOOP是apache旗下的一套开源软件平台(2)HADOOP提供的功能：利用服务器集群，根据用户的自定义业务逻辑，对海量数据进行分布式处理1. HADOOP的核心组件有HDFS（分布式文件系统）MAPREDUCE（分布式运算编程框架）YARN（运算资源调度系统）1.2 HADOOP产生背景HADOOP最早起源于Nutch，Nutch的设计目标是构建...
2019-05-20 15:21:53
530
原创 Linux 定时器
定时器（指定的时间执行某个程序）crontab 命令允许用户提交、编辑或删除相应的作业。每一个用户都可以有一个crontab 文件来保存调度信息。可以使用它运行任意一个 s h e l l 脚本或某个命令。crontab命令格式作用：用于生成cron进程所需要的crontab文件crontab的命令格式#crontab -e使用编辑器编辑当前的crontab文件。crontab文件...
2019-05-20 14:47:50
357
原创 Linux shell脚本
shell基础知识什么是ShellShell是命令解释器(command interpreter)，是linux操作系统的用户接口，程序从用户接口得到输入信息，shell将用户程序及其输入翻译成操作系统内核（kernel）能够识别的指令，并且操作系统内核执行完将返回的输出通过shell再呈现给用户，下图所示用户、shell和操作系统的关系：Shell也是一门编程语言，即shell脚本，sh...
2019-05-20 14:40:21
369
原创 HDFS 读写流程基本介绍
HDFS写数据流程1.概述客户端要向HDFS写数据，首先要跟namenode通信以确认可以写文件并获得接收文件block的datanode，然后，客户端按顺序将文件逐个block传递给相应datanode，并由接收到block的datanode负责向其他datanode复制block的副本（block块大写：我们开发那会，服务器内存小，block块大小按64M，现在的是128M）2.详细步骤...
2019-05-20 14:15:59
637
原创 Linux 权限管理 RPM软件包管理
三种基本权限r 读权限（read）w 写权限（write）x 执行权限 （execute）权限说明所有者 所属组 其他人第1位：文件类型（d 目录，- 普通文件）第2-4位：所属用户(所有者)权限，用u（user）表示第5-7位：所属组权限，用g（group）表示第8-10位：其他用户（其他人）权限，用o（other）表示第2-10位：表示所有的权限，用a（all）表示...
2019-05-18 09:24:38
648
原创 Linux ssh免密登录
集群通信ssh 免密登录ssh是远程登录会话的一种安全连接协议Window是可以通过crt来进行远程的连接虚拟机 ，虚拟机之间也是可以惊醒远程登录连接的。都是基于ssh协议的，也是基于客户端和服务端的1） 在linux 上安装ssh的客户端2） 首先要先挂载本地的yum源、3) yum list | grep ssh4) yum -y install openssh-clie...
2019-05-18 09:09:26
233
原创 Linux 配置网卡 和克隆
配置网卡网卡配置配置主机名配置host映射文件关闭防火墙Service iptables stopChkconfig iptables off克隆第一步：关闭虚拟机(如果如果不关闭就无法克隆) 第二步：点击克隆 第四步 第5步第6步： 填写虚拟机名称 和位置点完成就可以了第7步:克隆后删除一块网卡 修改网路ip一共俩块网卡，需要把第...
2019-05-18 09:04:27
364
原创 Linux Mysql5.7安装
Mysql5.7安装第一步：先到官方网站下载mysql链接地址第二部：上传到linux的root目录下第三部：安装链接地址： rpm -ivh mysql80-community-release-el6-2.noarch.rpm第四部：cd /etc/yum.repos.d/的目录下第五步：修改文件: vi mysql-community.repo把系统默认的高版本8.X改为0，把...
2019-05-17 18:05:36
199
原创 Linux VIM文本编辑器
VIM文本编辑器vim/vi是Unix / Linux上最常用的文本编辑器而且功能非常强大。VI工作模式插入命令命令作用a在光标后附加文本A（shift + a）在本行行末附加文本 行尾i在光标前插入文本I(shift+i)在本行开始插入文本 行首o在光标下插入新行O(shift+o)在光标上插入新行定位命令...
2019-05-17 17:58:58
270
原创 Linux压缩解压命令
压缩解压缩命令 gzip英文：GNU zip 执行权限：所有用户作用：压缩(解压)文件,压缩文件后缀为.gzgzip只能压缩文件，不能压缩目录，不保留原文件语法：gzip 文件名-d将压缩文件解压（decompress）解压使用gzip –dzip执行权限：所有用户作用：压缩(解压)文件,压缩文件后缀为.zip语法：zip 选项[-r] [压缩后文件名...
2019-05-17 17:24:03
605
原创 Linux安装和命令
Linux安装安装环境：Windows7/win10 , VMware Workstation14, CentOS 6.7VMwareVMware是一个虚拟PC的软件，可以在现有的操作系统上虚拟出一个新的硬件环境，相当于模拟出一台新的PC ，以此来实现在一台机器上真正同时运行多个独立的操作系统 。VMware主要特点：1、不需要分区或重新开机就能在同一台PC上使用两种以上的操作系统2、...
2019-05-17 12:29:00
231
原创 Vue.js 内置指令
回顾一下第2.2节，我们己经介绍过指令(Directive)的概念了，Vue.js的指令是带有特殊前缀v-的HTML特性，它绑定一个表达式，并将一些特性应用到DOM上。其实我们已经用到过很多Vue内置的指令，比如v-html、v-pre，还有上一章的v-bind。本章将继续介绍Vue.js中更多常用的内置指令。5.1 基本指令5.1.1 v-cloakv-cloak不需要表达式，它会在V...
2019-04-29 17:16:11
660
原创 Vue.js v-bind及class与style绑定
DOM元素经常会动态地绑定一些class类名或style样式，本章将介绍使用v-bind指令来绑定class和style的多种方法。4.1 了解v-bind指令在第2章时，我们已经介绍了指令v-bind的基本用法以及它的语法糖，它的主要用法是动态更新HTML元素上的属性。回顾一下下面的示例：1 <div id="app"> 2 <a v-bind:href="u...
2019-04-29 16:35:13
351
原创 Vue.js Vue.js计算属性
Vue.js计算属性通过上一章的介绍，我们已经可以搭建出一个简单的Vue应用，在模板中双向绑定一些数据或表达式了。但是表达式如果过长，或逻辑更为复杂时，就会变得臃肿甚至难以阅读和维护。比如：1 <div id="app">2 {{ text.split(",").reverse().join(",") }}3 </div>这里的表达式包含3个操作，并...
2019-04-29 15:44:51
201
原创 Vue.js 数据绑定和第一个Vue应用
数据绑定和第一个Vue应用学习任何一种框架，从一个Hello World应用开始是最快了解该框架特性的途径。我们先从一段简单的HTML代码开始，感受Vue.js最核心的功能： 1 <!doctype html> 2 <html lang="zh"> 3 <head> 4 <meta charset="UTF-8">...
2019-04-29 15:36:26
192
原创 Vue.js 初始Vue.js
Vue.js1.1 Vue.js 是什么1.1.1 MVVM模式功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入1.1...
2019-04-29 14:58:00
260
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人