HBase2.2.4完全分布式安装(基于Hadoop3.2.1) 由于hbase需要依赖于hadoop和zookeeper集群,所有首先需要安装准备好hadoop和zookeeper集群,参看前面的文章:hadoop安装 https://blog.csdn.net/ITshu/article/details/105409254zookeeper安装:https://blog.csdn.net/ITshu/article/details/105817034...
Zookeeper完全分布式集群的搭建 搭建zookeeper集群需要最少三台机器,需要安装jdk作为基础支持。此次使用的Zookeeper3.6.0版本。1、准备虚拟机准备三台虚拟机,将ip和端口规划好。这里最好将主机名,以及主机名和ip的映射关系配置好,配置此项关系可以参看Hadoop完全分布式集群搭建。2、安装jdk在虚拟机中安装jdk,并且配置jdk的环境变量。3、搭建集群1.下载安装包下载zookeeper的安装...
HIVE 基础知识 hive 其实是一个客户端,类似于navcat、plsql 这种,不同的是Hive 是读取 HDFS 上的数据,作为离线查询使用,离线就意味着速度很慢,有可能跑一个任务需要几个小时甚至更长时间都有可能。在日常开发中 Hive 用的还是挺广泛的,常做一些统计工作,就我自己工作来看其实 80% 的工作由 Hive 的基础部分就能完成了,只有很少的情况需要用到一些复杂查询或者调优工作。本文着重挑选出...
Linux环境下安装MySQL5.7(tar.gz) 下载地址:https://dev.mysql.com/downloads/mysql/5.7.html#downloads解压tar -xvf mysql-5.7.26-linux-glibc2.12-x86_64.tar 再移动并重命名一下mv mysql-5.7.26-linux-glibc2.12-x86_64 /usr/local/mysql创建mysql用户组和用户并修改...
Hadoop 3完全分布式集群搭建方法(CentOS 7+Hadoop 3.2.1) 这里通过4台Linux虚拟机,详细介绍搭建4个节点的完全分布式Hadoop集群的方法,Linux系统版本是CentOS 7,Hadoop版本是3.2.1,JDK版本是1.8一、准备环境在VMware workstations上创建4个Linux虚拟机,并配置其静态IP。配置DNS(每个节点)编辑配置文件,添加主节点和从节点的映射关系。#vim /etc/hosts192.1...
Linux下安装和配置Java环境 本文详细介绍Linux系统下配置Java环境的方法,使用JDK1.8版本。1. 从Oracle官网上下载Java8版本。下载链接:https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html2. 上传Java包到Linux系统。使用rz命令将Java tar包上传到Linux系统。(...
Hadoop集群配置免密SSH登录方法 Hadoop集群包含1个主节点和3个从节点,需要实现各节点之间的免密码登录,下面介绍具体的实现方法。一、Hadoop集群环境192.168.1.13 hadoop01192.168.1.14 hadoop02192.168.1.15 hadoop03192.168.1.16 hadoop04二、免密登录原理每台主机authorized_keys文件里面包含的主机(ssh密钥),该主...
Centos7安装ElasticSearch7.5 1、下载ElasticSearch下载地址:https://www.elastic.co/cn/downloads/。解压刚刚下载的ElasticSearch的压缩包tar -zxvf elasticsearch-7.5.0-linux-x86_64.tar.gz -C /usr/local2、修改Linux系统的限制配置a. 修改系统中允许应用最多创建多少文件等的限制权限。Linux默...
单节点k8s(kubernetes)的一个小例子 最近开始阅读《Kubernetes权威指南》这本书,根据书上有一个单节点k8s的小例子一步步来做,踩过的坑记录这是一个简单的Java Web应用,结构简单,是一个运行在Tomcat里的Web App,JSP页面通过JDBC直接访问MySQL数据库并展示数据。此应用需要启动两个容器:Web App容器和MySQL容器,并且Web App容器需要访问MySQL容器。环境准备VM下一台虚拟机,N...
Jenkins集成github使用webhook自动构建 准备工作Jenkins所在服务器一定要有外网IP,否则GitHub无法访问需要有一个GitHub号,并在上面创建工程;工程代码按自己实际的代码地址,我这里是:https://github.com/itshu/ustra-parent.git配置Jenkins的webhook接收地址要获取Jenkins的Hook URL,打开Jenkins首页控制台–》系统管理在Github插件的...
CentOS7安装部署CDH6.1.0 CentOS7安装部署CDH6.1.0下载相关安装包安装三台服务器修改主机名及映射主机名(所有节点/重启)关闭防火墙和 selinux(所有节点)时钟同步(所有节点)配置 ssh 免密登录(所有节点)禁用透明大页面压缩(所有节点)优化交换分区(所有节点)安装jdk(所有节点)安装 mysql(master)为下表中每个服务创建 utf8 字符集的数据库:安装 cloudera manager 包修...
Oracle性能参数—经典常用 0、数据库参数属性col PROPERTY_NAME format a25col PROPERTY_VALUE format a30col DESCRIPTION format a100select * from database_properties;select * from v$version;1、求当前会话的SID,SERIAL#SELECT Sid, Seri
Oracle数据库impdb和expdb操作 一、查看管理理员目录(同时查看操作系统是否存在,因为Oracle并不关心该目录是否存在,如果不存在,则出错)>select * from dba_directories;删除定义目录>drop directory dir_name;二、创建逻辑目录,该命令不会在操作系统创建真正的目录,最好以system等管理员创建。>create or replace direct