2017年12月_chengqiuming

原创 Hbase架构详解

一 HBase组件1 架构图2 客户端client3 程序协调服务Zookeeper4 Hbase主节点Master5 HRegionServer节点二 Hbase与zookeeper的关系三 Hbase region定位四 Hbase容错性五参考http://www.jikexuey

2017-12-31 07:10:00 317

原创 Hbase的shell操作

一进入hbase的shell[root@master hbase-1.2.6]# hbase shellSLF4J: Class path contains multiple SLF4J bindings.SLF4J: Found binding in [jar:file:/opt/hbase-1.2.6/lib/slf4j-log4j12-1.7.5.jar!/org/slf4j/im

2017-12-31 07:02:15 606

原创在windows的eclipse下搭建Hbase的开发环境

一搭建前的准备工作1 Linux下启动的Hadoop和Hbase集群[root@centos ~]# cd /opt/hadoop-2.7.4/[root@centos hadoop-2.7.4]# sbin/start-dfs.sh[root@centos hadoop-2.7.4]# sbin/start-yarn.sh[root@centos hbase-1.2.6]# bi

2017-12-31 06:55:24 801

原创 Hadoop2.7.4上搭建Hbase全分布式集群

一 Hadoop集群规划主机名 IP 安装的软件 master 192.168.0.110 jdk1.8、hadoop2.7.4 slave1 192.168.0.111

2017-12-30 18:41:14 531

原创 Hadoop2.7.4上搭建zookerper

一 Hadoop集群配置如下主机名 IP 安装的软件运行的进程master 192.168.0.110 jdk1.8、hadoop2.7.4 NameNode、resourcemanagerslave1

2017-12-30 15:45:11 499

原创 Hadoop2.7.4 全分布式模式环境搭建

一集群规划主机名 IP 安装的软件运行的进程master 192.168.0.110 jdk1.8、hadoop2.7.4 NameNode、resourcemanagerslave1

2017-12-30 12:40:03 401

原创 Hbase数据库介绍

一简介HBase是BigTable的开源java版本。是建立在HDFS之上，提供高可靠、高性能、列存储、可伸缩、实时读写NoSQL数据库系统。NoSQL = NO SQLNoSQL = Not Only SQL把NoSQL数据的原生查询语句封装成SQLHBase Phoenix（写SQL语句对Hbase进行增删改查）NoSQL：Hbase、redis、mongodbR

2017-12-30 09:05:54 3572

原创 docker run 和create

实战[root@localhost ~]# docker ps -aCONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES3aa54d101e5f 6a

2017-12-30 07:10:42 5648 2

原创 docker push上传镜像

一 docker官网创建账号官网地址：https://www.docker.com/创建账号：cakin24二实战[root@localhost ~]# docker imagesREPOSITORY TAG IMAGE ID CREATED SIZE33

2017-12-29 19:49:11 575

原创 docker的export和import

实战[root@localhost ~]# docker imagesREPOSITORY TAG IMAGE ID CREATED SIZEclearlinux latest 32685d114002 7 days ago

2017-12-28 21:30:25 680

原创 docker的save和load

实战[root@localhost ~]# docker imagesREPOSITORY TAG IMAGE ID CREATED SIZEclearlinux latest 32685d114002 7 days ago

2017-12-28 21:29:09 1371

原创 HBase Shell 操作

一 HBase Shell基本操作二 HBase组命令三 general与namespace演示四实战1 启动相关进程[root@centos hbase-1.2.6]# jps3684 HRegionServer2758 SecondaryNameNode3512 HMaster3784 Jps3033 NodeManag

2017-12-27 21:08:35 382

原创 HBase HDFS 上目录分析

一 WAL介绍二 Region介绍1 Region分配2 Region分裂3 Region存储三 HDFS目录四参考http://www.jikexueyuan.com/course/2089_1.html

2017-12-27 20:08:08 500

原创 docker commit通过容器生成镜像保留历史

实战[root@localhost ~]# docker imagesREPOSITORY TAG IMAGE ID CREATED SIZEclearlinux latest 32685d114002 7 days ago

2017-12-27 19:41:19 3548 1

原创 docker容器状态的转换

一 docker容器状态转换图二实战[root@localhost ~]# docker infoContainers: 0Running: 0Paused: 0Stopped: 0Images: 3Server Version: 17.09.0-ceStorage Driver: overlayBacking Filesystem: xfsSupports

2017-12-27 19:39:53 7231

原创 HBase 伪分布式搭建

一 Linux环境搭建1 关闭防火墙2 配置IP、DNS3 配置主机名4 设置SSH免密码登录5 安装JDK二 Hadoop环境搭建1 下载Hadoop2 配置HDFS、YARN3 格式化4 启动并测试三 HBase环境搭建1 HBase与Java版本对应关系2 HBase与Hadoop对应关系3 查看系统的Hadoo

2017-12-26 22:17:34 469

原创 docker的rm和rmi实战

实战脚本[root@localhost ~]# docker ps -aCONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES[root@localhost ~]# docker imagesR

2017-12-26 21:30:38 5088

原创 Docker 命令集

一管理命令container：Manage containersimage：Manage imagesnetwork：Manage networksnode：Manage Swarm nodesplugin：Manage pluginssecret：Manage Docker secretsservice：Manage services

2017-12-26 21:29:02 330

原创 Docker引擎和结构

一结构和组成二相关术语客户端服务端模式可单机可分布式部署。服务端负责docker镜像的构建，运行，发布。1 The Docker daemon接收Docker API请求和管理docker的对象，例如镜像、容器、网络、存储卷等，也可以和其他的Docker daemon通信管理docker的service。2 The Docker client可以和多

2017-12-26 21:26:38 3548

原创 HBase术语及数据模型

一 HBase术语说明1 主键（Row Key）2 列族（Column Family）3 时间戳与存储单元（Timestamp and Cell）二 HBase数据模型简析1 逻辑模型2 物理模型3 HBase物理存储4 HBase存储细节三参考http://www.jikexueyuan.com

2017-12-25 21:40:21 1660

原创虚拟机和容器比较

容器相比虚拟机更轻量一虚拟机二容器

2017-12-25 21:32:57 1397

原创云计算模式IaaS、Paas、SaaS

一云计算模式图二 Docker特点1 更快速的交付和部署2 更高效的虚拟化3 更轻松的迁移和扩展4 更简单的管理

2017-12-25 21:30:47 338

原创 CentOS7下安装Docker CE

一 Docker CE（社区版本）的安装$ sudo yum install -y yum-utils$ sudo yum-config-manager \ --add-repo \https://download.docker.com/linux/centos/docker-ce.repo#$ sudo yum-config-manager --enable docker-ce

2017-12-25 21:27:09 248

原创 HBase 概述

一 Hbase简介二 Hbase的优势三 Hbase表的特点四 Hbase VS RDBMS

2017-12-24 11:01:25 693

原创 Linux下载Windowss文件神器RZSZ

一简介RZSC是Linux/Unix同Windows进行ZModem文件传输命令行工具。二说明sz：将选定的文件发送（send）到Windows机器rz：运行该命令会弹出一个文件选择窗口，从Windows机器选择文件上传到Linux服务器。三安装命令yum install -y lrzsz四实战

2017-12-24 10:44:06 595

原创 Hive的体系结构

Hive的体系结构如下图所示，主要包括：用户接口Thrift服务器元数据存储解析器Hadoop

2017-12-24 09:50:26 347

原创雇员管理系统-SSH版（十）

修改删除雇员信息一页面层关键代码my.js$(document).ready(function(){ $(".delid").click(function(){ return window.confirm("是否删除该用户!"); }) })listEmp.jsp

2017-12-24 09:37:33 455

原创雇员管理系统-SSH版（八）

优化业务类一 BasicServiceInterpackage com.hsp.basic;import java.util.List;public interface BasicServiceInter { //声明一些常用的方法 //1.通过id获取对象 public Object findById(Class clazz,java.

2017-12-24 09:33:09 321

原创雇员管理系统-SSH版（九）

显示雇员信息一页面层关键代码MainFrame.jsp My JSP 'MainFrame.jsp' starting page 欢迎${loginuser.name} 你所在的部门名称是${loginuser.department.name } 请选择您要的操作添加雇员显示雇员查询雇员退出系统

2017-12-24 09:28:40 400

原创 NotePad++编辑Linux中的文件

一应用场景Windows中的NotePad++连接Centos 7，然后编辑centos 7中的文件，操作很方便。二安装NotePad++下载地址：https://notepad-plus-plus.org/download/v7.5.3.html三下载NppFTP插件32位下载地址：https://github.com/ashkulz/NppFTP/re

2017-12-23 22:44:46 4110

原创 Centos7下安装eclipse

一操作系统版本CentOS 7二 eclipse版本eclipse-jee-neon-1a-linux-gtk-x86_64.tar.gz三下载地址http://mirrors.ustc.edu.cn/eclipse/technology/epp/downloads/release/neon/1a/eclipse-jee-neon-1a-linux-gtk-

2017-12-23 22:39:07 742

原创数据库与数据仓库

一数据库相关概念二数据仓库相关概念三数据仓库体系结构四数据仓库的基本特征五数据库与数据仓库比较六参考http://www.jikexueyuan.com/course/825.html

2017-12-23 20:01:15 453

原创 Hive 与 RDBMS 关系

一 Hive与RDMS比较二参考http://www.jikexueyuan.com/course/825.html

2017-12-23 19:45:28 482

原创 Hive 与 HBase 关系

一 Hive和Base的区别二 Hive和Hbase的连接结构图三参考http://www.jikexueyuan.com/course/825.html

2017-12-23 19:36:01 307

原创 Hive 简介

一学习前提二什么是Hive三为何使用Hive四相关Hive资源五参考http://www.jikexueyuan.com/course/825.html

2017-12-23 19:24:01 290

原创雇员管理系统-SSH版（七）

添加雇员信息一 MainFrame.jsp My JSP 'MainFrame.jsp' starting page 欢迎${loginuser.name} 你所在的部门名称是${loginuser.department.name } 请选择您要的操作添加雇员显示雇员查询雇员退出系统二 a

2017-12-23 18:55:11 483

原创雇员管理系统-SSH版（六）

一 spring可以启用注解的方式来配置属性1 重新这样配置bean2 在EmployeeService的属性sessionFactory中添加一个注解@Resource@Resourceprivate SessionFactory sessionFactory;3 在applicationContext.xml中启用注解二解决懒加载问题思考：如果

2017-12-23 18:52:31 430

一慕课网1.Hadoop大数据平台架构与实践--基础篇(已学习)链接:https://www.imooc.com/learn/3912.Hadoop进阶（已学习）链接:https://www.imooc.com/learn/890二极客学院1.Hadoop 概述（已学习）链接:http://www.jikexueyuan.com/course/677.html2.Hadoop 架构介绍（已学习...

2017-12-22 22:42:24 3585

原创 Hadoop 参数调优

一 HDFS调优二 YARN调优1 Container简介下面左图为Hadoop1，右图为Hadoop22 内存优化相关参数3 CPU优化相关参数三 MapReduce调优1 MapReduce调优三原则2 增大作业并行程度3 给每个任务足够的资源相关调优参数4 尽可能地给shuffle预留资源相关调优参

2017-12-22 21:44:23 467

原创 Hadoop调优之操作系统调优与JVM 调优

一操作系统调优1 避免使用swap分区2 调整内容分配策略3 修改net.core.somaxconn参数4 增大同时打开文件描述符的上限5 选择合适的文件系统，并禁用文件的访问时间6 关闭THP二 JVM调优1 简介2 调优对比图

2017-12-22 20:59:16 1791

2 shiro身份认证.mp4

1 shiro简介.mp4

Java单选.docx

空空如也