Jbase的博客

jbase的博客

排序:
默认
按更新时间
按访问量

基于Mesos+Marathon+Zookeeper的Docker集群管理环境搭建笔记

前言本文为搭建高可用的基于Mesos+Marathon+Zookeeper管理Docker集群的环境,资源有限仅使用两台服务器进行环境搭建(多台同理)。系统环境:Ubuntu 14.04、JDK1.8所需工具:Mesos-1.1、Marathon-1.3.5、Docker-1.12.5、Zooke...

2018-03-27 15:59:29

阅读数:57

评论数:0

Apache Flink介绍

1、Apache Flink介绍既然有了Apache Spark,为什么还要使用Apache Flink?因为Flink是一个纯流式计算引擎,而类似于Spark这种微批的引擎,只是Flink流式引擎的一个特例。其他的不同点之后会陆续谈到。1.1 历史Flink起源于一个叫做Stratosphere...

2018-03-19 15:17:22

阅读数:1667

评论数:1

Centos7上Mesos和Marathon的安装和配置

对Mesos和Marathon的安装官方文档有较详细的安装说明,但是英文的。我参照官方安装文档(https://open.mesosphere.com/getting-started/install/),在测试环境试装了一下,这里整理下安装配置的步骤。测试环境服务器IP说明192.168.0.10...

2018-03-19 10:48:55

阅读数:265

评论数:0

RHEL7.0下安装Storm1.2.1集群

1.基本信息(软硬件环境)版本storm1.2.1安装机器三台机器  ( big-data01    IP:192.168.200.121)                  ( big-data02    IP:192.168.200.122)                  ( big-da...

2018-03-15 11:43:37

阅读数:301

评论数:0

RHEL7.0下MongoDB安装和配置详解

1.下载安装包下载方式:curl -O https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-3.2.9.tgz解压缩压缩包:tar zxvf mongodb-linux-x86_64-3.2.9.tgz 2. 安装准备创建数据库文件夹与日志文...

2018-03-14 15:16:37

阅读数:42

评论数:0

Spark(1.6.1) Sql 编程指南+实战案例分析

首先看看从官网学习后总结的一个思维导图概述(Overview)Spark SQL是Spark的一个模块,用于结构化数据处理。它提供了一个编程的抽象被称为DataFrames,也可以作为分布式SQL查询引擎。开始Spark SQLSpark SQL中所有功能的入口点是SQLContext类,或者它子...

2018-03-12 18:09:02

阅读数:45

评论数:0

Linux中基于hadoop安装hive(RHEL7.0+hadoop2.8.3+hive2.3.2)

1下载hive2安装         2.1上载和解压缩         2.2配置环境变量         2.3对hive进行配置                   2.3.1 hive-site.xml相关的配置                                2.3.1.1...

2018-03-12 14:21:51

阅读数:607

评论数:0

mySQL 用户及权限管理

MySQL 默认有个root用户,但是这个用户权限太大,一般只在管理数据库时候才用。如果在项目中要连接 MySQL 数据库,则建议新建一个权限较小的用户来连接。在 MySQL 命令行模式下输入如下命令可以为 MySQL 创建一个新用户:1CREATE USER username IDENTIFIE...

2018-03-12 13:39:58

阅读数:51

评论数:0

RHEL7.0下安装MySQL5.7 (以rpm包模式安装)

下载地址:https://dev.mysql.com/downloads/mysql/名称:mysql-5.7.19-1.el7.x86_64.rpm-bundle.tar安装我已经把安装包放到/usr/local/software路径下面[root@localhost software]# ls...

2018-03-12 13:38:19

阅读数:912

评论数:0

RHEL7.0下彻底卸载mysql数据库

一、使用以下命令查看当前安装mysql情况,查找以前是否装有mysql?1rpm -qa|grep -i mysql可以看到如下图,显示之前安装了:mysql-community-libs-5.7.21-1.el7.x86_64mysql-community-devel-5.7.21-1.el7....

2018-03-12 10:34:51

阅读数:136

评论数:0

Zookeeper+Dubbox 环境搭建日记

第一章:Dubbox简介 Dubbox是一个开源的RPC(Remote ProcedureCall Protocol)远程调用框架,是由dangdang对阿里的Dubbo的升级,可以被视为Dubbo的增强版,基本架构没有变动,升级spring2.x到spring3.x,支持restful风格的调用...

2018-03-09 15:47:49

阅读数:230

评论数:0

Linux中基于hadoop安装hive(CentOS7+hadoop2.8.0+hive2.1.1)

1下载hive2安装         2.1上载和解压缩         2.2配置环境变量         2.3对hive进行配置                   2.3.1 hive-site.xml相关的配置                                2.3.1.1...

2018-03-09 14:18:27

阅读数:34

评论数:0

Linux下搭建spark集群开发环境

但是后来发现如果想要搞spark streaming的例子的话在Linux下使用更方便,于是在centos7下面搭建一下spark开发环境,记录以做备忘之用。1 .首先去spark官网下载相关软件,我这里用的是spark2.1.0版本http://spark.apache.org/download...

2018-02-11 10:51:01

阅读数:55

评论数:0

java常用加密算法

1、Base64工具类(可逆): import java.util.HashMap; import java.util.Map; /** * Base64加解密算法 * * Base64加密算法: * 1、获取字符串中每个字符的ASCII码; * 2、按照每3个8bit的字...

2018-01-22 14:55:41

阅读数:73

评论数:0

Apache顶级项目8-Geode源码深度分析

Apache顶级项目介绍之Geode。Apache顶级项目介绍之8,我们重新恢复Apache顶级项目系列,较之前介绍系列,我们本文直入代码分析,原因有二,Geode即上文我们分析的Gemfire的开源版本,其二被逼无奈,阅读源码查找问题。 1. Geode 2016年11月21日,Ap...

2018-01-05 13:49:36

阅读数:126

评论数:0

Apache顶级项目介绍2-Kafka

Apache顶级项目介绍系列-1,我们从Kafka说起。why?流行 + 名字cool。 Kafka官网是见过比较简单,直叙的网站,“kafka是一个高吞吐的分布式的消息系统”。 Kafka最初起家于LinkedIn,当时原本作为linkedin用来管理活动流(PV,用户行为分析...

2018-01-05 11:33:47

阅读数:66

评论数:0

Apache顶级项目介绍7 - HBase

今天我们来继续介绍Apache顶级项目大数据三巨头之一的HBase。恰逢今天(5.24)是HBase Con2016旧金山盛会,比较应景,而且还有朋友@Luke Han去演讲Kylin。 1. 官网简介: 老样子,HBase官网的介绍, "HBase is the...

2018-01-05 11:28:02

阅读数:78

评论数:0

开源实时日志分析ELK平台部署

ELK平台介绍在搜索ELK资料的时候,发现这篇文章比较好,于是摘抄一小段:以下内容来自:http://baidu.blog.51cto.com/71938/1676798日志主要包括系统日志、应用程序日志和安全日志。系统运维和开发人员可以通过日志了解服务器软硬件信息、检查配置过程中的错误及错误发生...

2017-03-31 18:15:00

阅读数:128

评论数:0

Oracle常用语法

--创建表    --创建部门表    create table department_13(department_id number(6), department_name varchar(25),                               manager_id numb...

2017-03-31 18:07:28

阅读数:277

评论数:0

ELK(ElasticSearch, Logstash, Kibana)实现分布式日志

日志主要包括系统日志、应用程序日志和安全日志。系统运维和开发人员可以通过日志了解服务器软硬件信息、检查配置过程中的错误及错误发生的原因。经常分析日志可以了解服务器的负荷,性能安全性,从而及时采取措施纠正错误。通常,日志被分散的储存不同的设备上。如果你管理数十上百台服务器,你还在使用依次登录每台机器...

2017-03-31 18:01:33

阅读数:294

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭