ActiveMQ的简单使用

1 ActiveMQ介绍 1.1 什么是ActiveMQ ActiveMQ是Apache出品的一个消息中间件,常用的消息对列主要有ActiveMQ,RabbitMQ,Kafka等,队列的主要作用是消除高并发访问高峰,加快网站的响应速度。在实际应用中常用的使用场景。异步处理,应用解耦...

2019-06-27 21:47:51

阅读数 7

评论数 0

HTTP请求报文和响应报文

HTTP请求报文和响应报文 1.一次完整的HTTP请求所经历的7个步骤 HTTP通信机制是在一次完整的HTTP通信过程中,Web浏览器与Web服务器之间将完成下列7个步骤: 建立TCP连接 在HTTP工作开始之前,Web浏览器首先要通过网络与Web服务器建立连接,该连接是通过TCP来完成的,该...

2019-04-24 10:19:05

阅读数 37

评论数 0

mongodb02集群搭建

MongoDB集群 副本集集群 架构图 副本集集群是一组Mongo服务,维护了相同的数据集,提供了高可用及数据冗余的能力。 # 模拟集群搭建 # 3个mongodb服务的副本集集群 # 一个服务器中通过端口号区分不同的mongodb实例 # 假设: node1: hadoop 27001 n...

2019-03-29 21:58:41

阅读数 45

评论数 0

mongodb基本使用

mongoDB 一、NoSql简介 NoSQL(NoSQL = Not Only SQL ),意即“不仅仅是SQL”, 泛指非关系型的数据库 Nosql这个技术门类,早期就有人提出,发展至2009年趋势越发高涨。 二、NoSQL数据库的四大分类 l 键值(Key-Value)存储数据库 这一类数据...

2019-03-29 21:57:18

阅读数 128

评论数 0

基于Hadoop生态体系搭建数据分析平台

基于Hadoop生态体系的数据分析平台 一、项目设计 架构图 设计目标 分析系统每日访问量PV(Page View) 分析系统各个模块访问量MV(Model View) 二、环境搭建 安装Nginx并配置日志切割 #安装gcc基本环境 yum install gcc-c++ perl...

2019-03-27 22:45:54

阅读数 50

评论数 0

Flum基础实战

Flume 架构实战 Flume是什么 Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。当前Flume有两个版...

2019-03-27 22:43:21

阅读数 55

评论数 0

Hive基础使用

Hive Hive介绍 概述 hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。 其优点是学习成本低,可以通过类SQL语句快速实现简单的MapReduce统计,不必开发专门的Ma...

2019-03-26 23:22:31

阅读数 33

评论数 0

kafka基础篇使用01

Kafka 一、官网 https://kafka.apache.org/intro 一、概述 Apache Kafka是一个分布式流处理平台 具备以下三种特性: 发布和订阅流式记录。类似于消息队列或者企业消息系统 存储流式数据,并且有较好的容错 流式数据处理 应用场景: 构造实时流数据管道,...

2019-03-22 18:04:37

阅读数 136

评论数 0

HBase基础使用03-HA集群搭建

HBase集群 集群架构图 HBase架构篇 HBase架构组成 HBase采用Master/Slave架构搭建集群,它隶属于Hadoop生态系统,由一下类型节点组成: HMaster 节点、 HRegionServer 节点、 ZooKeeper 集群,而在底层,它将数据存储于HDFS中,因而...

2019-03-22 16:26:43

阅读数 59

评论数 0

HBase基础使用02和MapReduce集成

HBase02 HBase和MapReduce集成 Maven依赖 <!-- hadoop-hdhf所需依赖--> <dependency> <groupId>org.apa...

2019-03-22 16:22:17

阅读数 41

评论数 0

HBase基础使用篇01

HBase 高并发处理方案简图 一、概述 官网地址: http://hbase.apache.org/ HBase是一种构建在HDFS之上的分布式、面向列的存储系统。在需要实时读写、随机访问超大规模数据集时,可以使用HBase。 特点 大:一个表可以有上亿行,上百万列 面向列:面向列表(...

2019-03-19 22:16:03

阅读数 53

评论数 0

Hadoop-HA 高可用集群

Hadoop HA高可用集群 一、HA集群 HDFS HA集群 master\slave YARN HA集群 master\slave HA(High Available), 高可用性群集,是保证业务连续性的有效解决方案,避免了因为单点故障带来的风险,一般有两个或两个以上的节点,且分为活动节点...

2019-03-18 22:14:54

阅读数 51

评论数 0

ZooKeeper使用教程

ZooKeeper使用教程 一、概述 官⽹网 https://zookeeper.apache.org/ 介绍 ZooKeeper是一个开源的分布式应⽤协调服务系统,主要⽤用来完成统一命名服务、状态同步服务、集群管理理、分布式应⽤用配置项的管理理等⼯工作。 ZooKeeper(分布系统基础服务) ...

2019-03-18 09:09:11

阅读数 57

评论数 0

ELK-快速入门使用

一、ELK概述 ELK 是三个开源软件的缩写,分别表示: Elasticsearch , Logstash , Kibana 。 ELK 通常用来构建日志分析平台、数据分析搜索平台等 官方文档 https://www.elastic.co/cn/products 组件介绍 Elasticsea...

2019-03-18 09:02:21

阅读数 56

评论数 0

ElasticSearch

前言 apache lucene 全文检索的工具包 索引:提供查询效率 数据库索引: 主键索引、唯一索引(unique)、复合索引(对数据库中的多个字段创建一个索引)、普通索引等 create index 索引名 on table (column1,column2) 全文检索;类似于...

2019-03-18 08:55:19

阅读数 64

评论数 0

Memcached

一、概述 传统关系型数据:Oracle 、 Mysql 指标 容量 2000W tps 1500个 响应时间:10MS 缓存类型: 1.本地缓存 2.客户端缓存 3.分布式缓存 缓存的设计指标: 容量 key-value tps 12W 成本 (64G 128G ) 响应时间 ...

2019-03-17 21:33:34

阅读数 60

评论数 0

FastDFS

FastDFS笔记 一、简介 FastDFS是高性能的分布式文件系统,主要功能包括文件的存储、同步、访问(上传和下载),特别适合用于以文件为主体的网络站点(图片分享和视频分享) FastDFS包含两个角色: Tracker (追踪器 调度服务器):调度和文件访问的负载均衡 Storage (存储...

2019-03-17 21:30:00

阅读数 400

评论数 0

AWT组件

AWT组件 1、组件是构成图形用户界面的基本成分和核心元素。组件具有以下特性的对象:运行时可见,具有坐标位置、尺寸、字体、颜色等属性,能拥有及管理其他组件,可获得输入焦点可被操作,可响应事件等。 Component组件类是一个抽象类,它是AWT组件类层次结构的根类,实际使用的组件都是Compone...

2019-03-17 21:22:23

阅读数 49

评论数 0

Spring的两种依赖注入方式:setter方法注入与构造方法注入 以及两种方式的区别!

spring的两种依赖注入方式:setter注入与构造方法注入,这两种方法的不同主要就是在xml文件下对应使用property和constructor-arg属性, 例如: property属性:(其中name的值为原类中的属性名) constructor-arg属性:(其中index的值为0~n...

2019-03-17 21:21:58

阅读数 123

评论数 0

Hadoop---MapReduce

MapReduce 一、什么是MapReduce ---- 并行计算框架模型 Hadoop MapReduce是一个软件框架,基于该框架能够容易易地编写应⽤用程序,这些应用程序能够运行在由上千个商⽤用机器器组成的⼤大集群上,并以一种可靠的,具有容错能⼒力力的⽅方式并⾏行行地处理理上TB级别的海量数...

2019-03-17 21:20:44

阅读数 135

评论数 0

提示
确定要删除当前文章?
取消 删除