涂作权的博客

成功就是将个人潜能发挥到极限!&&以大多数人的努力程度之低,根本还轮不到拼天赋!...

排序:
默认
按更新时间
按访问量

我理解的HBSE应用场景(交流篇)

1、数据量极大,并且要去实时查询的业务场景使用这个才会提现真正的应用价值。 2、若数据量没有到亿级别的实时查询,觉得用这个HBASE有些大材小用的感觉。,暂时没有达到亿级别,但是数据量增长特别快,能够很快的时间达到相应的量级,这时候用这个似乎更好一些 3、若使用数据库,亿级别这些,分库分表,索...

2018-06-18 18:37:25

阅读数:33

评论数:0

Hbase的应用场景、原理及架构分析(转:https://blog.csdn.net/xiangxizhishi/article/details/75388971)

Hbase概述 hbase是一个构建在HDFS上的分布式列存储系统。HBase是Apache Hadoop生态系统中的重要 一员,主要用于海量结构化数据存储。从逻辑上讲,HBase将数据按照表、行和列进行存储。 如图所示,Hbase构建在HDFS之上,hadoop之下。其内部管理的文件全部...

2018-06-18 18:31:05

阅读数:21

评论数:0

ES中搜索结果各属性说明介绍,以及搜索中的timeout机制讲解(来自学习资料,34节)

1、属性说明和介绍 执行命令: GET /test_index/test_type/_search?timeout=1s 运行后的结果如下: { "took": 4, "timed_out": false, ...

2018-06-15 01:21:41

阅读数:23

评论数:0

ElasticSearch bulk批量增删改语法(来自学习资料 + 自己整理,第27节)

1 bulk语法 通过bulk语法,可以将crud所需的不同的操作放在一个语句里面。 先来查找一下看是否有数据: 查询命令为如下时: GET /test_index/test_type/1 查询的结果是: { "_index": ...

2018-06-15 00:50:27

阅读数:23

评论数:0

kylin备份元数据(用于清除不用的数据方式)

转:https://blog.csdn.net/jiangshouzhuang/article/details/51290239 Kylin组织它所有的元数据(包括cube descriptions and instances, projects, inverted index descript...

2018-06-14 16:06:45

阅读数:42

评论数:0

批量查询,mget语法,mget批量查询(来自学习资料,第26节)

1、批量查询的好处 就是一条一条的查询,比如说要查询100条数据,那么就要发送100次网络请求,这个开销还是很大的 如果进行批量查询的话,查询100条数据,就只要发送1次网络请求,网络请求的性能开销缩减100倍 2、mget的语法 (1)一条一条的查询 GET /test_index...

2018-06-14 00:58:48

阅读数:24

评论数:0

Hadoop性能调优、YARN的内存和CPU配置

Hadoop为用户作业提供了多种可配置的参数,以允许用户根据作业特点调整这些参数值使作业运行效率达到最优。 一 应用程序编写规范 1.设置Combiner 对于一大批MapReduce程序,如果可以设置一个Combiner,那么对于提高作业性能是十分有帮助的。Combiner...

2018-06-12 21:01:54

阅读数:139

评论数:0

26、ES中使用mget批量查询api(学习笔记,来自课程资料 + 自己整理)

1、批量查询的好处 就是一条一条的查询,比如说要查询100条数据,那么就要发送100次网络请求,这个开销还是很大的,如果批量查询的话,查询100条数据,就只要发送1次网络请求,网络请求的性能开销缩减100倍。 2、mget的语法 (1)传统的一条条的查询的方式,语法如下: GET /tes...

2018-06-03 18:05:51

阅读数:74

评论数:0

17、document的全量替换,document的强制创建,document的删除(来源网络课程中的学习笔记)

1、document的全量替换 (1)语法与创建文档是一样的,如果document id不存在,那么就创建;如果document id已经存在,那么就是全量替换操作,替换document的json串内容。 (2)document是不可变的,如果修改document的内容天,第一种方式是全量替换...

2018-06-03 17:35:58

阅读数:52

评论数:0

16、分布式文档系统--document的_source元数据以及定制返回结果解析(来自学习资料+自己整理)

1、_source元数据 准备一条数据 put /test_index/test_type/1 { "test_field1": "test field1", "test_field2&q...

2018-06-03 17:22:02

阅读数:31

评论数:0

分布式文档系统-document id的手动指定与自动生成两种方式解析(来自学习笔记:龙果学院ES课程)

1、手动指定document id (1)根据应用情况来说,是否满足手动指定document id的前提: 一般来说,是从某些其他的系统中,导入一些数据到es时,会采取这种方式,就是使用系统中已有数据的唯一标识,作为es中document的id。举个例子,比如说,我们现在在开发一个电商网站,做...

2018-06-03 17:05:39

阅读数:71

评论数:0

MySQL MMM多主多从搭建

一.MySQL高可用简介 MMM(Master-Master Replication mananger for mysql),由一个管理端(monitor)和多个代理端(agent)构成。通过MMM可以实现监控和管理Mysql主主复制和服务状态,同时也可监控多个Slave节点的复制以及运行状态,...

2018-06-03 12:28:03

阅读数:155

评论数:0

ELK架构设计介绍(转:https://www.cnblogs.com/aresxin/p/8035137.html)

为什么用到ELK: 一般我们需要进行日志分析场景:直接在日志文件中 grep、awk 就可以获得自己想要的信息。但在规模较大的场景中,此方法效率低下,面临问题包括日志量太大如何归档、文本搜索太慢怎么办、如何多维度查询。需要集中化的日志管理,所有服务器上的日志收集汇总。常见解决思路是建立集中式日志...

2018-06-01 12:38:09

阅读数:390

评论数:0

date详解,date操作的案例,转载:https://www.cnblogs.com/kimbo/p/7102203.html

格式:date [选项] … [+格式] 选项说明:-d ,–date=字符串   显示指定字符串所描述的时间 案例1: #!/bin/bash ##1. 获取当前系统时间 YYYY-MM-DD HH:MM:SS v_time_eq=`date "+%F %T...

2018-05-31 19:37:40

阅读数:185

评论数:0

博客园首页新随笔联系管理订阅 Linux下四款Web服务器压力测试工具(http_load、webbench、ab、siege)介绍

https://www.cnblogs.com/shipengzhi/archive/2012/10/09/2716766.html

2018-05-30 10:49:39

阅读数:40

评论数:0

Dubbo之——将Dubbo服务打包成Jar包

服务器:192.168.1.121(mydubbo-server) 一、Dubbo服务的运行方式 1、使用Servlet容器运行(Tomcat、Jetty等)—-不可取 缺点:增加复杂性(端口、管理) tomcat/jetty等占用端口,dubbo服务也需要端口 浪费资源(内存):单...

2018-05-28 09:18:23

阅读数:75

评论数:0

Hive数据类型(转:https://blog.csdn.net/xiaoqi0531/article/details/54667393)

Hive数据类型 本文参考Apache官网,更多内容请参考:https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Types 1. 数值型 1. Integral Types (TINYINT, SMALLIN...

2018-05-24 17:46:07

阅读数:42

评论数:0

MyBatis-Plus之通过插件将数据库表生成Entiry,Mapper.xml,Mapper.class的方式。

1、参考网址:http://mp.baomidou.com/#/generate-code 2、创建maven项目,修改pom.xml文件,如下: <?xml version="1.0" encoding="UTF-8...

2018-05-19 15:38:18

阅读数:60

评论数:0

MyCat-Web安装

1 安装MyCat-Web 1.1.下载和解压MyCat-web http://dl.mycat.io/mycat-web-1.0/ 将Mycat-web-1.0-SNAPSHOT-20170102153329-linux.tar.gz放到/home/bigdata/softwar...

2018-05-19 14:58:56

阅读数:66

评论数:0

MyCat安装,数据导入,以及安装过程中的各种参数配置

1 安装MyCat 安装目标:使用Mycat完成两台mysql分片即两台数据库做集群,通过访问mycat路由实现数据自动分片(根据id分配不同的mysql服务器) 1.1.环境: 操作系统:Centos7 数据库:mysql5.7 Jdk1.8 机器规划: 编号 ...

2018-05-19 14:47:08

阅读数:67

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭