星小丫头辰

过往不乱,当下不杂,未来可期

Java常用方法--集

活这么长时间,突然间意识到这个世界上最笨的方法便是我的捷径! 看到电脑上丁一给我的背景图——Wuli乔妹,笑起来很美丽,就像我们丁一一样善良、热心肠 世界上有许多想离开的时刻,但是因为那些人、那些记忆,你留了下来、没有离开 进入主题:写这篇是有原因的,我不说你不知道,还是进入主题吧 S...

2019-05-09 22:59:53

阅读数 32

评论数 0

今日份检讨

现在时间北京2019-05-09 04点36分 因为鄙人原因,公司众同事还未下班,感到深深地自责 这在今后不免成为笑柄,无奈我一个女孩子家家,他们拿我也没有办法 虽然我不怎么认为,但是很庆幸他们在这件事上将这么认为,本来这是一个没有颜面的事情,现在反而有一种幸运的侥幸 还是对同事们很抱歉,...

2019-05-09 04:43:57

阅读数 52

评论数 2

hive初识

联机分析OLAP https://www.cnblogs.com/qingyunzong/p/8707885.html系列博客 Hive将HQL转换成MapReduce执行,实质是基于HDFS的MapReduce计算框架,对存储在HDFS的数据分析管理 优点: 可自由扩展集群规模,...

2019-03-28 22:25:25

阅读数 74

评论数 1

canal详解

EventParser WorkFlow EventStore负责存储解析后的Binlog事件,而解析动作负责拉取Binlog,它的流程比较复杂。需要和MetaManager进行交互。 比如要记录每次拉取的Position,这样下一次就可以从上一次的最后一个位置继续拉取。所以MetaManage...

2019-03-28 21:06:22

阅读数 37

评论数 1

Hive-百度百科

hive基于Hadoop的一个数据仓库工具,将结构化的数据文件映射为一张数据库表,提供简单的sql查询功能,将sql语句转换为MapReduce任务进行运行,可通过类SQL语句HQL快速实现简单的MapReduce统计,十分适合数据仓库的统计分析; Hadoop 通常都有较高的延迟并且在作...

2019-03-28 21:03:52

阅读数 48

评论数 2

kafka入坑

高级消费者 提供消费消息的方法而屏蔽底层细节;高级消费者在zk特点分区存储最后的偏离(kafka启动时准备完毕),全局kafka集群消费群体,任何老逻辑的消费者应该被关闭然后运行新的代码,当一个新的进程拥有相同的消费者群的名字,kafka新增进程的线程来消费topic且引发“重新平衡”:分配现有...

2019-03-19 22:04:26

阅读数 92

评论数 4

kafka入坑

kafka之前好像写过,如果没写的话便是之前接触过,哈哈 已经用kafka实现了几个小功能,不过还是实实在在领会精华才好;提前说好,这篇当然非原创,各处copy而来,不过也融入了在下的心血,所以厚着脸皮写原创; kafka是消息中间件的一种,用于构建实时数据管道和流应用程序。具有横向扩展,容错...

2019-03-18 19:52:20

阅读数 128

评论数 2

canal详解

CanalServerWithEmbedded 含多个instance,成员变量canalInstances记录了instance名称与实例映射关系 同server不出现相同的instance名称:Map结构 public class CanalServerWithEmbedded ext...

2019-03-09 17:47:37

阅读数 45

评论数 0

canal详解

canal在github上的文档:https://github.com/alibaba/canal/wiki/ClientExample mysql canal伪装成mysql slave,如此“降低”姿态,mysql当然要做出些表示:那便是开启binlog支持 [mysqld] log-...

2019-03-09 16:46:45

阅读数 33

评论数 0

canal基于数据库的日志解析

阿里巴巴mysql数据库binlog的增量订阅&消费组件 背景: 早期,阿里巴巴B2B公司因为存在杭州和美国双机房部署,存在跨机房同步的业务需求。不过早期的数据库同步业务,主要是基于trigger的方式获取增量变更,不过从2010年开始,阿里系公司开始逐步的尝试基...

2019-03-07 20:07:16

阅读数 99

评论数 0

ClickHouse 来一篇

是时候来见证一下真正的面向列的DBMS了!!! 真正的DBMS没有任何垃圾值,数据紧凑存储(无需存数值长度):定长数值 clickhouse容许在运行时可建表建库,加载数据进行查询,不需要重新配置 重启服务器 快:不是一般的飞快 支持事务,无隔离级别:ACID是没戏了,so数据可能...

2019-03-03 10:30:46

阅读数 79

评论数 0

Guns和iView简单介绍

    Guns基于SpringBoot 2,致力于做更简洁的后台管理系统。Guns项目代码简洁,注释丰富,上手容易,同时Guns包含许多基础模块(用户管理,角色管理,部门管理,字典管理等10个模块),可以直接作为一个后台管理系统的脚手架!  Guns官方交流群:254550081(满) 6...

2019-02-25 22:17:43

阅读数 79

评论数 4

ES与spring boot集成 杂烩

主要是摘抄其他博客,汇成此篇,主要是担心自己忘了 做些笔记和链接 首先推荐《ElasticsearchTemplate的详细使用,完成多条件查询、匹配度查询等》写的很好,图看不到的请点击查看 https://blog.csdn.net/tianyaleixiaowu/article/detai...

2019-02-12 16:31:13

阅读数 147

评论数 4

OkHttp和RxJava 2.x

OkHttp高效的请求效率,且节省宽带, 提供了很多开箱即用的网络疑难杂症解决方案 支持HTTP/2, HTTP/2通过使用多路复用技术在一个单独的TCP连接上支持并发, 通过在一个连接上一次性发送多个请求来发送或接收数据 如果HTTP/2不可用, 连接池减少请求延迟 支持GZIP, 可以压...

2019-01-29 15:46:04

阅读数 82

评论数 3

OKio与Retrofit

OKio     轻量级IO框架,结合java.io和java.nio,提供阻塞IO和非阻塞IO的功能,对缓存等底层结构做了优化,核心的代码大约5000行        最基本的接口Sink、Source,基础IO操作, BufferedSink和BufferedSource接口分别继承自...

2019-01-29 11:52:47

阅读数 72

评论数 1

大杂烩

Resource+Autowired     Autowired按byType自动注入     Resource按byName,name解析为beanName         同时指定name和type,找到唯一匹配的bean装配         都无指定,byName装配,无、回退为一原始类型匹...

2019-01-27 11:31:17

阅读数 107

评论数 1

clickhouse之bit hash

bit   位函数可用于UInt8、UInt16、UInt32、UInt64、Int8、Int16、Int32、Int64、Float32或Float64中的任何类型对   结果类型是一个整数,其位等于其参数的最大位。如果至少有一个参数是有符号的,那么结果就是一个有符号的数字。如果参数是浮点数...

2019-01-24 15:41:55

阅读数 94

评论数 2

clickhouse之函数(二)数组

array arrayElement(arr, n), operator arr[n]     从array中获取索引为n的元素,索引从1开始,支持负数,-1指最后一位;索引超过大小返回类型的默认值 has(arr, elem)     arr中是否有elem元素,0无1有 hasAll...

2019-01-24 15:32:19

阅读数 349

评论数 1

clickhouse之函数(一·)

时间与日期 SELECT toDateTime('2016-06-15 23:00:00') AS time, toDate(time) AS date_local, toDate(time, 'Asia/Yekaterinburg') AS date_yekat, ...

2019-01-24 12:26:57

阅读数 310

评论数 12

clickhouse之前提查询

attach 类create,but 不在硬盘上创建表,假设表已经存在只是向服务添加表的说明,执行之后,服务将知道表的存在 ATTACH TABLE [IF NOT EXISTS] [db.]name [ON CLUSTER cluster] 在启动服务器时使用,服务器将表元数据视为文件保...

2019-01-23 20:20:58

阅读数 431

评论数 3

提示
确定要删除当前文章?
取消 删除
关闭
关闭