- 博客(10)
- 收藏
- 关注
RSS订阅原创 Clickhouse快速上手 使用篇
接着clickhouse原理篇，下面来介绍他的具体使用场景，包括数据导入，更新等文章目录1. 数据导入调研计划实施1. cos文件系统集成2. 编码获取2. 数据更新和使用1. 数据导入根据官方介绍,Clickhouse的分布式表数据导入有两种形式，一种是在外部将数据划分好分片，分别并行的加载到各个节点的本地表，这种速度是最快的，同时也不需要分布式引擎处理网络发送各个节点数据；另外一种是直接将数据批量插入分布式表，由分布式表引擎处理数据到各节点的写入，需要节点间的网络通信，速度稍慢，但是在实际观察中，
2021-04-04 13:56:45
974
原创 Clickhouse快速上手 原理篇
1. 背景公司目前使用Greenplum作为报表实时聚合查询的OLAP数据库，当时主要是其使用门槛相对较低，同时支持事务，能在用户访问时候事务更新数据，使用云厂商的产品，技术支持也不错，但随着报表单表数据量由去年十月份的6G/月到现在的60G/月，尽管我们做了很多优化， 索引 + 列存 + 优化查询 + 分析慢查询执行计划等。。。在查询的时间跨度达到3个月时候，单条查询计算需要超过10s才能返回，在并发场景下，有些需要1min多才能返回，这样严重影响了用户体验，可能用户没有看到结果就切换界面了。同时对于G
2021-04-04 12:00:02
610
原创 Git命令行简单使用小结
最近复习了一下git,总结了一下命令行的基本使用:0. 基本理论a. 基本概念Working Directory: 就是平时存放项目代码的地方Stage(Index): 用于临时存放改动,事实上他只是一个文件,保存即将提交的文件列表信息Repository: 就是安全存放数据的位置,这里边有你所提交的所有版本的数据,其中HEAD指向最新放入仓库的版本b. 一般工作流程1. ...
2019-06-05 01:55:14
319
原创 关于hadoop的配置文件注意事项
配置文件还是要以服务器上为准,Jar包中配置文件在集群运行不会生效在windows上idea中写代码在win本地执行时,resources中的配置文件起效,在集群中不会;证明如下:工程resources配置文件中配置文件为:服务器配置的副本个数为1:运行程序结果:另一个服务器集群上屏蔽了dfs.replication配置结果为:说明即使集...
2019-05-09 00:04:54
249
原创 Hadoop分布式环境搭建(通用型)
hadoop全分布式环境搭建0. 环境介绍CentOS7.4 + hadoop-2.7.6 + jdk1.81. 角色介绍主机0: master ==> NameNode,SecondaryNameNode,ResourceManager主机1-3: slave{1,2,3} ==> DataNode, NodeManager2. 环境准备2.0 主机...
2019-05-07 23:15:27
200
原创 Java中char类型详解
1. 基本定义char类型的值可以表示为十六进制值，其范围从 \u0000 到 \uffff，由两个字节构成。char类型原本用于表示单个字符，但是现在情况有所变化，有些Unicode字符需要一个char值描述，有些需要两个char值描述。2. Unicode与char类型Java设计时采用了16位的Unicode字符集，但是后来 Unicode字符超过了65536个，所以16...
2019-03-20 22:32:37
4214
原创 掌握音频开发基础知识
基本概念几种CODEC介绍实时调度相关缓冲区混音模块ALSA设备代码相关基本概念采样率(Hz) : 每秒去取样本的个数，eg: 48000Hz也就是每秒取样本48000个比特率(bps) :一秒钟传送多少个bit采样位数 : 每个样本占多少个bit,一般都是16bit也就是两个字节编/解码周期 : 多久编/解码一次，对应不同的数据量编解码能...
2019-02-16 15:30:31
1612
原创 Git+VSCode基本使用
前言 由于工作需要，最近简单学习了git，巧合发现了VSCODE编辑器正好集成了git命令，使得本地代码管理变得更加容易。因为最后是在linux下交叉编译，但是我更习惯windows下写代码，这里代码编辑器从使用Source Insight 4.0改为了VScode(主要是方便git代码管理)。下面就来分别介绍git(重点)以及vscode集成git的简单使用示例。git命令行使...
2018-08-01 16:24:48
65232
转载 为知识付费买的四个教训
转自 http://bbs.fishc.com/forum.php?mod=viewthread&tid=9067101618电商大促的第二天，和同事交流购物心得，我说我买了四百多块钱的书。她们面露诧异之情：我一年都没买过四百块钱的书啊!因为很多时候书籍也是同事代收，我才意识到和她们衣服、化妆品的买买买相比这两年有点不对了。或者说我的
2017-07-16 00:33:47
625
原创 linux基本服务之sshd
这段时间在学习linux常用服务，这里将学习内容以及自己的实验心得记录下来,在自己忘记的时候也好复习简介安装服务1 安装方法2 检查3 设置开机启动ssh使用sshd服务配置与管理1 基本参数2 安全调优重要参数3 sshd防暴力破解4 自定义脚本防止暴力破解实验环境： centos 6.7 64bit 1. 简介 SSHD服务 介绍：SSH协议：安全外壳协
2017-07-16 00:06:51
1505
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人