大数据-陈礼佳-CSDN博客

原创 Hbase technology explanation

Directory1 Introduce2 Schema Design2.1 General Concepts2.2 Size Limit2.3 Row Key Design2.3.1 Reverse Domain Names2.3.2 Hashing2.3.3 Timestamps2.3.4 Combines Row Key2.4 Architecture Components2.4.1 Client2.4.2 Zookeeper2.4.3 HMaster2.4.4 HRegionServer2.4.5

2022-03-22 20:48:10 15132

原创 CDH 6.3.2 集群搭建

CDH 6.3.2部署搭建

2022-03-09 15:18:57 13933

原创 Kafka technology explanation

DirectoryKafka OverviewKafka ProducerKafka ConsumerOffset ManagementKafka Group CoordinatorKafka Group LeaderKafka OverviewApache Kafka is an open-source distributed event streaming platform.A Kafka cluster consists of one or more brokers. A Kafka broke

2022-02-22 16:40:29 13773

原创 flink-1.14.3 集群部署

1 资源准备4台服务器：1个master、3个workerjdk环境flink二进制包：flink-1.14.3-bin-scala_2.11.tgz2 基础环境准备2.1 jdk安装2.1 ssh免密ssh-keygen -t rsa一路按回车即可cd ~/.sshcp id_rsa.pub authorized_keysssh-copy-id yq-ai-001ssh-copy-id yq-ai-002ssh-copy-id yq-ai-003ssh-copy-id yq-a

2022-02-16 15:07:59 14276 1

原创 ES7.13.4服务部署

1 环境准备1.1 创建用户以及授权groupadd esuseradd -g es espasswd eschown -R es:es es1.2 内存权限修改查看结果：sysctl -a|grep vm.max_map_count临时修改：sysctl -w vm.max_map_count=655360永久修改：vim /etc/sysctl.conf加一行vm.max_map_count=6553601.3 系统限制修改/etc/security/limits.co

2021-12-07 19:54:18 13141

原创 DataX部署及使用

DataX部署及使用

2021-10-08 20:33:21 13081

原创 flink-1.12.0消费kafka写入clickhouse-20.8.20.1

方案一 DataStream方式写入clickhouse方法主入口public class DataClean { public static void main(String[] args) throws Exception { StreamExecutionEnvironment bsEnv = StreamExecutionEnvironment.getExecutionEnvironment(); Properties properties = new P

2021-09-11 15:22:59 13098

原创 clickhouse-20.8.20.1 部署及创建库表

基础架构多主架构：大多数分布式系统如 HDFS、Spark、HBase 和 Elasticsearch，采用的都是 Master-Slave 主从架构，由一个管控节点作为 Leader，其它节点为 Slave。而 CH 则采用 Multi-Master 多主架构，集群中的每个节点角色相同，客户端访问任意一个节点都能得到同样的效果。这种架构因角色相同使系统架构变得更加简单，不用再区分主控节点、数据节点和计算节点，集群中的所有节点功能相同，所以就不存在单点故障问题了。ClickHouse 既可以单机运行，

2021-09-01 17:44:29 13077

原创 druid-0.21.1 搭建及使用基于CDH6.3.2

官网下载最新版包官网说明：https://druid.apache.org/docs/latest/tutorials/cluster.html准备3台服务器。master、data、query各一台安装包目录结构：修改common配置文件vim conf/druid/cluster/_common/common.runtime.propertiesdruid.extensions.loadList=["druid-hdfs-storage", "druid-kafka-indexing-s

2021-08-20 17:21:06 13003

原创 kylin-3.1.2 搭建及使用基于CDH6.3.2

下载kylinwget https://mirrors.tuna.tsinghua.edu.cn/apache/kylin/apache-kylin-3.1.2/apache-kylin-3.1.2-bin-cdh60.tar.gz并解压到 /kylin目录部署bin/set-java-home.sh 可以修改java-home参考 https://blog.51cto.com/flyfish225/2561269

2021-08-18 20:39:27 13070

原创 OLTP和OLAP基础分析

OLTP和OLAP基础概念欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入欢迎使用Markdown编辑器你好！这是你第一次使用 Markdown编辑器所展示的欢迎页。如果你想学习如何使用

2021-08-18 19:11:29 9217

最小生成树

数据结构图部分最小生成树，很详细，很到位，很好。

2012-12-27

迷宫问题求解

1、问题描述：（需求分析和背景意义）以一个m×n的长方阵表示迷宫,0和1分别表示迷宫中的道路和障碍.设计一个程序,对任意设定的迷宫,求出一条从入口到出口的通路,或得出没有通路的结论. 2、基本要求：（设计阶段，概要设计和详细设计）首先实现一个以链表做存储结构的栈类型,然后编写一个求解迷宫的非递归程序.求得的通路以三元组(i,j,d)的形式输出,其中:(i,j)指示迷宫中的一个坐标,d表示走到下一坐标的方向.如:对于下列数据的迷宫,输出的一条通路为(1,1,1),(1,1,2),(2,2,2),(3,2,3),(3,1,2),….

2012-12-13

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人