fangqingchen的博客

原创 kylin1.6.0_CDH5.7.6流式建模

#cd /opt/cloudera/parcels/KAFKA/bin#./kafka-topics  --create --zookeeper hadoop.master:2181 --replication-factor 1 --partitions 1 --topic kylin_demo --建立topic#./kafka-topics --list --zookeeper hadoop....

原创 kylin2.1.0_CDH5.9.3实现streaming CUBE

cloudera manage官方文档说明了CDH集成kafka的版本Product Compatibility Matrix for CDK Powered By Apache KafkaCDK Powered By Apache Kafka is currently distributed as a package and in a parcel that is independent of ...

原创 kylin1.6.0_CDH5.7.6本地虚机配置调整

安装kylin1.6.0后，本地构建cube需要调整如下配置： 修改yarn配置（笔记本虚拟机环境）通过CM进行修改 mapreduce.task.io.sort.mb = 32m yarn.app.mapreduce.am.resource.mb=256m ApplicationMaster Java 最大堆栈 =256m mapreduce.map.memory.mb=256m mapredu...

原创 kylin1.6.0_CDH5.7.6本地虚机单机版安装记录

安装准备：Lenovo X1 Carbon 笔记本（i7八代、8g内存、256g存储）WIN10 64 位操作系统专业版Navicat 11.1.6（64-bit）VMware® Workstation  版本 10.0.1 build-1379776下载CentOS7.1操作系统 下载地址：http://mirror.nsc.liu.se/centos-store/7.1.1503/isos/x...

转载 使用Kylin构建企业大数据分析平台的4种部署方式

本篇博客重点介绍如何使用Kylin来构建大数据分析平台。根据官网介绍，其实部署Kylin非常简单，称为非侵入式安装，也就是不需要去修改已有的Hadoop大数据平台。你只需要根据的环境下载适合的Kylin安装包，选择一个Hadoop节点部署即可，Kylin使用标准的Hadoop API跟各个组件进行通信，不需要对现有的Hadoop安装额外的Agent。      Kylin部署的架构是一个分层的结构...

原创 ZkClient和Curator的基本使用方法

原创 zookeeper学习笔记