基础架构
文章平均质量分 90
willyan2007
这个作者很懒,什么都没留下…
展开
-
ApacheKylin-3.1.0-Windows本地开发环境测试
排查yarn详细日志yarn logs -applicationId application_1590551653017_0033准备数据准备hive表Load hive table 操作创建Model和CubeCube Build构建Build操作问题列表基于MR Build Cube六大步骤,第一个大步骤“Create Intermediate Flat Hive Table”时就报错了。第一个问题bash: hive: comman.原创 2021-05-17 17:54:51 · 380 阅读 · 1 评论 -
ApacheKylin-3.1.0-Windows本地开发环境搭建
官网地址搭建开发环境http://kylin.apache.org/cn/development/dev_env.html准备源码下载Kylin源码上到github官网,找到kylin-3.1.0的源码,下载。导入eclipse新建立好eclipse的workspace,再以导入maven工程的方式,将源码导入进来。初始导入时,eclipse Package Explorer目录下会有很多异常。异常修改方案一:修改父工程pom...原创 2021-05-17 17:01:38 · 637 阅读 · 2 评论 -
Apache Kylin IDEA远程调试
前言咱们通用的IDE工具是eclipse,eclipse远程连接tomcat实现本地代码调试也是比较常见,但KYLIN的部署与一般JAVA WEB服务部署存在较大差异,eclipse远程连接KYLIN没有成功,暂时用IDEA连接远程KYLIN实现本地代码DEBUG调试的目的。前提条件1.远程服务器上的KYLIN已经安装成功,随时可以启动。见下图,可以查看远程KYLIN服务。2.本地安装IntelliJ IDEA工具,并引入了KYLIN的源码。用idea引入maven工程.原创 2021-05-17 16:14:19 · 308 阅读 · 0 评论 -
Apache Kylin-3.0.1-安装启动
版本Apache独立版本,kylin-3.0.1,下载包apache-kylin-3.0.1-bin-hadoop3.tar.gz安装准备如下部分要预先对配置进行修改、或者准备好spark等部件,因为Kylin启动依赖的部件较多,最好预先准备,否则在启动时,会陆续报错。修改Hbase的“hbase”脚本cd $HBASE_HOME/binvim hbase在CLASSPATH=${CLASSPATH}:$JAVA_HOME/lib/tools.jar后面添加:/$HBASE_HO原创 2021-05-17 16:05:42 · 880 阅读 · 1 评论 -
Presto340 Connector 配置手册
前提条件Presto340版本需要安装在jdk11的环境下,请预先进行安装。原创 2021-05-13 17:47:44 · 278 阅读 · 0 评论 -
Jenkins Blueocean 版本安装与配置
为什么要安装 Jenkins 海洋版 ?普通的 Jenkins 在部署的时候,插件下不下来,但是在海洋版没有这个问题; blueocean 的页面更加人性化,流程的监控上看着让人舒服。拉镜像docker pull jenkinsci/blueocean创建自定义的jenkinsci/blueocean镜像,以便后续自定义JDK、Maven等工具。dockerfile_blueocean文件内容启动镜像注意:“\”后不要用空格,也可以不加--rm..原创 2021-05-13 16:16:54 · 2802 阅读 · 0 评论 -
Docker 搭建 Harbor 仓库
搭建 harbor 仓库docker 官方提供的私有仓库 registry,用起来虽然简单 ,但在管理的功能上存在不足。Harbor是一个用于存储和分发Docker镜像的企业级Registry服务器,harbor使用的是官方的docker registry(v2命名是distribution)服务去完成。harbor在docker distribution的基础上增加了一些安全、访问控制、管理的功能以满足企业对于镜像仓库的需求。接下来,咱们安装harbor。安装docker-compose.原创 2021-05-13 15:51:27 · 1127 阅读 · 1 评论 -
Docker入门
Docker概述Docker是什么? 为什么会出现Docker? 跟openstack、vmware workstation有啥区别?问题一Docker 是一个开源的应用容器引擎,让开发者可以打包他们的应用以及依赖包到一个可移植的容器中,然后发布到任何流行的Linux机器或Windows 机器上,也可以实现虚拟化,容器是完全使用沙箱机制,相互之间不会有任何接口。虚拟化应用与依赖包隔离机制问题二传统开发模式:多个环境开发、测试、生成环境流程...原创 2021-02-07 14:21:13 · 204 阅读 · 0 评论 -
Confluent完全分布式框架搭建
服务、端口说明 kafka zookeeper control-center schema-registry kafka-reset connector ksql-server 192.168.1.34 kafka...原创 2019-08-01 09:49:04 · 4547 阅读 · 0 评论