- 博客(12)
- 收藏
- 关注
RSS订阅原创 Apache Kylin 2.5.0安装和使用
Apache Kylin 2.5.0安装和使用1.背景Apache Kylin是一个开源的分布式分析引擎，提供Hadoop之上的SQL查询接口及多维分析（OLAP）能力以支持超大规模数据，最初由eBay Inc. 开发并贡献至开源社区。它能在亚秒内查询巨大的Hive表。Apache Kylin官网：http://kylin.apache.org/Kylin的官网上每个版本的都提供两...
2019-01-07 10:55:01
4466
2
原创 Kylin源码分析系列四—Cube查询
Kylin源码分析系列四—Cube查询注：Kylin源码分析系列基于Kylin的2.5.0版本的源码，其他版本可以类比。一. 简介前面文章介绍了Cube是如何构建的，那构建完成后用户肯定是需要对这些预统计的数据进行相关的查询操作，这篇文章就介绍下Kylin中是怎样通过SQL语句来进行Cube数据的查询的。Kylin中的查询是在web页面上输入sql语句然后提交来执行相关查询，页面上的提...
2019-01-05 16:54:53
3235
1
原创 Kylin源码分析系列三—rowKey编码
Kylin源码分析系列三—rowKey编码注：Kylin源码分析系列基于Kylin的2.5.0版本的源码，其他版本可以类比。1. 相关概念前面介绍了Kylin中Cube构建的流程，但Cube数据具体是以什么样的形式存在，可能还不是特别清晰明了，这篇文章就详细介绍下Cube数据的数据格式，主要就是其rowKey的编码，看下Kylin是怎样来保存各种维度组合下的各种度量的统计值的。这里首先...
2019-01-05 16:48:49
3251
原创 Kylin源码分析系列二—Cube构建
Kylin源码分析系列二—Cube构建注：Kylin源码分析系列基于Kylin的2.5.0版本的源码，其他版本可以类比。1.构建流程前面一篇文章介绍了Kylin中的任务调度服务，本篇文章正式介绍Kylin的核心内容Cube，主要讲述Cube构建的过程。下面的构建过程选择使用spark构建引擎来说明（MR引擎自行类比阅读相关源码）。首先介绍下Cube构建的整体流程，看下kylin w...
2019-01-05 16:44:31
2705
2
转载 Kylin源码分析系列一—任务调度
Kylin源码分析系列一—任务调度注：Kylin源码分析系列基于Kylin的2.5.0版本的源码，其他版本可以类比。一. 相关介绍 Kylin在Web上触发Cube的相关操作后并不是马上执行相关的操作，而是将构建的任务提交到任务调度服务，任务调度服务每隔一段时间会将提交了未执行的job进行调度执行，默认是30s调度一次，可根据配置项kylin.job.scheduler.p...
2019-01-05 16:19:39
2263
原创 ubuntu搭建本地源
ubuntu搭建本地源1.下载相关的deb包#apt-get install package.deb2.搭建本地源将下载好的所有的deb包拷贝到同一个文件夹，如（/opt/debpackage/），然后进入目录/opt/，执行命令生成Packages.gz文件。#cd /opt#dpkg-scanpackages debpackage/ /dev/null |gzip >
2015-11-25 17:42:00
1247
原创 Ubuntu14.04下定制Ubuntu的ISO镜像
Ubuntu14.04下定制Ubuntu的ISO镜像1. Ubuntu的ISO镜像的安装过程1. BIOS加电自检2. 运行isolinux目录下面的isolinux.bin文件，这个isolinux.bin文件根据isolinux.cfg文件的选项来加载内核vmlinuz和initrd.img文件，initrd.img文件会在内存中生成一个虚拟的 linux操作系统，为安
2015-11-25 14:10:03
4627
原创 安装Ceph RadosGW
安装Ceph RadosGW一.安装配置Apache#sudo apt-get install apache2 libapache2-mod-fastcgi配置/etc/apache2/apache2.conf添加：ServerName {hostname} 加载rewrite和fastcgi模块#sudo a2enmod rewrite#sudo a2enmod fas
2015-11-25 10:19:10
2159
原创 基于Net-SNMP的Agent的开发和使用
基于Net-SNMP的Agent的开发和使用 一．背景技术及术语解释Net-SNMP是一个免费的、开放源码的SNMP实现，其中包含了一个Agent模块，通过这个模块可以获取到服务器的相关信息；在源码中实现了对服务器部分信息的获取，我们同样可以通过扩展mib库文件来实现获取我们需要的服务器的信息和管理服务器。二．方案详细描述1. Agent扩展方法简介1.1添加自定义mib文件
2015-11-25 10:05:12
2689
原创 Windows下Agent开发简介
Windows下AGENT开发 1. 添加mib树1. 在windows下安装net-snmp。2．将Mib Builder生成的HIKVISION-MIB.my文件重命名为txt文件，拷贝到net-snmp安装目录/share/mibs目录下。3．编辑/usr/local/share/snmp/snmp.conf， 加入一行： mibs+HIK
2015-11-25 09:55:08
1701
原创 Linux下基于net-snmp的Agent扩展开发
Linux下基于net-snmp的Agent扩展开发 一．背景技术及术语解释Net-SNMP是一个免费的、开放源码的SNMP实现，其中包含了一个Agent模块，通过这个模块可以获取到服务器的相关信息；在源码中实现了对服务器部分信息的获取，我们同样可以通过扩展mib库文件来实现获取我们需要的服务器的信息和管理服务器，并可以在其中添加一个通信模块来获取服务器上一些服务的信息。二．方案详细描
2015-11-24 20:11:16
1916
原创 基于PXE+Pressed方式的Ubuntu14.04网络安装
基于PXE+Pressed方式的Ubuntu14.04网络安装1. PXE简介 PXE是由Intel公司开发的最新技术,工作于Client/Server的网络模式，支持工作站通过网络从远端服务器下载映像，并由此支持来自网络的操作系统的启动过程，其启动过程中，终端要求服务器分配IP地址，再用TFTP（trivial file transferprotocol）或MTFTP(m
2015-11-24 19:33:00
1791
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人