Inceptor JDBC 连接案例程序

Java 连接Inceptor 方法如下 PS:需要提前向工程中导入Inceptor 访问驱动 import java.sql.*; public class JDBCExample { //Hive2 Driver class name private static String ...

2019-01-18 16:57:39

阅读数 27

评论数 1

Linux系统监控命令

工作使用的命令小记,拿去挥霍 监视系统状态命令 —top命令   功能:实时显示系统中各个进程的资源占用状况 —free命令   功能:查看内存和swap分区使用情况   例如:   Sarge:~# free -tm   total used free shared buffers cache...

2019-01-18 16:42:36

阅读数 18

评论数 0

Kafka+Slipstream实现网站实时点击统计

实验目的 掌握StreamSQL的基本用法。 掌握Slipstream流处理的基本过程。 理解输入流表、衍生流表、结果表和流任务的关系。

2019-01-18 16:35:02

阅读数 18

评论数 0

TDH Inceptor 操作实战案例之 验证ACID

验证Inceptor ACID 原子性,一致性,隔离性   1 创建普通ORC set transaction.type=inceptor; set plsql.compile.dml.check.semantic=false; create database dbname; use db...

2019-01-18 16:17:52

阅读数 36

评论数 0

TDH 常见运维命令(部分)

  通过一条命令来搜集所有节点下regionServer的Exception日志: cat /etc/hosts | grep 172.16 | awk  '{print $1}' | xargs -i ssh {} " grep Exception -R /var/log/...

2019-01-18 11:49:57

阅读数 4630

评论数 0

后台下载 TDH-Client 方法

  在使用 星环 TDH 大数据平台过程中,我们必会用到TDH-Client ,其中集成了很多平台组件的客户端。 该Client 可以通过manager下载,但是比较麻烦,我们也可以通过后台获取Cookies 的方式下载该客户端。 步骤如下: 1 获取TDH Manager 的cookie...

2019-01-18 11:38:32

阅读数 30

评论数 0

基于星环TDH数据仓库典型总和场景数据流转设计

  典型综合场景数据流转设计 综合场景一 T+1数据加工 图 4 T+1方式数据流转   T+1是数据仓库领域最为常见的数据集成模式,T+1模式下数据仓库会在每天固定时间点采集当天或者前一天交易系统数据。 根据数据类型,结构化数据来源一般为RDB,需要将这些数据通过ETL工具全量或...

2018-11-12 18:13:39

阅读数 87

评论数 0

基于用户的推荐算法

算法思想: 给用户推荐和他兴趣相似的其他用户喜欢的物品     用户行为列表   根据用户与用户的相似度 两两计算             将已有物品相关关联的推荐列表 归零。 得到最终的推荐列表    ...

2018-11-12 17:55:41

阅读数 14

评论数 0

星环 sophon 升级详解

Sophon升级详解 1 .Sophon1.2.0-final升级1.3.0final 步骤 1 . 下载Sophon Web配置文件以及镜像:(包含1.2.0和1.2.1版本)     wget ftp://172.16.3.129/pub/sophon-1.3/img/sophon-we...

2018-11-12 17:54:14

阅读数 40

评论数 0

【Apache ZooKeeper】命令行zkCli.sh使用指南

    【Apache ZooKeeper】命令行zkCli.sh使用指南   ZooKeeper命令行   ZooKeeper客户端有C语言和Java两个版本。 ZooKeeper的命令在/usr/lib/zookeeper/bin文件夹下。 运行Java版本的客户端使用bash ...

2018-11-12 17:47:59

阅读数 14

评论数 0

基于内容的推荐算法

  1 基于物品的推荐算法   给用户推荐之前喜欢的物品相似的物品   用户行为信息表 代表 某个用户对某个物品产生 某个行为 用户物品行为关联表   根据基础信息转换数据 形成评分矩阵       根据评分矩阵计算物品与物品的相似度 该图演示了计算物品...

2018-11-12 17:42:03

阅读数 11

评论数 0

R 国内CRAN 镜像仓库

下面列出国内的CRAN镜像,供大家选择: 1、http://mirrors.opencas.cn/cran/ 中国科学院大学(Chinese Academy of Sciences, Beijing) 2、https://mirrors.tuna.tsinghua.edu.cn/CRAN/ 清华...

2018-11-12 17:39:49

阅读数 21

评论数 0

pdsh 安装步骤

  pdsh安装步骤 Skip to end of metadata Created and last modified by wenqi.kang on Oct 19, 2017 Go to start of metadata 0.安装环境 centos6.5 &...

2018-11-12 17:36:21

阅读数 98

评论数 0

Docker + Tomcat + WebApp 应用部署实战

  一、实验信息 Docker ​​​​​​+ Web + Tomcat 应用部署实战   二、实验目的 利用Docker 搭建Tomcat 服务器并部署Web应用 练习Docker 基本命令,体会Docker 的应用场景   三、实验说明 安装Docker (1)Docker C...

2018-11-12 17:32:54

阅读数 48

评论数 0

tar 压缩文件时候忽略一个或者多个文件夹

例如: 我们以tomcat 为例,打包的时候我们要排除 tomcat/logs 目录,命令如下: tar -zcvf tomcat.tar.gz --exclude=tomcat/logs tomcat 如果要排除多个目录,增加 --exclude 即可,如下命令排除logs和libs两个目...

2018-11-12 17:25:33

阅读数 39

评论数 0

星环大数据平台 TDH inceptor 问题排查

一、四点 1.metastore 2.mysql 3.Inceptor server 4.ldap 二、日志收集 1.Inceptor server & metastore 日志 2.Inceptor server & metastore  ...

2018-11-12 17:24:19

阅读数 210

评论数 0

Linux 磁盘操作命令

磁盘操作命令 —df命令   功能:检查文件系统的磁盘空间占用情况。可以利用该命令来获取硬盘被占用了多少空间,目前还剩下多少空间等信息。   参数 功能   -a 列出全部目录   -Ta 列出全部目录,并且显示文件类型   -B 显示块信息   -i 以i节点列出全部目录   -h 按照日常习惯...

2018-10-11 14:59:44

阅读数 12

评论数 0

Scala文件的读取和写入 从控制台输入内容

1 ================== 读取文件 val file = Source.fromFile(Path) file.foreach(print) //迭代输出 for (line  println(line) } 2 =================== 获取网页...

2017-07-27 22:26:50

阅读数 312

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭