漫天沙尘-CSDN博客

原创 olap之saiku踩坑之旅

一、安装下载saiku社区版 https://community.meteorite.bi/，当前版本为saiku3.90解压后执行start-saiku.sh即可启动下载证书后，访问http://localhost:8080/upload.html，将证书上传访问http://localhost:8080/ ，用户名：admin，密码：admin二、遇到的坑使用saiku3.9的...

2018-11-21 15:12:26 1990 2

原创 hive导入数据到hbase

背景hive有一张表user_tag_detail，表中数据约1.3亿，需要将改表数据导入到hbase 尝试了两种方式 - 1、新建hive表hbase_user_tag_detail，关联hbase表user_tag_detail，将user_tag_detail数据导入hbase_user_tag_detail - 2、生成hfile，使用HBaseBulkLoad导入官网文档 ...

2018-08-29 17:47:54 8135

原创 azkaban本地调试过程

概述团队使用azkaban过程中反馈在任务执行过程中，存在日志加载慢的问题，所以下载源代码进行本地调试。主要调试的是azkaban-web-server这个项目。azkaban使用gradle构建项目，使用jetty作为web容器，使用velocity作为模板引擎渲染前端页面。azkaban-web-server本地调试过程github下载azkaban源代码idea 打开...

2018-08-21 11:34:37 1914 2

原创 sql血缘关系解析

sqlcreate table default.target_table LOCATION '/data/location' as select a,b,d,e,f,g from log.source_table生成的ast树(TOK_CREATETABLE (TOK_TABNAME default target_table) TOK_LIKETABLE (TOK_TABL...

2018-08-21 11:34:10 11297 5

原创分布式锁（zookeeper）与接口幂等性实现

背景随着数据量的增大，用户的增多，系统的并发访问越来越大，传统的单机已经满足不了需求，分布式系统成为一种必然的趋势。分布式系统错综复杂，今天，我们着重对分布式系统的互斥性与幂等性进行分析与解决。互斥性互斥性问题也就是共享资源的抢占问题。如何解决呢？也就是锁，保证对共享资源的串行化访问。互斥性要如何实现？。在java中，最常用的是synchronized和lock这两种内置的锁，但这...

2018-03-28 16:49:00 2314

原创爱奇艺qsv格式转mp4

需要工具 qsv格式转换mp4其实是把qsv转换成flv格式下载优酷，可以进行视频转码，将flv转换成mp4或其它需要的格式若需要切割视频，下载视频分割专家，视频分割专家分割的视频格式为avi，需要先用优酷将视频转码为avi，再进行切割

2017-03-22 11:37:16 1098

原创 jetson tx1使用记录

配置硬件配置GPIO、I2C、I2S、SPI、带流控制的TTL UART等接口，摄像头扩展头，PCIe x4接口，USB 2.0 Client/Host接口软件配置操作系统操作系统为 Ubuntu 16.04.1 LTS开发环境搭建（1）登录一台运行Ubuntu 14.04 Linux 64-bit 系统的电脑（2）通过usb连接jeson tx1 （3）在 https:/

2017-03-22 10:24:22 2346

原创将c++代码编成动态库在android中使用

新建类，声明需要用到的native方法 public class FaceDetect { public static native boolean nativeFaceDetect(String imaPath,String cascadeName); }点击Build->Make Project,生成类的FaceDetect.class文件打开控制台,进入FaceDetect.clas

2017-03-21 14:05:51 557

原创在android上使用easyPR+caffe进行车牌检测与识别

概述本文介绍如何在anroid平台上进行车牌的检测与识别。检测是利用easyPR做的，主要用到SVM这个机器学习算法，识别是用深度学习做的，用caffe训练字符的识别模型，然后跑在anroid平台上。先上最终效果图

2017-03-17 10:18:33 5595 3

原创安卓人脸识别

1、搭建安卓开发环境，SDK下载，密码：6jf7 ，NDK使用r13b。 2、在AS中使用opencv ，使用opencv-android3.0 3、将E:\opencv-android3.0\OpenCV-3.0.0-android-sdk-1\OpenCV-android-sdk\samples中face-detection项目导入到AS中我这里是新建一个项目，将代码复制到

2017-03-17 09:16:04 931 1

原创 opencv for ios （opencv3.2）使用报错

在mac os10.11.6下使用xcode8.2+opencv3.2的时候，导入#import 会报一个错，Parse issue Expected identifyer ，将NO改为 NO_EXPOSURE_COMPENSATOR

2017-02-15 09:48:28 803

qq_28725695的博客