zjx_z-CSDN博客

原创国庆出游计划

时间安排时间计划：09/29-10/05住宿安排入住成都（29号，1号，2号）入住重庆（3号，4号）行程安排9月29日：A. 早上6.30出门，赶往机场，预留足够安检登机时间。B. 江北机场T2航站楼站，乘坐轨道交通10号线,经过7站, 到达重庆北站北广场站C. 在北广场乘坐高铁、动车到达成都东站D. 成都东站乘坐地铁前往市区,晚上入住轩雅映月酒店晚上逛一逛宽窄巷子,春熙路等景点。最好清淡饮食，不影响次日跟团游。9月30日...

2021-09-10 16:57:16 315

原创 my.cnf

[client]default-character-set=utf8port = 3306socket = /tmp/mysql.sock[mysqld]port = 3306character-set-server=utf8socket = /tmp/mysql.sockbasedir = /opt/mysql/mysql5.7datadir = /opt/mysql/mysql5.7/datauser = mysql

2021-07-02 13:58:40 110

原创 impala时区设置

impala不会读取服务器本地时区，所以时间类型的字段会有时区不一致的问题。cdh需要添加配置，或者查询的时候增加8个小时（比较麻烦），配置如下:-use_local_tz_for_unix_timestamp_conversions=true-convert_legacy_hive_parquet_utc_timestamps=true重启，解决问题！...

2020-11-30 11:29:14 1195

原创 impala之JDBC编程

Impala提供JDBC接口，可以通过JDBC编程查询首先得知道：impala是支持hive的JDBC驱动！只需要修改端口号，再加上一个认证就可以。 private static final String CONNECTION_URL = "jdbc:hive2://" + IMPALAD_HOST + ':' + IMPALAD_JDBC_PORT + "/;auth=noSasl";...

2020-10-29 14:19:32 4803

原创 phoenix常见问题总结

最近整合项目的时候遇到一些问题，记录并分享一下：首先，保证phoenix和hbase版本match，并保存client jar用来项目远程jdbc连接。问题1：连接池的问题phoenix不需要连接池，原因：1.hbase连接的代价很小。2.hbase的连接不能共享。但是为了项目的美观，我还是配置了阿里的druid连接池去管理。问题2：项目集成问题刚开始我没有集成spring，只是简单的maven项目通过jdbc的方式连接phoenix，进行增删改查没有遇到问题。当我集成sprin

2020-09-29 10:23:04 1383

原创 storm相关注意点

1.storm集群安装：只需要修改conf文件，添加相关配置，注意配置格式要正确。zookeeper默认端口2181。2.集群启动因为storm没有关闭命令，需要杀死相关进程，所以编写相应脚本实现控制。首先在conf下新建工作节点文件supervisors，脚本文件读取并执行3.start-storm.sh#!/bin/bashsource /etc/profileSTORM_HOME=/opt/storm/storm_1.2.2$STORM_HOME.

2020-09-11 13:54:55 223

原创 clickhouse卸载重装

1. 卸载及删除安装文件yum list installed | grep clickhouse yum remove -y clickhouse-common-static yum remove -y clickhouse-server-common rm -rf /var/lib/clickhouse rm -rf /etc/clickhouse-* rm -rf /var/lo...

2020-07-14 11:54:46 5872 4

转载没人比我更懂系列之--HashMap底层原理及相关问题

HashMap的设计map(k,v)这样的结构设计，对于很多存储逻辑异常适用。简单来说，就是数组+链表/红黑树（jdk1.8）。HashMap如何确定存储位置？对于HashMap来说，首先要做的是对将要存储的key进行hash。调用自带的hashcode（）方法，获得一个32位的二进制数据hashcode值。能否直接创造一个数组，存下所有可能的hashcode值？答案是不可能，没有那么大的内存去存储，所以需要对hashcode值进一步变化，假定数组长度位n，首先将32位的hashcode值的

2020-05-13 14:37:00 348

原创 azkaban已编译版，解压即用

解压zip包后，需要注意的一点就是启动命令的位置：bin/azkaban-web-start.sh(务必要在azkaban-web-server目录下启动)bin/azkaban-web-start.sh务必要在azkaban-Executor-server目录下启动外部网站端口：8081工具下载：点击下载...

2018-07-24 11:55:53 1356 1