KoHsin_-CSDN博客

原创 SQL语句中IN条件，作为参数传入时，ANY的替换方法

首先环境为pgsql 代码运行地点为报表软件 (如果是其他语言调用的不确定是否通用) 需求：需要根据传递的地点，进行数据库查询，传入的地点可为多个参数思路首先考虑的是以下的这种结构，$'{abc}'是作为占位，将对应的值作为参数传递SELECT areaFROM tableAWHERE area in ($ '{input_area}')根据上面的结构，做出下面的三种写法，参数为：上海,深圳首先直接写死的参数，返回值，肯定正确第二种，经过参数传递，

2022-05-11 18:59:08 1199

原创 Elasticsearch启动后自动退出

自己在练习ES的过程中，会经常关闭虚拟机，经常直接退出ES，所以会遇到各种启动失败的问题每次遇到问题，就去查看log文件，进行排查

2021-06-18 14:06:38 2090

原创 Centos7 启动 Elasticsearch 错误整理

最近在练习es的时候遇到了好多错误，现在把问题记录下来，方便后面回顾总结1、在单台虚拟机上执行启动命令[2021-06-09T13:20:37,655][ERROR][o.e.b.Bootstrap ] [node-1] Exceptionjava.lang.RuntimeException: can not run elasticsearch as root at org.elasticsearch.bootstrap.Bootstrap.initialize

2021-06-09 16:06:40 589

原创 Hive中使用JOIN时自动过滤掉为NULL的数据

最近工作写hive sql的时候发现了一个问题 left join 和 where 搭配时，会出现null值数据丢失的问题研究了一下，发现where写的位置不同也会造成不同的结果下面三个sql语句来来进行一下演示EXPLAIN SELECT a.col1, b.col2FROM tableA aLEFT JOIN tableB b ON a.id = b.idWHERE a.dt = '${bizdate}'AND b.dt = '${bizdate}';.

2021-05-15 17:25:48 3179 3

原创 Flink消费kafka，保存postgresql

一、场景：Flink消费kafka数据，解析json，保存到postgresql数据库二、依赖：如果是在IDEA中写代码，需要在pom文件中添加postgresql依赖，其他的一些依赖自行导入。<dependency> <groupId>org.postgresql</groupId> <artifactId>postgresql</artifactId> <version>42.2.2<

2021-05-06 14:51:55 2005

原创 Kettle 权限问题

Kettle Permission denied1.问题场景：在windows系统中，执行一段转换操作，从MySQL表中将数据抽取到HDFS文件中，使用Parquet output输出文件，进行转换时报以下错Parquet output.0-Cause by.org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.security.AccessControlException):Permission denied:user=kohsin.

2021-03-24 16:56:06 2009 1

原创 dokcer搭建sentry

在Linux系统上，利用docker搭建sentry1、首先从github上克隆sentry项目git clone https://github.com/getsentry/onpremise.git2、进入项目，执行安装shellcd onpremise./install.sh

2020-07-30 17:28:51 550 1

原创 C# 高阶函数的应用~~~~用委托代替new来传递

以.NET Web程序注册全局路由为例，先看以下的代码1、路由Route类，包含一个IHttpHandler的处理请求程序的属性public class Route{ public Route(string url, object defaults, IHttpHandler handler) { this.Url = url; this.RouteHandler = handler; Def

2020-07-15 15:28:04 264 2

原创 Window10 利用Anaconda安装部署Tensorflow

首先安装Anaconda，安装Anaconda会自动帮你安装python，所以可以不用单独安装python然后打开Anaconda Prompt输入anaconda search -t conda tensorflow命令然后往下查找，找到属于自己电脑系统和位数的版本，在这里我的电脑是win10的，所以我选择了合适自己电脑的tensorflow版本选择好版本之后，复制选中前...

2020-04-15 21:21:33 250 1

转载 sql server 中，join，in，exists学习

在sql 中，join /in /exists 都可以用来实现，“查询A表中在（或者不在）B表中的记录”，这种查询，在查询的两个表大小相当的情况下，3种查询方式的执行时间通常是：exists <= in <= join当表中字段允许NULL时，not in 的方式最慢；not exists <= left join <= not inJOIN 和 INsel...

2019-11-05 14:53:44 1201

转载 CentOS6.5系统下RPM包安装MySQL5.6

转自：http://www.linuxidc.com/Linux/2015-04/116003.htm1.查看操作系统相关信息。[root@linuxidc ~]# cat /etc/issue CentOS release 6.5 (Final) Kernel \r on an \m [root@linuxidc ~]# uname -a Linux

2017-12-06 16:47:52 248

转载 windows环境下实现mysql的读写分离和负载均衡

一、前言:首先，自己也是一个小白，为了做这个任务查阅了许多网上的一些资料，在原有的基础上，我将会把步骤写的尽可能的详细，一来：是为了方便像我一样的小白进行学习和交流，少走弯路；二来是方便自己温故而知新。参考文章出处：https://www.2cto.com/database/201609/546048.html(1)、基本的理论知识：首先，要实现mysql的读写分离，可以使用mys

2017-11-22 13:25:39 3104 3

KoHsin_的博客