- 博客(12)
- 资源 (5)
- 收藏
- 关注
RSS订阅原创 清理maven仓库中的lastUpdated文件
@echo offremset REPOSITORY_PATH=E:\repositoryremfor /f “delims=” %%i in (‘dir /b /s “%REPOSITORY_PATH%*lastUpdated*”’) do (del /s /q %%i)rempause
2020-06-22 22:00:50
699
原创 hive中常见的关于日期的函数 （整理）
hive中常见的关于日期的函数unix_timestamp:返回当前或指定时间的时间戳 from_unixtime：将时间戳转为日期格式current_date：当前日期current_timestamp：当前的日期加时间to_date：抽取日期部分year：获取年month：获取月day：获取日hour：获取时minute：获取分second：获取秒weekofyear：当前时间是一年中的第几周dayofmonth：当前时间是一个月中的第几天months_between： 两个
2020-06-18 14:54:06
3828
原创 java.lang.ClassNotFoundException: org.apache.flink.api.common.typeinfo.TypeInformation
参考链接问题解决办法在idea中勾选一个选项原因编译部署的时候没有将依赖全部导入，因为本人用的是快速原型导入的maven，里面scope好多是provided的，这样导致依赖在编译的时候无法全部加载，生产环境的话如果已经装好了环境，那么这个在生产上跑是没问题的，但是调试的时候需要将这个勾选，否则会报错！...
2020-06-08 13:05:42
6887
原创 scala中样例类与JSON字符串之间转换思路
样例类 ->JSON字符串采用JSON4S来转换！核心伪代码import org.json4s.DefaultFormatsimport org.json4s.jackson.Serialization val content = Serialization.write(value)(DefaultFormats)JSON->样例类采用阿里的fastjson来处理！import com.alibaba.fastjson.JSON//OrderDetail为样例类val o
2020-06-06 00:27:17
1147
原创 用scala向es写数据
package com.zhengkw.gmall.realtime.utilimport io.searchbox.client.JestClientFactoryimport io.searchbox.client.config.HttpClientConfigimport io.searchbox.core.Index/** * @ClassName:ESUtil * @author: zhengkw * @description: * @date: 20/06/03下午 2:30
2020-06-04 22:37:27
935
原创 ES- Set fielddata=true on [actorList.name] in order to load fielddata in memory by......
GET movie_index/_search{ "aggs": { "b": { "terms": { "field": "actorList.name", "size": 10 } , "aggs": { "sum": { "sum": { "field": "doubanScore" } } } } }
2020-06-04 20:56:29
3543
原创 解决vim从外部复制脚本内容时全注释问题
前言很多人应该有过这样的体会，在windows上写好了shell脚本，然后在linux上创建一个空白文件，将内容复制，结果全是被注释！原因推测是 脚本shebang行（#!/bin/bash）开头有个#，所以复制过来以后的内容都会加入#！而在脚本中#代表注释！解决办法在vim 进入编辑模式！:set paste...
2020-06-03 01:47:40
2842
原创 Elasticsearch (ES)+Kibana简单使用
前言es是一个强大的搜索引擎，目前知名公司内部都在使用！因为Elasticsearch 是一个基于 Apache Lucene™ 的开源搜索引擎。无论在开源还是专有领域，Lucene 可以被认为是迄今为止最先进、性能最好的、功能最全的搜索引擎库。首先我们要知道，es虽然强大，但是不方便操作，所以我们需要借助于kibana工具来进行开发！kibana本篇不讲kibana和es的安装，后面会专门写安装过程。这里先知道kibana工具是提供了一个可视化的界面。我们的es需要以基于 HTTP 协议，以
2020-06-03 00:05:23
10743
原创 脚本中使用ssh命令执行远程命令注意事项
shell命令中的空格问题(用ssh执行)①如果shell命令中有空格，可以使用单引号或双引号引起来②单引号不会识别特殊符号，而双引号会识别特殊符号，而双引号会识别特殊符号，而双引号会识别符号，将$解析为变量的引用③最外层是双引号，内嵌单引号，$等特殊符号依旧可以识别④最外层是单引号，内嵌双引号，$等特殊符号无法识别` 反引号，将反引号中的内容作为linux命令执行，赋值给一个变量！等价于$()...
2020-06-02 23:38:12
882
2
转载 pkillp与grep等使用简单介绍
常规篇：首先，用ps查看进程，方法如下：$ ps -ef……``smx 1822 1 0 11:38 ? 00:00:49 gnome-terminal``smx 1823 1822 0 11:38 ? 00:00:00 gnome-pty-helper``smx 1824 1822 0 11:38 pts/0 00:00:02 bash``smx 1827 1 4 11:38 ? 00:26:28 /usr/lib/firefox-3.6.18/firefox-bin``smx 1857 1822
2020-06-02 23:28:27
424
转载 alibaba-canal数据对象格式简介
阿里github示例Entry Header logfileName [binlog文件名] logfileOffset [binlog position] executeTime [binlog里记录变更发生的时间戳,精确到秒] schemaName tableName eventType [insert/update/delete类型] entryType
2020-06-01 00:49:44
1902
dbeaver-ce-7.1.0-x86_64-setup.rar
2020-06-01
typora-setup-x64-0.9.86.rar
2020-05-26
Git-2.26.0-64-bit-windows.rar
2020-04-16
dbeaver-ce-7.0.2-x86_64-setup.exe+hive驱动
2020-04-16
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人