- 博客(12)
- 收藏
- 关注
RSS订阅原创 sql错误：Every derived table must have its own alias
sql运行出现错误：Every derived table must have its own aliasselect a,max(strt_req_time) from(select a ,star_time,end_time,jhpt_update_time from logmonitor.gp_interface_call_record_city where a like ‘XQ+_%‘escape’+’)group by a ;
2021-12-09 17:20:44
690
原创 DBeaver中使用presto连接hive
1、首先点击下面：2、出现下面界面选择prestoDB3、按照下面填写内容，之后直接点击完成不要测试则连接成功
2021-11-04 15:42:54
2999
原创 2021-11-01Logstash关于日志清洗记录学习及应用
logstash日志清洗：公司目前给我日志清洗任务，给了我乱七八糟资料之后看的一脸懵，最后决定自己动手整理整理这样有头绪点，记录一下自己学习过程。其中涉及到一些ip内容的我都改为ip，其他保持一致，欢迎大家一起讨论，我也是刚开始学习这个，如有写的不对请多指教。一、学习阶段1、首先理解logstash中各个语法：事件：Logstash 每读取一次数据的行为叫做事件。1）**Input：**输入插件，允许一个特定的事件源可以读取到 Logstash 管道中。支持多种数据源：stdin，file，tc
2021-11-01 15:01:50
1074
原创 将拷贝的Linux数据重新安装到新的虚拟机上
由于电脑系统需要重置，又不想重装linux上所有软件，所有投机取巧的将数据拷贝下来，再安装新的虚拟机之后直接将数据导入进去！安装步骤及遇到的相关问题进行记录。打开新装的虚拟机点击工具栏上的file 之后点击打开选择自己存储数据的虚拟机：如果不知道选择第二个，知道自己移动的具体情况的话选择第一个进入linux界面之后修改vi /etc/sysconfig/network-scripts/ifcfg-ens33 中的地址，改成新的网关地址等之后重启网络服务Service network rest
2021-06-06 20:47:03
238
原创 flink知识点总结（未完待续。。。。）
1、flink编程模型1）抽象数据集DataStream(实时)：使用StreamExecutionEnvironment创建DataStreamDataSet(离线): 使用ExecutionEnvironment创建DataSet2）编程模型Source:从指定的数据源创建最原始的抽象数据集Transformation:对数据集进行转换操作，返回一个新的数据集Sink:将数据输出到指定的存储系统中注意：job中必须有source和sink，Transformation可有可无2、sou
2021-05-21 22:21:43
463
原创 KafkaToKafkaExactlyOnce，记录Kafka读取数据再写到Kafka中并且要保证exactly-once
记录一下：从Kafka读取数据再写到Kafka中并且要保证exactly-once案例public class KafkaToKafkaExactlyOnceDemo { public static void main(String[] args) throws Exception { //创建一个执行环境 StreamExecutionEnvironment env = StreamExecutionEnvironment .createLoca
2021-05-20 23:18:42
144
原创 flink本地模式运行错误Caused by: org.apache.flink.runtime.JobException: Recovery is suppressed by NoRestartB
Flink本地模式运行错误Exception in thread "main"org.apache.flink.runtime.client.JobExecutionException: Job execution failed.Caused by: org.apache.flink.runtime.JobException:Recovery is suppressed by NoRestartBackoffTimeStrategyCaused by:java.net.ConnectExce
2021-05-07 21:06:33
7880
原创 json_tuple函数 的利用
首先在Hive 中查看json_tuple 函数的详细信息desc function extended json_tuple;出现解释：json_tuple(jsonStr, p1, p2, …, pn) - like get_json_object, but it takes multiple names and return a tuple. All the input parameters and output column types are string. |jsonStr
2021-03-17 20:23:50
5717
1
原创 SQL练习题 （学生信息表 教师信息 课程信息等）
– 创建学生信息表CREATE TABLE Student(Sid VARCHAR(10),Sname VARCHAR(10),Sage datetime,Ssex VARCHAR(10));– 由于建表没有定义字符编码 utf8alter table student default character set utf8;alter table student change ssex ssex varchar(10) character SET utf8;SHOW create TAB
2021-03-06 23:10:24
4285
原创 hadoop安装过2.8版本之后又安装3.1版本出现:ERROR:Cannot execute /opt/apps/hadoop-2.8.5/libexec
我前段时间安装了Hadoop2.8版本之后今天又需重新安装3.1版本的时候出现上面的问题，并且删除了2.8版本还是无法正常安装3.1版本解决过程：1、cd /etc/profile 中查找hadoophome 删除(注意如果没有查看到hadoophome 自己手动加入试试)2、重新刷新一下文件source /etc/profile3、重启stop -dfs.shstart -dfs.sh...
2021-02-27 16:47:35
1812
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人