- 博客(15)
- 收藏
- 关注
RSS订阅原创 hql练习题（6套）
文章目录题目1建表1.计算出每个人每月的消费金额？2.计算出每个人截止到当月的消费总金额？题目21）每个店铺的UV（访客数）2）每个店铺访问次数top3的访客信息。输出店铺名称、访客id、访问次数题目3题目四题目五题目六题目1A,2015-01,5A,2015-01,15B,2015-01,5A,2015-01,8B,2015-01,25A,2015-01,5C,2015-03,20 字段说明： username： 姓名 datetime ： 日期 cost_money
2021-06-21 15:02:07
819
原创 Hive窗口函数详解——及3套案例
前言：要先了解窗口函数的结构，over（）才是窗口函数，而avg()、sum()、max()、min()等是与over（）分析函数一，hive窗口函数语法首先，avg()、sum()、max()、min()等是分析函数，而over()才是窗口函数...
2021-06-18 11:05:00
998
转载 大数据hive（一）：hive的基本概念
转载https://blog.csdn.net/xiaoweite1/article/details/117757325文章目录Hive基本概念一、Hive介绍1、什么是Hive2、为什么使用Hive3、Hive的特点二、Hive架构1、架构图2、基本组成3、Hive与传统数据库对比Hive基本概念一、Hive介绍1、什么是HiveHive是一个构建在Hadoop上的数据仓库框架。最初，Hive是由Facebook开发，后来移交由Apache软件基金会开发
2021-06-16 20:07:32
432
原创 hive建表报错FAILED: ParseException line 2:0 Failed to recognize predicate ‘date‘. Failed rule: ‘identifi
报错信息FAILED: ParseException line 2:0 Failed to recognize predicate ‘date’. Failed rule: ‘identifier’ in column specification代码create table if not exists test_window1( date string,userid string,score int )row format delimited fields terminated by ‘,’;
2021-06-15 14:37:15
981
原创 hive启动报错 org.apache.hadoop.ipc.RemoteException。。。Name node is in safe mode
问题Exception in thread “main” java.lang.RuntimeException: org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.server.namenode.SafeModeException): Cannot create directory /tmp/hive/jinghang/fa442de6-62f5-4788-8e61-1ec555ab9930. Name node is in safe
2021-06-15 10:59:44
1552
原创 flink的任务提交流程
我们来看看当一个应用提交执行时，Flink 的各个组件是如何交互协作的：上图是从一个较为高层级的视角，来看应用中各组件的交互协作。如果部署的集群环境 不同（例如 YARN，Mesos，Kubernetes，standalone 等），其中一些步骤可以被省略，或是 有些组件会运行在同一个 JVM 进程中。 具体地，如果我们将 Flink 集群部署到 YARN 上，那么就会有如下的提交流程：1.Flink 任 务 提 交 后 ， Client 向 HDFS 上 传 Flink 的 Jar 包 和 配 置
2021-06-08 09:17:57
1256
原创 Flink window的API
一.计数窗口CountWindow计数窗口：按照指定的数据条数生成一个window，与时间无关1.滑动计数窗口 .countWindow(12, 4)注意：CountWindow 的 window_size 指的是相同 Key 的元素的个数，不是输入 的所有元素的总数每当某一个 key 的个数达到 4 的时候,触发计算，计算最近该 key 最近 12 个元素的内容2.滚动计数窗口.countWindow(5)默认的 CountWindow 是一个滚动窗口，只需要指定窗口大小即可，当元素数量
2021-06-03 19:52:18
112
原创 MySQL可视化工具连不上或mysql启动不了
在连接数据库是可能会遇到上面????????????这种情况，但是，不要慌，往下面看！！！????????????首先，右击此电脑 ——>选择管理然后，双击再然后，找到MySQL，改为自动动，保存，重启MySQL就????啦注意：如果是手动的，要记住MySQL在哪里启动~????，因为有可能会忘掉哟...
2021-06-01 16:45:28
1327
原创 flink1.11报错 No ExecutorFactory found to execute the applicat
一.报错信息Exception in thread "main" java.lang.IllegalStateException: No ExecutorFactory found to execute the application. at org.apache.flink.core.execution.DefaultExecutorServiceLoader.getExecutorFactory(DefaultExecutorServiceLoader.java:84) at org.apache
2021-05-29 20:26:49
174
原创 vim常用命令
一般模式语法 功能描述yy 复制光标当前一行y数字y 复制一段（从第几行到第几行）p 箭头移动到目的行粘贴u 撤销上一步dd 删除光标当前行d数字d 删除光标（含）后多少行x 删除一个字母，相当于del，向后删X 删除一个字母，相当于Backspace，向前删yw
2021-05-24 09:25:42
151
原创 kafka常用命令
2.1.在启动kafka前先启动zookeeper启动kafkabin/kafka-server-start.sh -daemon config/server.properties3.kafka消费者启动命令bin/kafka-console-consumer.sh --bootstrap-server hadoop101:9092 --from-beginning --topic first4.启动生产者bin/kafka-console-producer.sh --broker-lis
2021-05-24 08:58:34
58
原创 hdfs常用命令之文件操作
(1) 列出HDFS下的文件`hadoop dfs -ls`(2) 列出HDFS文件下名为in的文档中的文件hadoop dfs -ls in(3) 上传文件将hadoop目录下的test1文件上传到HDFS上并重命名为test：hadoop dfs -put test1 test(4) 文件被复制到本地系统中将HDFS中的in文件复制到本地系统并命名为getin：hadoop dfs -get in getin(5) 删除文档删除HDFS下名为out的文档：hadoop dfs
2021-04-07 15:11:20
177
原创 kafka挂掉原因
看在logs中meta.properties中的broker.id和你在/opt/kafka/config/server.properties中 的broker.id是否一致。1.先进入kafka目录下，查看config/server.properties中 的broker.id2.查看meta.properties中的broker.id
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人