![](https://img-blog.csdnimg.cn/20210420095941959.jpg?x-oss-process=image/resize,m_fixed,h_224,w_224)
大数据
文章平均质量分 65
以实战为线索,逐个探索大数据各个环节以及相对应技术。
小技工丨
所有的等待终将有所归属
展开
-
Hive生成日期维度表
hive建一个完整的时间维表原创 2023-08-28 15:39:08 · 819 阅读 · 0 评论 -
解决:Sqoop导入数据到Hive连接hiveserver2卡住
问题执行sqoop job要将mysql中数据导入hive表,执行到连接hiveserver2时就卡住不动单独执行连接hiveserver2可以正常连接Import options:sqoop import --connect jdbc:mysql://xxx:3306/test --username xxxxx --password xxxxxx --table t_user --fields-terminated-by '\001' --hive-import --hive-data原创 2020-07-27 14:41:28 · 2832 阅读 · 2 评论 -
CDP安装schema registry和streams messaging异常java.lang.ClassNotFoundException: com.mysql.cj.jdbc.Driver处理
异常CDP7.1.1.0的CM安装完成后,在安装schema registry和streams messaging manager组件时都会出现:Caused by: java.lang.ClassNotFoundException: com.mysql.cj.jdbc.Driver这样的异常。原因cdp7.1.1.0元数据数据库安装的是mysql5.7的版本,该版本的驱动类是com.mysql.jdbc.Driver,而com.mysql.cj.jdbc.Driver是mysql6以上版的驱动类,原创 2020-07-24 15:51:41 · 496 阅读 · 0 评论 -
CentOS7安装mysql5并修改数据目录
安装MySQL数据库RHEL或者说Centos本身不再包含MySQL。必须从MySQL官网下载存储库并直接安装。也可以使用以下命令来安装MySQL。有关更多信息,请访问MySQL官网。wget http://repo.mysql.com/mysql-community-release-el7-5.noarch.rpmsudo rpm -ivh mysql-community-release-el7-5.noarch.rpmsudo yum updatesudo yum install mysql原创 2020-07-25 23:16:05 · 907 阅读 · 0 评论 -
基于Centos7搭建CDH6.3.2环境
1、基础环境OS:Centos 7.6Cloudera Manager:6.3.1CDH:6.3.2JDK:1.8MySQL(MariaDB):5.7设有三个节点node01 192.168.0.1node02 192.168.0.2node03 192.168.0.32、服务器设置(所有节点)2-1、设置静态ip2-2、修改hostname以及hosts文件2-3、关闭防火墙2-4、禁用SELinux2-4、禁用Swap2-5、配置免密登录2-6、安装jdk#安原创 2021-07-07 18:06:51 · 1310 阅读 · 4 评论 -
【Hive】SQL窗口函数实践
一、准备DROP TABLE IF EXISTS db_test.merchants_turnover;CREATE TABLE IF NOT EXISTS db_test.merchants_turnover( merchant_name STRING COMMENT '店铺名称', turnover DECIMAL(10, 2) COMMENT '营业额', dt STRING COMMENT '日期yyyy-MM-dd') COMMEN原创 2022-02-22 20:21:14 · 1664 阅读 · 0 评论