树下喝茶聊天-CSDN博客

原创 Hive中通过移动PARQUET文件实现不同环境下的数据移动

不同环境下，HDFS文件转移后的数据转移。

2023-02-14 17:48:59 240

原创 HIVE学习笔记-1

HIVE相关的学习笔记-HIVE出现的背景、数仓的出现、HIVE与RDBMS的对比、HIVE的优缺点。

2022-09-01 23:47:36 1700

集群部署完毕后，查看相关WEB界面，打不开的原因可能如下：1、可以先去检查LINUX（CentOS7）机器的防火墙是否关闭，命令如下：systemctl status firewalld.service （查看防火墙状态）(如果显示为关闭状态，则进行下一步；如果显示尚未关闭，则进行关闭并设定开机如下所示)systemctl stop firewalld.service （关闭防火墙）systemctl disable firewalld.service （设置为开机关闭防火墙）2、第一步没问

2022-05-11 14:10:02 9510 28

原创如何从本地导入数据至HDFS上？

1、建表(文本文档格式)CREATE TABLE A(User_id double,User_nm string)ROW FORMAT DELIMITED FIELDS TERMINATED BY ‘,’STORED AS TEXTFILE;2、将本地数据以 ‘，’为间隔的文档上传至指定的HDFS路径下在hadoop机器上，hadoop fs -put 本地数据路径+文件名.后缀名 HDFS路径搞定！另：hadoop fs -ls HDFS路径 --》查看hadoop fs -r

2022-03-31 23:09:25 6563 5

原创 SHELL日期命令“大全”

–今天2022-01-13this_day=$(date +'%Y-%m-%d')–昨天2022-01-12yesterday=$(date -d"$this_day 1 day ago" +'%Y-%m-%d')/$(date -d"$this_day -1 day" +'%Y-%m-%d')–明天2022-01-14tomorrow=$(date -d"$this_day 1 day" +'%Y-%m-%d')–本月初2022-01-01this_month_first=$(date

2022-01-14 14:10:36 2501 3

原创 SQL执行顺序

执行顺序：1、FROM2、WHERE3、GROUP BY4、HAVING5、SELECT6、ORDER BY7、LIMIT

2022-01-10 17:18:23 334

原创 HIVE表之工作日志

1、HIVE表修改表名ALTER TABLE [OLD_TABLE_NAME] RENAME TO [NEW_TABLE_NAME];注：表中现存的数据不会发生改变。

2021-12-25 16:41:17 627

原创 @有关HIVE表的表结构修改①

1、HIVE表添加列①添加一个字段ALTER TABLE [TABLE_NAME] ADD COLUMNS ([COLUMN_NAME] [COLUMN_TYPE]);②添加多个字段ALTER TABLE [TABLE_NAME]ADD COLUMNS ([COLUMNS_NAME1] [COLUMNS_TYPE],[COLUMNS_NAME2] [COLUMNS_TYPE],...);2、修改HIVE表列名/类型/列位置/注释①修改列名ALTER TABLE [TABL.

2021-12-15 23:25:48 2036

大数据工作的日常

原创文本文件导入至HADOOP

原创 Hive中通过移动PARQUET文件实现不同环境下的数据移动

原创 HIVE学习笔记-1

原创 HIVE表中，LIKE与RLIKE的语法区别

原创 HIVE分区表-全量导入数据

原创 Hadoop集群部署后相关WEB界面打不开大概原因