software_student-CSDN博客

原创问题解决-Hive创建汉字字段表时，报错org.apache.hadoop.hive.ql.exec.DDLTask. MetaException

项目场景：在大数据集群场景中，需求方（客户）会给你提出很多奇葩问题，让一个大数据职场小白的我为之抓狂，在一顿挠心之后，还得想办法去满足需求方提出的需求前不久我的需求方就是我们CDH集群的使用方-数据应用开发团队给我出了个难题，说业务部门想要使用汉语字段的表使用，也就是表结构中字段名称必须是汉语，俗话说，中国文化博大精深，汉语最为精髓。汉语考试：1.“小明，今晚有思修课，你去不去？”，“我去！我不去！”，问小明到底去不没去？2.“小明，窗台上落了鸟屎，去擦一下好吗？”，“我擦，我不擦”，问小明到底

2021-07-02 15:45:58 3722

原创问题解决-hive使用spark引擎执行SQL时，yarn报错：java.lang.NoClassDefFoundError: org/antlr/runtime/tree/CommonTree

项目场景：在Hive老版本中，Hive在执行HSQL语句时，默认的执行引擎是后台执行MR（MapReduce）任务；随着Spark的兴起，如今Hive版本都是使用spark引擎作为SQL语句的执行引擎，因为spark是基于内存的计算引擎，相比MR计算更加快速，更让大众所青睐。环境描述：名称版本号CDH6.2.0Hive2.1.0Spark2.4.0问题描述：创建Hive外表create table if not exists stu(id int ,

2021-07-02 10:57:31 3155 5

原创 Linux服务器ntp时间同步离线安装配置

CentOS7.4-NTP时间同步离线安装1.环境准备2.下载安装包3.安装NTP服务4.配置NTP5.验证时间同步写在前面：在大多数实际生产环境集群模式中，需要进行配置集群中所有服务器时间同步，避免因时间不同步导致集群异常问题；但是大多数公司生产环境都为内网环境不能连接互联网进行在线安装ntp服务，本文基于内网环境进行ntp服务安装配置，做到内网集群时间自动同步。1.环境准备准备三台（或三台以上）物理机或虚拟机，选择其中一台作为NTP服务端，其他作为NTP客户端。IP主机名角色

2020-09-10 11:13:17 3639 2

原创 Linux服务器间免密登录配置

Linux免密登录配置1.环境准备2.生成密钥3.拷贝公钥4.验证免密1.环境准备准备三台（或三台以上）物理机或虚拟机，并在/etc/hosts中进行配置IP主机名192.168.86.201esnode1192.168.86.202esnode2192.168.86.203esnode32.生成密钥生成密钥需要在每个节点进行密钥生成命令执行：ssh-keygen -t rsa执行命令入图所示：（三次键入Enter键）在用户的家目录下将会生成.

2020-09-08 16:01:31 1072