Java_Road_Far的博客

异常信息:warning: user mysql does not exist - using root解决办法:yum install -y perl-Module-Install.noarch

文章目录一、Sentry概述1.1 Sentry是什么1.2 Sentry中的角色二、Sentry安装部署三、Sentry与Hive/Impala集成3.1 修改配置参数3.2 配置Hive使用Sentry3.3 配置Impala使用Sentry3.4 配置HDFS权限与Sentry同步四、Sentry 授权4.1 基于 Hue4.2 基于 命令行一、Sentry概述cdh 版本的 hadoop 在对数据安全上的处理通常采用 Kerberos+Sentry 的结构。kerberos 主要负责平台用户

这个原因是这个用户没有查看的权限，hive，hue就可以，因为sentry中没有配置default组为超级组在hue中创建hive账号、hive组，使用该账号登陆, 即可添加角色

一、打开 CDH二、设置参数

文章目录一、Standalone模式1.1 下载flink安装包1.2 安装 flink1.3 配置文件二、Yarn模式三、Kubernetes部署一、Standalone模式1.1 下载flink安装包https://flink.apache.org/downloads.html1.2 安装 flink解压即可1.3 配置文件vim conf/flink-conf.yam...

文章目录一、下载地址二、使用一、下载地址https://eternallybored.org/misc/netcat/二、使用将解压后的单个文件全部拷贝到 C:\Windows\System32 的文件夹下。注意：不是拷贝整个文件夹，而是文件夹里面的全部文件。nc -l -p 7777...

文章目录一、搭建maven工程1.1 pom 文件1.2 添加scala框架 和 scala文件夹1.3 批处理wordcount1.4 流处理 wordcount一、搭建maven工程1.1 pom 文件<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/POM/4...

文章目录一、修改主机名二、修改 ip一、修改主机名hostnamectl set-hostname 主机名二、修改 ipvim /etc/sysconfig/network-scripts/ifcfg-ens33 TYPE=EthernetPROXY_METHOD=noneBROWSER_ONLY=noBOOTPROTO=staticIPADDR=192.168.161....

文章目录此教程以 6.2.0 的版本为例一、下载此教程以 6.2.0 的版本为例一、下载CDH下载地址下载cdh选择对应linux的下载，例如我下载的是 centos7.7 下使用的cdh6.2.0下载cm...

文章目录一、 需求二、实现一、 需求业务上需要将当天的数据写入hbase 提供给后台查询前台展示，第二天清空前一天的数据二、实现vim truncateGpsToDay.shtruncate 'TBL_GPS_TODAY'executorTruncateToDay.shhbase shell /root/truncateGpsToDay.sh配置定时任务0 0 ...

#! /bin/bashstatus="RUNNING"programStatus=`yarn application -list |grep YARN-NAME| awk '{print $6}'`if [ "$status" == "$programStatus" ]then #"程序正在运行..."else echo `date "+%Y-%m-%d...

文章目录前言executor参数spark.executor.coresspark.executor.memory/spark.yarn.executor.memoryOverheadspark.executor.instancesspark.dynamicAllocation.enabledDriver参数spark.driver.coresspark.driver.memory/spark.d...

文章目录一、前提条件二、卸载旧版本三、安装一、前提条件操作系统要求要安装Docker Engine-Community，您需要一个CentOS 7的维护版本。不支持或未测试存档版本。二、卸载旧版本较旧的Docker版本称为docker或docker-engine。如果已安装这些程序，请卸载它们以及相关的依赖项。$ sudo yum remove docker docker-client...

文章目录下载 Phoenix解压拷贝指定 jar到 HBase 的lib目录在 CDG - hbase配置中加入相关参数将 hdfs 和 hbase 相关配置文件拷贝到 Phoenix/bin目录下重启 Hbase即可连接Phoenix下载 Phoenixhttp://phoenix.apache.org/download.html解压[root@bigdata-5 ~]# tar -z...

启动hiveserver2服务[kino@bigdata01.sutpc hive]$ bin/hiveserver2启动beeline[kino@bigdata01.sutpc hive]$ bin/beelineBeeline version 1.2.1 by Apache Hivebeeline>连接hiveserver2beeline> !connect ...

在安装好 CDH 之后，使用安装时自动创建的 hdfs 用户登录不了[root@bigdata-3 ~]# su hdfsThis account is currently not available.原因是此用户的shell是/sbin/nologin需修改成/bin/bash...

hive -e "set hive.cli.print.header=true; select * from data_table where some_query_conditions " | sed 's/[\t]/,/g' > outputData.csv参数说明:- set hive.cli.print.header=true：输出表头- sed 's/[\t]/,/g：将...

执行：yum install -y python-lxml 即可