- 博客(3)
- 资源 (3)
- 收藏
- 关注
RSS订阅转载 批量Kill yarn 任务
删除处于ACCEPTED状态的任务 for i in yarn application -list | grep -w ACCEPTED | awk '{print $1}' | grep application_; do yarn application -kill $i; done
2021-01-05 11:00:05
581
原创 SparkSQL on Hive进行整合介绍
Spark on hive简介： Spark通过Spark-SQL使用hive 语句,操作hive,底层运行的还是 spark rdd。 （1）就是通过sparksql，加载hive的配置文件，获取到hive的元数据信息 （2）spark sql获取到hive的元数据信息之后就可以拿到hive的所有表的数据 （3）接下来就可以通过spark sql来操作hive表中的数据 SparkSQL与Hive整合步骤： 第一步：拷贝hive-site.xml配置文件 将node03服务器安装的hive目录下的conf
2020-12-21 16:03:27
181
原创 通过phoenix与Hbase整合的方式实现通过jdbc的方式去查询Hbase当中的数据
通过phoenix与Hbase整合的方式实现通过jdbc的方式去查询Hbase当中的数据 一、下载Phoenix并安装 下载地址：http://archive.apache.org/dist/phoenix/ 将安装包上传到服务器，解压到指定安装目录即可 cd /temp/soft/ tar -zxvf apache-phoenix-4.14.0-cdh5.14.2-bin.tar.gz -C /temp/install/ 二、修改Phoenix配置 拷贝jar包： 将Phoenix目录下的pho
2020-12-21 15:33:32
373
1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人