hadoop
一个小通通
这个作者很懒,什么都没留下…
展开
-
Azkaban的搭建
数据库要有远程访问权限数据库连接工具版本要注意lib文件下原创 2021-07-27 16:45:48 · 151 阅读 · 0 评论 -
Pig中Java编写UDF函数
Pig中Java编写UDF函数idea中新建Maven项目添加依赖到pom.xml文件<dependency> <groupId>org.apache.pig</groupId> <artifactId>pig</artifactId> <version>0.17.0</version> </dependency> <dependency> <groupI原创 2021-04-21 09:17:37 · 285 阅读 · 0 评论 -
idea中Spark操作外置hive
代码object Spark04_SparkSQL_Hive { def main(args: Array[String]): Unit = { //TODO 创建SparkSQL的运行环境 val spark = SparkSession.builder().appName("sparksql").master("local[*]") .config("spark.sql.shuffle.partitions","4") .config("spark.sql原创 2021-04-02 18:08:44 · 306 阅读 · 0 评论 -
Centos7MySql8安装以及hive3安装
Centos7MySql8安装以及hive3安装文章目录Centos7MySql8安装以及hive3安装一、 安装环境二、下载Mysql所需要的安装包三、 安装mysql三、 初始化mysql数据库的初始化和相关配置四、 hive安装一、 安装环境1.hadoop3.32.jdk1.83.hive 3.1.24.centos7二、下载Mysql所需要的安装包网址:https://dev.mysql.com/downloads/mysql/Select Operating Syste原创 2020-11-20 21:25:44 · 967 阅读 · 0 评论