Hive
文章平均质量分 64
分布式系统数据仓库
所行化坦途
这个作者很懒,什么都没留下…
展开
-
hive表按天动态分区报错
执行sql前,开启动态分区并set hive.exec.dynamic.partition=true;set hive.exec.dynamic.partition.mode=nonstrict;set hive.exec.max.dynamic.partitions.pernode=3000;set hive.exec.max.dynamic.partitions=6000;set mapreduce.map.memory.mb=2048;set mapreduce.reduce.memory原创 2021-03-29 10:53:09 · 1229 阅读 · 0 评论 -
Spark SQL操作外部数据源
Spark SQL一、准备工作二、Spark连接Hive三、Spark连接MySQL四、Spark连接HBase一、准备工作创建maven工程,添加pom依赖<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi原创 2021-01-10 14:57:31 · 624 阅读 · 0 评论 -
JDBC——java连接mysql、hive、hbase教程
JDBC模板一、准备工作1.1、创建Maven工程1.2、修改pom文件1.3、修改Project Structure1.4、修改Settings1.5、资源文件夹二、Java连接mysql2.1、添加依赖2.2、JDBC配置文件2.3、代码编写2.4、测试三、Java连接hive3.1、添加依赖3.2、配置文件3.3、代码编写3.4、测试四、Java连接hbase4.1、添加依赖4.2、windows主机映射4.3、代码编写一、准备工作1.1、创建Maven工程工程IDMaven工作目录保原创 2021-01-10 13:35:00 · 1473 阅读 · 0 评论