大数据
神云瑟瑟
这个作者很懒,什么都没留下…
展开
-
spark3访问低版本hive填坑记
一、背景 现有的大数据平台版本 组件 版本 hadoop 2.7.3 hive 1.2.7 因业务需要引入spark组件,引用的为最新版本spark3.0.1. 业务上做测试,将Dataframe数据写入hive中。 二、代码 scala代码 package com.shenyun.scala.exchange import org.apache.spark.sql.types.{StringType, StructField, StructType} impo原创 2020-12-17 14:46:06 · 4111 阅读 · 3 评论 -
hbase java api指定访问用户名
在默认情况情况,我们使用hbase的java api去访问hbase的服务时,使用的hbase的服务的用户名为启动java程序的系统用户名。 在有些情况下,我们要指定用户。如何指定呢,就是本文的内容。原创 2020-09-01 14:22:17 · 2796 阅读 · 0 评论