sparksql
Vitamin__C
这个作者很懒,什么都没留下…
展开
-
大数据平台学习之路(3)安装hive-2.3.4编译spark-2.3.3
1、背景上一篇博客中已经安装了 hadoop并配置了免密登录,这篇博客记录安装hive和编译spark的过程。2、准备文件ubuntu 16.04http://releases.ubuntu.com/16.04/ubuntu-16.04.6-desktop-amd64.iso.torrent?_ga=2.96890143.1440843407.1553350287-1855693...原创 2019-03-24 23:13:04 · 1132 阅读 · 0 评论 -
大数据平台学习之路(4)编译hue并使用
1、背景上篇博客已经记录了安装hive,编译spark的过程,但是spark-sql shell或者hive shell编写sql来并不是很方便,所以这篇博客介绍hue,编译hue并使用。2、HUE简介github地址https://github.com/cloudera/hueHue是一个开放源码的SQLWorkbench,用于浏览、查询和可视化数据仓库中的数据:gethue....原创 2019-05-31 16:41:57 · 1201 阅读 · 2 评论 -
使用Datagrip连接spark-thriftserver使用sparksql
使用Datagrip连接spark-thriftserver因为在编译spark时使用含有hive的编译以支持sparksql on hive ,所以在Datagrip连接spark-thriftserver时就不能使用hive的连接驱动版本,而需要spark的,具体改动如下:但是存在问题,spark-thriftserver无法获取hive-metastore中的元数据库和表的信...原创 2019-06-01 19:20:48 · 4163 阅读 · 4 评论