- 博客(4)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 使用spark-SQL的thriftserver和beeline的方式连接hive
1. 准备条件① 需要将hive-site.xml文件拷贝到Spark的conf目录下，这样就可以通过这个配置文件找到Hive的元数据以及数据存放位置。② 如果Hive的元数据存放在Mysql中，我们还需要准备好Mysql相关驱动，比如：mysql-connector-java-5.1.35.jar2. 启动参数设置2.1 启动thriftserver: 默认端口是10000，可以自定义设...
2019-09-06 18:31:31
1082
转载 spark sql连接hive的元数据（mysql库）时报错：Specified key was too long; max key length is 767 bytes
问题： spark sql连接hive的元数据（mysql库）时报错：Specified key was too long; max key length is 767 bytes。解决：其实是mysql数据字符集问题，只要修改mysql中hive元数据库的字符集便可，即alter database dbname character set latin1;可是设置后启动时仍然报错，启动命令如...
2019-09-06 17:27:06
231
转载 PostgreSQL的高级特性>窗口函数
这篇文章纯属搬运，特此贴出链接https://www.cnblogs.com/funnyzpc/p/9311281.html#undefined，感谢这位大神。这是pg官网关于***窗口函数***的官方文档链接http://www.postgres.cn/docs/9.3/functions-window.htmlDROP TABLE IF EXISTS "public"."products";...
2019-03-05 17:32:31
663
hadoop构建数据仓库
2019-03-25
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人