hadoop
java学习开发者
技术男有点宅!
展开
-
Hive On Spark
自从公司使用大数据产品之后,就很少碰开源的东西了,集群出问题也是跟研发沟通,前些天有朋友问我,怎么能把hive底层的引擎换成spark,我想了想,是不是将hive的数据库共享给spark然后用spark-shell不就好了,后来查了查资料,原来不是这样的,这里面的操作还挺多了。哎,真的是,用了别人产品,开发是方便了,原理懂的就少了,小编一直还沉浸在用一条SQL底层就能转换的spark程序并行执行任务的幸福生活中。乘着周末,一个人享受着公司的WiFi和空调,把这个开源的hive引擎换成s...转载 2020-06-08 18:04:15 · 476 阅读 · 0 评论 -
HAProxy实现Impala的负载均衡
参考地址如下:https://cloud.tencent.com/developer/article/1200827转载 2020-04-18 19:10:28 · 279 阅读 · 0 评论 -
hadoopHA 高可用出现的问题 java.net.UnknownHostException: mycluster
hadoopHA 高可用出现的问题,若出现java.net.UnknownHostException: mycluster,检查如下配置 <property> <name>dfs.client.failover.proxy.provider.mycluster</name> <v...原创 2019-12-18 13:57:35 · 3158 阅读 · 3 评论