![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
fengsong97
一个程序员
展开
-
hive sql 解析json字符串 json数组 请拿走不谢 fengsong97
先看效果再看SQLselect a.address,t.a_jsonfrom( select get_json_object( tab.json_str , '$.address') address, split(regexp_replace(regexp_extract ( get_json_object(tab.json_str , '$.store.fruit'), '(\\[)(.*?)(\\])',2), '\\},\\{','\\}|\\{')原创 2020-10-28 23:52:12 · 20646 阅读 · 2 评论 -
java redis的单机配置和集群配置及一个错误Broken pipe及解决
目录单机配置和集群配置一个错误Broken pipe及解决问题描述问题分析解决方案单机配置和集群配置package cn.enn.util;import org.slf4j.Logger;import org.slf4j.LoggerFactory;import redis.clients.jedis.*;import java.io.Seri...原创 2020-04-02 09:59:51 · 20001 阅读 · 0 评论 -
fengsong97用到的hive
目录hive介绍hive 内外部表hive 分区表hive 建模hive JDBChive介绍hive 内外部表hive 内部表MANAGED_TABLE, 是被hive完全管理的表, 完全管理元数据和数据 (默认和建议创建为内部表),数据会被放到特定的路径下 hdfs://nameservice/user/hive/warehouse/default.d...原创 2020-01-09 21:41:33 · 20002 阅读 · 0 评论 -
大数据Hadoop相关概念及其技术生态圈
Google 大数据技术 (不开源) MapReduce 、BigTable、 GFS Hadoop 模仿了Google大数据技术(开源) Hadoop的 两个核心概念HDFS :分布式文件系统 , 存储海量的数据MapReduce:并行处理框架,实现任务分解和调度Hadoop 能做什么? 搭建大型数据仓库、PB级数据的存储、处理、分析、统计等业务 具体如 :搜索引擎、日志分析、商业智原创 2017-06-06 15:44:28 · 2571 阅读 · 0 评论