大数据
菜兜兜
遍览大神帖是我的乐趣
展开
-
Zookeeper
1. Zookeeper概念简介:Zookeeper是一个分布式协调服务;就是为用户的分布式应用程序提供协调服务A、zookeeper是为别的分布式程序服务的B、Zookeeper本身就是一个分布式程序(只要有半数以上节点存活,zk就能正常服务)C、Zookeeper所提供的服务涵盖:主从协调、服务器节点动态上下线、统一配置管理、分布式共享锁、统一名称服务……D、虽然说可以提供各种服务,但是zoo...转载 2018-07-01 18:24:48 · 522 阅读 · 0 评论 -
Alluxio及presto的浅知
Alluxio(之前名为Tachyon)是世界上第一个以内存为中心的虚拟的分布式存储系统。它统一了数据访问的方式,为上层计算框架和底层存储系统构建了桥梁。 应用只需要连接Alluxio即可访问存储在底层任意存储系统中的数据。此外,Alluxio的以内存为中心的架构使得数据的访问速度能比现有方案快几个数量级。在大数据生态系统中,Alluxio介于计算框架(如Apache Spark,Apache...转载 2018-08-11 19:05:13 · 2234 阅读 · 0 评论 -
hive常用日期函数
date_sub(next_day(to_date(CURRENT_TIMESTAMP),'MO'),7) --本周1--date_sub(next_day(to_date(CURRENT_TIMESTAMP),'MO'),14) --上周1--date_sub(next_day(to_date(CURRENT_TIMESTAMP),'MO'),0) --下周1--date_ad...原创 2019-08-15 17:07:48 · 790 阅读 · 0 评论