数据仓库
文章平均质量分 94
后端技术那点事
这个作者很懒,什么都没留下…
展开
-
Kerberos从入门到精通以及案例实操系列(二)
所以在安全的Hadoop环境下,Kylin不需要做额外的配置,只需要具备一个Kerberos主体,进行常规的认证即可。若Presto对接的是Hive数据源,由于其需要访问Hive的元数据和HDFS上的数据文件,故也需要对Hive Connector进行Kerberos认证。启用Kerberos认证之后,关闭HBase时,需先进行Kerberos用户认证,认证的主体为hbase。但是Kylin所依赖的HBase需要进行额外的配置,才能在安全的Hadoop环境下正常工作。以下说明均基于普通用户。原创 2023-06-05 16:59:07 · 1057 阅读 · 0 评论 -
Kerberos从入门到精通以及案例实操系列(一)
整个kerberos认证的过程较为复杂,三次通信中都使用了密钥,且密钥的种类一直在变化,并且为了防止网络拦截密钥,这些密钥都是临时生成的Session Key,即他们只在一次Session会话中起作用,即使密钥被劫持,等到密钥被破解可能这次会话都早已结束,这为整个kerberos认证过程保证了较高的安全性。kerberos认证的整体流图kerberos认证的时序图本地登录(无需认证)远程登录(需进行主体认证,认证操作见下文)退出输入:exit2. 创建Kerberos主体。原创 2023-06-05 20:00:00 · 5151 阅读 · 2 评论 -
Ranger从入门到精通以及案例实操系列
RangerUsersync作为Ranger提供的一个管理模块,可以将Linux机器上的用户和组信息同步到RangerAdmin的数据库中进行管理。Ranger Hive-plugin是Ranger对hive进行权限管理的插件。需要注意的是,Ranger Hive-plugin只能对使用jdbc方式访问hive的请求进行权限管理,hive-cli并不受限制。原创 2023-06-05 11:35:45 · 1825 阅读 · 0 评论 -
Zabbix从入门到精通以及案例实操系列
Zabbix是一款开源的网络监控、管理和预警系统,可以监控各种网络设备和应用程序,并提供了丰富的通知方式和可视化展示功能。它可以帮助企业实时监测IT基础设施的状态和性能,快速定位和解决潜在问题,使得企业的IT运维更加高效、可靠和安全。原创 2023-05-31 10:19:45 · 2133 阅读 · 0 评论 -
Presto从入门到精通以及案例实操系列
Presto最初由Facebook公司开发,旨在解决Facebook内部大规模数据处理和数据分析的问题。在传统的Hadoop生态圈中,MapReduce作为数据处理框架,虽然能够处理海量数据,但是其查询性能却比较低下,尤其是对于需要进行交互式查询(如数据探索、数据挖掘等)的应用场景,更是不够灵活。为了解决这一问题,Facebook团队在2012年开始开发Presto,其目标是建立一个高性能、可扩展、支持SQL查询语言的跨平台数据处理引擎,以适应Facebook内部不断增长的数据规模和业务需求。原创 2023-05-29 23:00:00 · 977 阅读 · 0 评论 -
Kylin从入门到精通以及案例实操系列
Apache Kylin是一个开源的分布式分析引擎,提供Hadoop/Spark之上的SQL查询接口及多维分析(OLAP)能力以支持超大规模数据,最初由eBay Inc开发并贡献至开源社区,它能在亚秒内查询巨大的Hive表。Kylin 基于 Hadoop 和 HBase 构建,能够支持超大规模数据的查询和分析,并且具有低延迟、高并发、高可扩展等优点。原创 2023-05-26 17:09:14 · 1654 阅读 · 1 评论 -
Azkaban从入门到精通以及案例实操系列
Azkaban从入门到精通再到实战一文搞定原创 2023-05-24 11:36:14 · 2589 阅读 · 0 评论 -
Superset数据探索和可视化平台入门以及案例实操
Superset数据探索以及可视化原创 2023-03-08 19:41:28 · 1186 阅读 · 0 评论 -
DolphinScheduler理论知识以及手机、邮箱、钉钉、电话等多种告警部署实操
DolphinScheduler理论知识以及案例实操原创 2023-03-08 16:47:57 · 3120 阅读 · 0 评论 -
数据仓库之建模理论以及仓库设计思想
数据仓库之建模理论以及仓库设计思想原创 2023-03-01 00:13:03 · 1925 阅读 · 0 评论