- 博客(15)
- 收藏
- 关注
原创 开源大数据平台 DataLight 开发手册
本手册将基于参与贡献的进度与问题反馈持续更新,旨在帮助开发者更快地理解应用并参与到本开源项目中。对于那些需要将一些额外服务对接集成进来的开发者而言,借助该手册可以辅助实现 plugin 开发过程。
2024-06-22 18:01:26 1382
原创 开源大数据平台 DataLight 产品手册
DataLight 是一个开源的大数据运维管理平台,用于简化和自动化大数据服务的部署、管理和监控。它提供了一套全面的工具来管理您的大数据生态系统,旨在帮助企业实现简洁、快速地构建 OLAP 与 OLTP 统一的业务平台。用户可以通过 plugin 插件,以插拔式的方式快速集成自己的业务服务或其他大数据组件,从而在平台中进行统一管理。
2024-06-22 17:56:51 1700
原创 国产自研开源大数据平台 DataLight
DataLight 是一个开源的大数据运维管理平台,用于简化和自动化大数据服务的部署、管理和监控。它提供了一套全面的工具来管理您的大数据生态系统,旨在帮助企业实现简洁、快速地构建 OLAP 与 OLTP 统一的业务平台。用户可以通过 plugin 插件,以插拔式的方式快速集成自己的业务服务或其他大数据组件,从而在平台中进行统一管理。
2024-06-22 17:45:10 2859
原创 DataLight(v1.5.9) 版本更新,新增服务,优化交互
DataLight 发布 V1.5.9 版本,该版本不仅优化了前端 UI 页面,还修复了一系列已知的问题,希望这些改进能够让您操作更加顺畅。另外,新增了一个受支持的服务——DolphinScheduler。
2024-10-27 02:26:37 892
原创 Ranger 完整编译教程
为了方便开发者在未来能够快速集成更多版本的 Ranger,此处将对 Ranger 编译过程进行详细说明,希望能够为大家带来一些参考。
2024-09-26 11:49:10 1022
原创 DataLight(V1.4.5) 版本更新,新增 Ranger、Solr
本次更新对平台进行了较多的功能拓展和优化,新增了对 Ranger 和 Solr 服务组件的支持,同时对多项已有功能进行了改进,旨在提升更好的使用体验。进入主节点,通过以下命令启动 Master 进程,Master 进程重启后,稍等片刻,Master 将自动拉起所有节点上的 Worker 进程。当 Ranger 服务部署或发生变动时,系统将自动联动修改相关服务的配置文件,减少手动操作的繁琐,降低错误发生的可能性。在平台上查看各 Ranger 插件的运行状态,及时发现和处理异常情况,保障系统稳定运行。
2024-09-25 13:18:48 1092
原创 Solr 部署文档
Apache Solr 是一个高性能、可扩展的开源搜索引擎平台,基于 Lucene 库构建。它提供了强大的全文搜索、拼写检查、分析报告以及实时统计等特性。Solr 使用 Java 编写,可以在任何支持 Java 的平台上运行,并且通过 HTTP 接口对外提供服务,使得它能够轻松地集成到各种应用中。下面将介绍如何部署 Solr 集群。如果觉得手动部署麻烦,也可以使用 开源免费的 DataLight 平台自动化部署。将为您带来更加智能和高效的数据管理体验。一、编译或下载 Solr。3.3 启动 Solr。
2024-09-25 13:15:14 337
原创 DataLight 版本更新,新增组件分布快捷预览(1.2.5 版本)
亲爱的用户们,本次 DataLight 平台发布了一个小版本更新(版本号:1.2.5),本次更新增加了组件分布快捷预览的功能,并修复若干已知问题。
2024-09-04 17:59:24 928
原创 Kerberos、LDAP、SSSD 部署示例教程
此篇文章主要用于示例如何在 Centos7.x 操作系统上手动部署 KERBEROS LDAP SSSD 服务,便于用户了解这 3 个服务的部署以及使用过程。如果需要实现自动部署,可前往 DataLight 官网下载 DataLight 平台,通过开源项目自动化部署上述服务。操作过程中,将假设未来会在完全离线的私有化环境中进行安装部署,因此,除了下载资源需要在有外网的节点上进行,其余操作,均可在完全离线的环境中进行,但其中需要确保系统的版本与依赖项是相关的。
2024-08-27 15:06:15 1000
原创 DataLight 版本更新,新增4A支持(1.2.4 版本)
DataLight 平台最新版本(1.2.4)发布!此次更新引入了系统层面 4A 支持,为后续的 Ranger 集成奠定了基础。同时,支持在部署 KERBEROS、LDAP、SSSD 后,通过修改大数据服务的配置文件,快速集成用户认证服务。
2024-08-27 14:52:14 1034
原创 DataLight 新增可部署服务 Kyuubi(DataLight 1.1.3 版本)
在本次更新中,DataLight 平台引入了对 KYUUBI 服务的支持。KYUUBI 是一个高性能的大数据查询引擎,能够显著提高大数据处理的效率和性能。通过在 DataLight 平台上部署 KYUUBI,用户可以利用其强大的查询和数据处理能力,进一步优化数据分析和处理流程。同时,我们还提供了 KYUUBI 的 Grafana Dashboard 和编译集成文档,帮助用户更快地上手和使用 KYUUBI 服务。
2024-08-06 14:56:05 1101
原创 DataLight 新增 NameNode 迁移功能(1.0.2 版本)
在分布式存储系统中,NameNode 负责管理 HDFS 文件系统的元数据,是系统的核心。为了确保系统的高可用性和可扩展性,能够灵活迁移 NameNode 是至关重要的。通过 NameNode 迁移功能,您可以在以下场景中受益:- **硬件维护和升级**:在不影响业务连续性的情况下,进行硬件维护或升级。- **负载均衡**:通过迁移 NameNode 到更有效的节点,分散负载,提升系统整体性能。- **节点变更**:因业务变动,需要将 NameNode 节点进行迁移时,可以快速通过该流程完成集群业务
2024-08-06 14:52:05 786
原创 DataLight 大数据平台 AI 分析功能逐步上线啦
AI 分析功能是 **DataLight** 通过集成先进的第三方大模型,为用户提供智能化的数据分析和配置优化服务。通过这一功能,您可以更深入地了解您的平台运维情况,从而做出更明智的业务决策。
2024-08-06 14:47:39 921
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人