自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(15)
  • 收藏
  • 关注

原创 开源大数据平台 DataLight 开发手册

本手册将基于参与贡献的进度与问题反馈持续更新,旨在帮助开发者更快地理解应用并参与到本开源项目中。对于那些需要将一些额外服务对接集成进来的开发者而言,借助该手册可以辅助实现 plugin 开发过程。

2024-06-22 18:01:26 1382

原创 开源大数据平台 DataLight 产品手册

DataLight 是一个开源的大数据运维管理平台,用于简化和自动化大数据服务的部署、管理和监控。它提供了一套全面的工具来管理您的大数据生态系统,旨在帮助企业实现简洁、快速地构建 OLAP 与 OLTP 统一的业务平台。用户可以通过 plugin 插件,以插拔式的方式快速集成自己的业务服务或其他大数据组件,从而在平台中进行统一管理。

2024-06-22 17:56:51 1700

原创 国产自研开源大数据平台 DataLight

DataLight 是一个开源的大数据运维管理平台,用于简化和自动化大数据服务的部署、管理和监控。它提供了一套全面的工具来管理您的大数据生态系统,旨在帮助企业实现简洁、快速地构建 OLAP 与 OLTP 统一的业务平台。用户可以通过 plugin 插件,以插拔式的方式快速集成自己的业务服务或其他大数据组件,从而在平台中进行统一管理。

2024-06-22 17:45:10 2859

原创 DataLight(v1.5.9) 版本更新,新增服务,优化交互

DataLight 发布 V1.5.9 版本,该版本不仅优化了前端 UI 页面,还修复了一系列已知的问题,希望这些改进能够让您操作更加顺畅。另外,新增了一个受支持的服务——DolphinScheduler。

2024-10-27 02:26:37 892

原创 Ranger 部署教程

本项目示例过程将以 部署安装 Ranger 2.4.0 版本为例

2024-09-26 12:35:39 975

原创 Ranger 完整编译教程

为了方便开发者在未来能够快速集成更多版本的 Ranger,此处将对 Ranger 编译过程进行详细说明,希望能够为大家带来一些参考。

2024-09-26 11:49:10 1022

原创 DataLight(V1.4.5) 版本更新,新增 Ranger、Solr

本次更新对平台进行了较多的功能拓展和优化,新增了对 Ranger 和 Solr 服务组件的支持,同时对多项已有功能进行了改进,旨在提升更好的使用体验。进入主节点,通过以下命令启动 Master 进程,Master 进程重启后,稍等片刻,Master 将自动拉起所有节点上的 Worker 进程。当 Ranger 服务部署或发生变动时,系统将自动联动修改相关服务的配置文件,减少手动操作的繁琐,降低错误发生的可能性。在平台上查看各 Ranger 插件的运行状态,及时发现和处理异常情况,保障系统稳定运行。

2024-09-25 13:18:48 1092

原创 Solr 部署文档

Apache Solr 是一个高性能、可扩展的开源搜索引擎平台,基于 Lucene 库构建。它提供了强大的全文搜索、拼写检查、分析报告以及实时统计等特性。Solr 使用 Java 编写,可以在任何支持 Java 的平台上运行,并且通过 HTTP 接口对外提供服务,使得它能够轻松地集成到各种应用中。下面将介绍如何部署 Solr 集群。如果觉得手动部署麻烦,也可以使用 开源免费的 DataLight 平台自动化部署。将为您带来更加智能和高效的数据管理体验。一、编译或下载 Solr。3.3 启动 Solr。

2024-09-25 13:15:14 337

原创 DataLight 版本更新,新增组件分布快捷预览(1.2.5 版本)

亲爱的用户们,本次 DataLight 平台发布了一个小版本更新(版本号:1.2.5),本次更新增加了组件分布快捷预览的功能,并修复若干已知问题。

2024-09-04 17:59:24 928

原创 Kerberos、LDAP、SSSD 部署示例教程

此篇文章主要用于示例如何在 Centos7.x 操作系统上手动部署 KERBEROS LDAP SSSD 服务,便于用户了解这 3 个服务的部署以及使用过程。如果需要实现自动部署,可前往 DataLight 官网下载 DataLight 平台,通过开源项目自动化部署上述服务。操作过程中,将假设未来会在完全离线的私有化环境中进行安装部署,因此,除了下载资源需要在有外网的节点上进行,其余操作,均可在完全离线的环境中进行,但其中需要确保系统的版本与依赖项是相关的。

2024-08-27 15:06:15 1000

原创 DataLight 版本更新,新增4A支持(1.2.4 版本)

DataLight 平台最新版本(1.2.4)发布!此次更新引入了系统层面 4A 支持,为后续的 Ranger 集成奠定了基础。同时,支持在部署 KERBEROS、LDAP、SSSD 后,通过修改大数据服务的配置文件,快速集成用户认证服务。

2024-08-27 14:52:14 1034

原创 DataLight 新增可部署服务 Kyuubi(DataLight 1.1.3 版本)

在本次更新中,DataLight 平台引入了对 KYUUBI 服务的支持。KYUUBI 是一个高性能的大数据查询引擎,能够显著提高大数据处理的效率和性能。通过在 DataLight 平台上部署 KYUUBI,用户可以利用其强大的查询和数据处理能力,进一步优化数据分析和处理流程。同时,我们还提供了 KYUUBI 的 Grafana Dashboard 和编译集成文档,帮助用户更快地上手和使用 KYUUBI 服务。

2024-08-06 14:56:05 1101

原创 DataLight 新增 NameNode 迁移功能(1.0.2 版本)

在分布式存储系统中,NameNode 负责管理 HDFS 文件系统的元数据,是系统的核心。为了确保系统的高可用性和可扩展性,能够灵活迁移 NameNode 是至关重要的。通过 NameNode 迁移功能,您可以在以下场景中受益:- **硬件维护和升级**:在不影响业务连续性的情况下,进行硬件维护或升级。- **负载均衡**:通过迁移 NameNode 到更有效的节点,分散负载,提升系统整体性能。- **节点变更**:因业务变动,需要将 NameNode 节点进行迁移时,可以快速通过该流程完成集群业务

2024-08-06 14:52:05 786

原创 DataLight 大数据平台 AI 分析功能逐步上线啦

AI 分析功能是 **DataLight** 通过集成先进的第三方大模型,为用户提供智能化的数据分析和配置优化服务。通过这一功能,您可以更深入地了解您的平台运维情况,从而做出更明智的业务决策。

2024-08-06 14:47:39 921

原创 DataLight 开源项目开发规划表

示例如下方内容所示。

2024-06-26 11:19:02 274

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除