- 博客(41)
- 收藏
- 关注
原创 Bigtop 从0开始(下)
BigTop的应用场景:1. BigTop通过提供预配置的Docker镜像,极大简化了在不同操作系统上编译大数据组件的rpm或deb包的过程,使之变得快捷且高效。2. BigTop集成了编译过程中所需的复杂依赖关系,有效解决了常见的编译错误,并且通过代码中的补丁确保了流畅的编译体验。这意味着,用户不再需要为官方包无法编译或搭建复杂的编译环境而感到困扰。3. BigTop还提供了对Apache Ambari的支持,使用户能够轻松打包与Ambari兼容、满足安装要求的大数据软件包。
2024-08-22 19:16:17
686
原创 Bigtop 从0开始(上)
1. BigTop通过提供预配置的Docker镜像,极大简化了在不同操作系统上编译大数据组件的rpm或deb包的过程,使之变得快捷且高效。2. BigTop集成了编译过程中所需的复杂依赖关系,有效解决了常见的编译错误,并且通过代码中的补丁确保了流畅的编译体验。这意味着,用户不再需要为官方包无法编译或搭建复杂的编译环境而感到困扰。3. BigTop还提供了对Apache Ambari的支持,使用户能够轻松打包与Ambari兼容、满足安装要求的大数据软件包。
2024-08-22 18:59:15
401
原创 DevOps入门(下)
DevOps 希望做到的是软件产品交付过程中 IT 工具链的打通,使得各个团队减少时间损 耗,更加高效地协同工作。专家们总结出了下面这个 DevOps 能力图,良好的闭环可以大大 增加整体的产出。
2024-08-21 14:26:30
476
原创 DevOps入门(上)
DevOps: Development 和 Operations 的组合DevOps 看作开发(软件工程)、技术运营和质量保障(QA)三者的交集。突出重视软件开发人员和运维人员的沟通合作,通过自动化流程来使得软件构建、测试、 发布更加快捷、频繁和可靠。
2024-08-21 14:17:41
512
原创 CentOS上安装和配置Docker与Docker Compose的详细指南
大家好,我是小阳,在这篇文章中,我将带大家一步步完成在CentOS系统上安装和配置Docker与Docker Compose的过程。通过这篇详细的指南,你将能够轻松配置Docker环境,并在日常开发和部署中享受其带来的便利。
2024-08-20 10:44:18
780
原创 Dinky教程--Flink CDC pipline整库同步Doris
Dinky 是一个基于 Apache Flink 的实时计算平台,它提供了一站式的 Flink 任务开发、运维、监控等功能。本教程一步一步的教你如何使用dinky运行CDC pipline任务实现整库同步Doris并自动建表功能。Starrocks同理
2024-08-19 11:04:39
1146
原创 Dinky手把手教程 - 集成K8s,提交Flink On K8s Application任务
Dinky 是一个基于 Apache Flink 的实时计算平台,它提供了一站式的 Flink 任务开发、运维、监控等功能。Kubernetes 是一个强大的容器编排平台,能够自动化应用的部署、扩展和管理。将 Flink 与 Kubernetes 集成,可以充分利用 Kubernetes 的优势,实现 Flink 任务的弹性伸缩、自动化部署和高可用性。
2024-08-19 10:41:52
763
原创 Dinky手把手教程 - 连接Flink Sql Cli控制台
Dinky 是一个开箱即用的一站式实时计算平台,以 Apache Flink 为基础,连接 OLAP 和数据湖等众多框架,致力于流批一体和湖仓一体的建设与实践。flink sql cli是flink 提供的一个sql执行工具,可以方便的进行sql预览,执行等操作
2024-08-16 11:39:45
1060
原创 Docker基础命令-网络(network)管理(Docker网络类型、创建与管理自定义网络、DNS与服务发现、网络隔离与安全、网络桥接与路由、高级网络特性)
Docker网络管理涉及从基础配置到高级策略的广泛内容,是构建稳定、可扩展的Docker化应用架构的关键。通过深入理解网络类型、配置自定义网络、优化DNS与服务发现机制、强化网络安全措施,掌握这些技巧,无论是单机环境还是分布式集群,都能确保容器间通信的顺畅与隔离,满足不同应用场景的需求。
2024-08-15 11:34:48
1131
原创 Dinky手把手教程-Docker快速部署
本教程使用三种不同的方式通过 Docker 完成 Dinky 的部署,如果你想要快速体验,推荐使用 standalone-server 镜像, 如果你想要体验比较完整的服务,推荐使用 docker-compose 启动服务。如果你已经有自己的数据库服务 你想要沿用这些基础服务,你可以参考沿用已有的 Mysql 、 Hadoop 和 Flink 服务完成部署。
2024-08-15 11:14:45
589
原创 Seatunnel-Web环境搭建
SeaTunnel Web是一个Web项目,提供对作业、调度、运行和监控功能的可视化管理。它基于 SeaTunnel 连接器 API 和 SeaTunnel Zeta 引擎开发。它是一个可以独立部署的 Web 项目。它也是SeaTunnel的一个子项目。欲了解更多信息,请参阅SeaTunnel Web。
2024-08-13 10:52:51
864
原创 Doris 夺命 30 连问!(下)
30 问最后一篇了,希望这 30 问能解答大家在使用 Apache Doris 或者选择 Apache Doris 的时候产生的各种疑虑。
2024-08-13 10:16:47
1126
原创 Doris 夺命 30 连问!(中)
这是继上次的 30 问上篇的中篇,也是 10 个问题,有些还是比较难回答的,欢迎大家在评论区或者私聊我来进行 battle~
2024-08-12 10:56:42
803
原创 Doris 夺命 30 连问!(上)
在前段时间和 Apache Doris 一个数据体量比较大的测试用户沟通过程中,对方的多达十几人的大数据架构师团队就关于 Apache Doris 的各种特性和自身业务场景提出了众多问题,个人感觉非常有探讨的价值,一起来看看,如果有异议或者意见,可以评论留言,也可以私聊~
2024-08-09 15:46:16
1055
原创 全面介绍 Apache Doris 数据灾备恢复机制及使用示例
Apache Doris 作为一款 OLAP 实时数据仓库,在越来越多的中大型企业中逐步占据着主数仓这样的重要位置,主数仓不同于 OLAP 查询引擎的场景定位,对于数据的灾备恢复机制有比较高的要求,本篇就让我们全面的介绍和示范如何利用这些特性能力构建集群数据的灾备恢复机制。
2024-08-09 12:59:29
1559
原创 网页版IntelliJ IDEA部署
今天要为大家带来一个黑科技——如何在云端部署和使用WEB版的IntelliJ IDEA,让你在任何地方都可以随心所欲地进行Java开发。这个方法特别适合那些用着老旧Windows电脑,部署项目时举步维艰的开发者们。
2024-08-08 10:23:47
1697
原创 看图学sql之 sql中的distinct
DISTINCT 关键字需要和 SELECT 语句一起使用,用来删除结果集中所有重复的记录,仅保留唯一的一条记录。
2024-08-02 09:44:51
351
原创 看图学sql之sql入门
想象一下,一个抽屉就是一个小数据库,里面放满了整理好的纸质表格,数据就乖乖地躺在这些表格的行和列里啦!市面上数据库千千万,MySQL、Oracle、SQL Server等但是操作他们的语言SQL,本质都是差不多的。SQL全称Structured Query Language(结构化查询语言),是操作关系数据库的标准语言,也是我们和数据库交互的桥梁。增:在数据库中增加新的数据 删:删掉我们不需要的数据 改:在原有的数据上做修改 查:根据一些条件,查找我们需要的数据。---写在文末---sql 的主要操作?
2024-07-29 16:02:07
704
原创 【在线工具推荐】正则开发工具-AI增强效率倍增
你可能不经常用到正则,但是你肯定知道它的强大,你可能经常需要它也想起它但又因其易懂更易忘的语法困扰对它望而却步。 为此我们开发了这个正则链式开发工具-。
2024-07-25 19:10:54
411
原创 数据分析师快速入行:知识路线详解
要想快速成为一名优秀的数据分析师,你需要系统学习并掌握以下几个核心部分的知识路线。本文将详细阐述每个部分的重要性、学习内容以及如何高效学习。
2024-07-18 10:36:48
949
原创 【在线工具推荐】StarRocks建表语句-Mysql转StarRocks-JSONl转StarRocks
你是否还在为手动编写建表语句而烦恼?现在有了 Starrock 建表神器,一切都变得简单了。让你省去繁琐的手动编写过程,减少枯燥无意义的重复劳动,提高你的生产效率。
2024-07-15 10:25:00
459
原创 每日使用技巧-DBeaver-SQL编辑器(上下)
DBeaver SQL编辑器功能按钮介绍:执行SQL语句、在新标签中执行SQL、执行SQL脚步、解释执行计划、SQL终端、显示执行日志、显示SQL变量、显示大纲、显示行号
2024-05-21 17:22:11
1735
原创 【在线工具推荐】Flink SQL Connector工具-目前支持的数据源类型有:MySQL、Kafka、Doris、StarRocks、Mongo,支持的连接方式有JDBC、CDC。
Flink SQL Connector工具支持根据不同数据源和连接方式可视化生成Flink SQL,目前支持的数据源类型有:MySQL、Kafka、Doris、StarRocks、Mongo,支持的连接方式有JDBC、CDC。
2024-05-20 17:57:12
542
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人