Dinky 开源项目教程

Dinky 开源项目教程

dinkyDinky is an out-of-the-box, one-stop, real-time computing platform dedicated to the construction and practice of Unified Streaming & Batch and Unified Data Lake & Data Warehouse. Based on Apache Flink, Dinky provides the ability to connect many big data frameworks including OLAP and Data Lake.项目地址:https://gitcode.com/gh_mirrors/di/dinky

1. 项目的目录结构及介绍

Dinky 项目的目录结构如下:

dinky/
├── bin/
│   ├── start.sh
│   └── stop.sh
├── conf/
│   ├── application.yml
│   └── logback.xml
├── docs/
│   ├── README.md
│   └── CONTRIBUTING.md
├── lib/
│   └── dinky-core.jar
├── sql/
│   └── dinky.sql
└── web/
    └── index.html

目录介绍

  • bin/: 包含项目的启动和停止脚本。
  • conf/: 包含项目的配置文件。
  • docs/: 包含项目的文档文件。
  • lib/: 包含项目的核心库文件。
  • sql/: 包含项目的 SQL 脚本。
  • web/: 包含项目的 Web 界面文件。

2. 项目的启动文件介绍

bin/ 目录下,有两个主要的启动文件:

  • start.sh: 用于启动 Dinky 项目。
  • stop.sh: 用于停止 Dinky 项目。

启动步骤

  1. 打开终端。
  2. 导航到 dinky/bin/ 目录。
  3. 运行 ./start.sh 启动项目。

3. 项目的配置文件介绍

conf/ 目录下,有两个主要的配置文件:

  • application.yml: 包含项目的核心配置,如数据库连接、端口等。
  • logback.xml: 包含项目的日志配置。

配置示例

application.yml
server:
  port: 8080

spring:
  datasource:
    url: jdbc:mysql://localhost:3306/dinky
    username: root
    password: root
logback.xml
<configuration>
    <appender name="STDOUT" class="ch.qos.logback.core.ConsoleAppender">
        <encoder>
            <pattern>%d{yyyy-MM-dd HH:mm:ss} %-5level %logger{36} - %msg%n</pattern>
        </encoder>
    </appender>

    <root level="info">
        <appender-ref ref="STDOUT" />
    </root>
</configuration>

以上是 Dinky 开源项目的教程,包含了项目的目录结构、启动文件和配置文件的介绍。希望对你有所帮助!

dinkyDinky is an out-of-the-box, one-stop, real-time computing platform dedicated to the construction and practice of Unified Streaming & Batch and Unified Data Lake & Data Warehouse. Based on Apache Flink, Dinky provides the ability to connect many big data frameworks including OLAP and Data Lake.项目地址:https://gitcode.com/gh_mirrors/di/dinky

Dinky是一个开箱即用的一站式实时计算平台,基于Apache Flink,并连接了OLAP和数据湖等多个框架,致力于实现流批一体和湖仓一体的建设和实践。 Dinky还提供了FlinkSQL可视化工具,方便用户进行Flink的可视化操作。 在使用Dinky之前,需要通过Dinky的可视化界面注册中心来添加Flink的环境。对于单机最简环境,我们可以按照以下步骤进行配置和启动: 1. 解压Flink安装包:使用命令tar -xzf flink-1.14.6-bin-scala_2.12.tgz进行解压,然后进入解压后的目录:cd flink-1.14.6。 2. 修改配置文件:打开配置文件flink-1.14.6/conf/flink-conf.yaml,将其中的相关配置项修改为本机的IP地址和位置,如jobmanager.rpc.address和taskmanager.host。还可以根据需求修改其他配置项,比如内存大小和任务槽数量等。 3. 添加连接器:将需要使用的Flink连接器(如flink-sql-connector-kafka_2.12-1.14.6.jar、flink-sql-connector-elasticsearch7_2.12-1.14.6.jar、flink-sql-connector-mysql-cdc-2.3.0.jar等)放到flink-1.14.6/lib/目录下。 4. 启动集群:执行命令./start-cluster.sh来启动Flink集群。 这样,你就可以开始使用Dinky和Flink进行实时计算了。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* *3* [基于 Dinky + FlinkSQL + Flink CDC 同步 MySQL 数据到 Elasticsearch、Kafka](https://blog.csdn.net/MHXSH_1_0/article/details/131072318)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_1"}}] [.reference_item style="max-width: 100%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

宣连璐Maura

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值