Doris FE启动流程源码详细解析

置顶

齐木木9406

已于 2022-04-23 15:45:03 修改

阅读量2.8k

点赞数 1

分类专栏： Apache Doris 文章标签：大数据 big data 数据库

于 2022-04-17 17:08:10 首次发布

本文链接：https://blog.csdn.net/qq_42200605/article/details/124232478

版权

本文详细解析Apache Doris的FE启动流程，包括初始化Catalog、创建QeServer、FeServer和HttpServer。同时，探讨了Catalog的元数据处理，如Elog回放、事务清理和监听线程状态。此外，还介绍了Doris的非阻塞IO模型和使用SpringBoot提供Rest API服务。

摘要由CSDN通过智能技术生成

Doris FE启动流程源码详细解析

一、简介

Apache Doris是一个现代化的MPP分析型数据库产品。仅需亚秒级响应时间即可获得查询结果，有效地支持实时数据分析。Apache Doris的分布式架构非常简洁，易于运维，并且可以支持10PB以上的超大数据集。

Apache Doris可以满足多种数据分析需求，例如固定历史报表，实时数据分析，交互式数据分析和探索式数据分析等。令您的数据分析工作更加简单高效！

二、名词解释

FE：Frontend，即 Doris 的前端节点。主要负责接收和返回客户端请求、元数据以及集群管理、查询计划生成等工作。
BE：Backend，即 Doris 的后端节点。主要负责数据存储与管理、查询计划执行等工作。
bdbje：Oracle Berkeley DB Java Edition (opens new window)。在 Doris 中，我们使用 bdbje 完成元数据操作日志的持久化、FE 高可用等功能。

三、流程图

在这里插入图片描述

四、源码分析

下载Doris源码详细步骤：https://doris.apache.org/zh-CN/developer-guide/fe-idea-dev.html#_1-%E7%8E%AF%E5%A2%83%E5%87%86%E5%A4%87

Doris FE启动步骤

我们先看看 FE启动类代码：

if (Strings.isNullOrEmpty(dorisHomeDir)) {
        System.err.println("env DORIS_HOME is not set.");
        return;
    }

    if (Strings.isNullOrEmpty(pidDir)) {
        System.err.println("env PID_DIR is not set.");
        return;
    }

    CommandLineOptions cmdLineOpts = parseArgs(args);

    try {
        // 创建 pid 文件
        if (!createAndLockPidFile(pidDir + "/fe.pid")) {
            throw new IOException("pid file is already locked.");
        }

        // 初始化 config文件
        Config config = new Config();
        config.init(dorisHomeDir + "/conf/fe.conf");
        // Must init custom config after init config, separately.
        // Because the path of custom config file is defined in fe.conf
        config.initCustom(Config.custom_config_dir + "/fe_custom.conf");

        LdapConfig ldapConfig = new LdapConfig();
        if (new File(dorisHomeDir + "/conf/ldap.conf").exists()) {
            ldapConfig.init(dorisHomeDir + "/conf/ldap.conf");
        }

        // check it after Config is initialized, otherwise the config 'check_java_version' won't work.
        if (!JdkUtils.checkJavaVersion()) {
            throw new IllegalArgumentException("Java version doesn't match");