Doris镜像构建及容器编排

已于 2023-05-11 15:25:42 修改
阅读量629 收藏
点赞数
分类专栏： 容器化 文章标签： docker
于 2021-05-19 17:55:10 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_38251332/article/details/117038376
版权

Doris镜像构建

以构建完成的 doris镜像 ponylee/doris，starrocks镜像 ponylee/starrocks。

entrypoint.sh 脚本文件

#!/bin/bash

set -e

initFe(){
    echo "start doris fe"
    [ -d "${FE_META}" ] || mkdir -p ${FE_META}
    sed -i "s|^[[:space:]]*\$LIMIT \$JAVA \$JAVA_OPTS org.apache.doris.PaloFe.*|    exec \$LIMIT \$JAVA \$JAVA_OPTS org.apache.doris.PaloFe \${HELPER} \"\$@\"|g" ${DORIS_DIR}/fe/bin/start_fe.sh
    echo "priority_networks = ${FE_NETWORK}" >> ${DORIS_DIR}/fe/conf/fe.conf
    exec bash ${DORIS_DIR}/fe/bin/start_fe.sh
}

initBe(){
    echo "start doris be"
    [ -d "${BE_DATA}" ] || mkdir -p ${BE_DATA}
    sed -i "s@^storage_root_path.*@storage_root_path = ${DORIS_DIR}/be/data@g" ${DORIS_DIR}/be/conf/be.conf
    echo "priority_networks = ${BE_NETWORK}" >> ${DORIS_DIR}/be/conf/be.conf
    sed -i "s|^[[:space:]]*\$LIMIT \${DORIS_HOME}/lib/palo_be.*|    exec \$LIMIT \${DORIS_HOME}/lib/palo_be \"\$@\"|g" ${DORIS_DIR}/be/bin/start_be.sh

    #ENV FE_HOST, add be to fe
    #ENV BE_HOST
    COUNT=$(mysql -h${FE_HOST} -P9030 -uroot -e"SHOW PROC '/backends'\G;" | grep ${BE_HOST} | wc -l)
    if [ $COUNT -lt 1  ];
    then
        mysql -h${FE_HOST} -P9030 -uroot -e"ALTER SYSTEM ADD BACKEND \"${BE_HOST}:9050\";"
    fi
    exec bash ${DORIS_DIR}/be/bin/start_be.sh
}

printUsage() {
    echo -e "Usage: [ fe | be ]\n"
    printf "%-13s:  %s\n" "fe" "Doris master."
    printf "%-13s:  %s\n" "be" "Doris worker."
}

case "$1" in
    (fe)
        initFe
    ;;
    (be)
        initBe
    ;;
    (help)
        printUsage
        exit 1
    ;;
    (*)
        printUsage
        exit 1
    ;;
esac

Dockerfile

FROM centos:7
MAINTAINER pony

WORKDIR /opt

ADD ./DORIS-0.11.33.1-release.tar.gz ./jdk1.8.tar.gz /opt/

ENV DORIS_DIR /opt/output
ENV FE_LOG ${DORIS_DIR}/fe/log
ENV FE_META ${DORIS_DIR}/fe/palo-meta
ENV FE_TMP ${DORIS_DIR}/fe/temp_dir

ENV BE_LOG ${DORIS_DIR}/be/log
ENV BE_DATA ${DORIS_DIR}/be/data

ENV JAVA_HOME /opt/jdk1.8.0_271
ENV PATH $PATH:$JAVA_HOME/bin

# set the time zone
RUN rm -f /etc/localtime; ln -sf /usr/share/zoneinfo/Asia/Shanghai /etc/localtime

# install mysql client
RUN yum install -y mariadb.x86_64 mariadb-libs.x86_64 && yum clean all

COPY ./startup.sh /opt/startup.sh

VOLUME [ "${FE_LOG}","${FE_META}","${FE_TMP}","${BE_LOG}","${BE_DATA}" ]
EXPOSE 8030 8040

ENTRYPOINT ["/bin/bash","-x","entrypoint.sh"]

#CMD ["be/fe"]

其中DORIS-0.11.33.1-release.tar.gz、jdk1.8.tar.gz 根据实际需要去官网下载相应的版本

构建镜像

docker build -t doris:v1 ./

编排文件

doris-docker-compose.yml

version: '3'
services:

  fe:
    image: pony/doris:v4
    container_name: fe
    hostname: fe
    restart: always
    command: ["fe"]
    environment:
      FE_NETWORK: 192.17.1.30/24
    deploy:
      resources:
        limits:
          cpus: '2.00'
          memory: 5G
        reservations:
          cpus: '0.25'
          memory: 100M
    volumes:
      - /root/doris/fe/log:/opt/output/fe/log:rw
      - /root/doris/fe/palo-meta:/opt/output/fe/palo-meta:rw
      - /root/doris/fe/temp_dir:/opt/output/fe/temp_dir:rw
    ports:
      - "8030:8030"
    networks:
      bdpnet:
        ipv4_address: 192.17.1.30

  be01:
    image: pony/doris:v4
    container_name: be01
    hostname: be01
    restart: always
    command: [ "be" ]
    depends_on:
      - fe
    environment:
      FE_HOST: fe
      BE_HOST: be01
      BE_NETWORK: 192.17.1.31/24
    deploy:
      resources:
        limits:
          cpus: '2.00'
          memory: 5G
        reservations:
          cpus: '0.25'
          memory: 100M
    volumes:
      - /root/doris/be01/log:/opt/output/be/log:rw
      - /root/doris/be01/data:/opt/output/be/data:rw
    ports:
      - "8041:8040"
    networks:
      bdpnet:
        ipv4_address: 192.17.1.31

  be02:
    image: pony/doris:v4
    container_name: be02
    hostname: be02
    restart: always
    command: [ "be" ]
    depends_on:
      - fe
    environment:
      FE_HOST: fe
      BE_HOST: be02
      BE_NETWORK: 192.17.1.32/24
    deploy:
      resources:
        limits:
          cpus: '2.00'
          memory: 5G
        reservations:
          cpus: '0.25'
          memory: 100M
    volumes:
      - /root/doris/be02/log:/opt/output/be/log:rw
      - /root/doris/be02/data:/opt/output/be/data:rw
    ports:
      - "8042:8040"
    networks:
      bdpnet:
        ipv4_address: 192.17.1.32

#docker network create -d bridge --subnet 192.17.1.0/24 --gateway 192.17.1.1 bdpnet
networks:
  bdpnet:
    external: true

#volumes:
#  fe:
#  be01:
#  be02:

启动doris集群

docker-compose -f doris-docker-compose.yml up -d

k8s编排

fe/master编排

apiVersion: v1
kind: Service
metadata:
  name: bdp-doris-fe
  namespace: bdp
  labels:
    k8s-app: bdp-doris-fe
spec:
  ports:
    - name: tcp-8030-8030
      protocol: TCP
      port: 8030
      targetPort: 8030
    - name: tcp-9030-9030
      protocol: TCP
      port: 9030
      targetPort: 9030
    - name: tcp-9020-9020
      protocol: TCP
      port: 9020
      targetPort: 9020
  clusterIP: 11.254.120.1
  selector:
    k8s-app: bdp-doris-fe
---
# 创建Headless Service
apiVersion: v1
kind: Service
metadata:
  name: bdp-doris-fe-hs
  namespace: bdp
  labels:
    k8s-app: bdp-doris-fe
spec:
  ports:
    - name: tcp-8030-8030-fe-hs
      protocol: TCP
      port: 8030
      targetPort: 8030
    - name: tcp-9030-9030-fe-hs
      protocol: TCP
      port: 9030
      targetPort: 9030
    - name: tcp-9020-9020-fe-hs
      protocol: TCP
      port: 9020
      targetPort: 9020
  clusterIP: None
  selector:
    k8s-app: bdp-doris-fe
---
# 创建pv，使用CBS存储
apiVersion: v1
kind: PersistentVolume
metadata:
  name: bdp-doris-fe-pv  ##pv名称
spec:
  capacity:
    storage: 500Mi ## pv大小
  accessModes:
    - ReadWriteOnce ## pv读写类型，目前支持ReadWriteOnce和ReadOnlyMany
  mountOptions:
    - rw ##挂载类型有只读（ro）,读写{rw}，挂载类型和accessModes要对应起来
    - discard
  persistentVolumeReclaimPolicy: Retain
  storageClassName: mysql-local-storage ## 使用和mysql相同的sc
  local:
    path: /mnt/fe
  nodeAffinity:
    required:
      nodeSelectorTerms:
        - matchExpressions:
            - key: kubernetes.io/hostname
              operator: In
              values:
                - fe
---
#pvc
apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: bdp-doris-fe-pvc ##pvc名称
  namespace: bdp
spec:                ##pv的筛选条件
  accessModes:
     - ReadWriteOnce ## pv读写模式
  volumeMode: Filesystem
  volumeName: bdp-doris-fe-pv  ##指定pv名称，此为可选字段，当指定特定的pv名称时，只有对应的名称的pv能被bound
  resources:
     requests:
       storage: 150Gi  ##pv大小
---
# 创建StatefulSets
apiVersion: apps/v1
kind: StatefulSet
metadata:
  name: bdp-doris-fe
spec:
  replicas: 1
  selector:
    matchLabels:
      k8s-app: bdp-doris-fe
  serviceName: bdp-doris-fe-hs
  updateStrategy:
    type: RollingUpdate
  podManagementPolicy: OrderedReady
  template:
    metadata:
      labels:
        app: dbp-doris
        k8s-app: bdp-doris-fe
    spec:
      nodeSelector:
        kubernetes.io/hostname: 192.168.0.15
      restartPolicy: Always
      hostNetwork: true
      dnsPolicy: ClusterFirstWithHostNet
      containers:
      - name: bdp-doris-fe
        image: harbor.dcos.xixian.unicom.local/bdp/doris:v4
        imagePullPolicy: Always
        args:
        - fe
        env:
        - name: FE_NETWORK
          value: 192.168.0.15/24  # fe 的 hostname，需要根据实际情况修改
        resources:
          limits:
            cpu: "4"
            memory: "8Gi"
          requests:
            cpu: 250m
            memory: "200Mi"
        ports:
        - containerPort: 8030
          name: fe-http-port
        - containerPort: 9030
          name: fe-query-port
        - containerPort: 9020
          name: fe-rpc-port
        volumeMounts:
        - mountPath: /opt/output/fe/palo-meta
          name: bdp-doris-fe-pvc
          subPath: palo-meta
        - mountPath: /opt/output/fe/temp_dir
          name: bdp-doris-fe-pvc
          subPath: temp_dir
        - mountPath: /opt/output/fe/log
          name: bdp-doris-fe-pvc
          subPath: log
      volumes:
      - name: bdp-doris-fe-pvc
        persistentVolumeClaim:
          claimName: bdp-doris-fe-pvc

be/work编排

apiVersion: v1
kind: Service
metadata:
  name: bdp-doris-be01-hs
  namespace: bdp
  labels:
    k8s-app: bdp-doris-be01
spec:
  ports:
    - name: tcp-8040-8040-be01-hs
      protocol: TCP
      port: 8040
      targetPort: 8040
    - name: tcp-9050-9050-be01-hs
      protocol: TCP
      port: 9050
      targetPort: 9050
    - name: tcp-9060-9060-be01-hs
      protocol: TCP
      port: 9060
      targetPort: 9060
    - name: tcp-9070-9070-be01-hs
      protocol: TCP
      port: 9070
      targetPort: 9070
  clusterIP: None
  selector:
    k8s-app: bdp-doris-be01
---
apiVersion: v1
kind: Service
metadata:
  name: bdp-doris-be02-hs
  namespace: bdp
  labels:
    k8s-app: bdp-doris-be02
spec:
  ports:
    - name: tcp-8040-8040-be02-hs
      protocol: TCP
      port: 8040
      targetPort: 8040
    - name: tcp-9050-9050-be02-hs
      protocol: TCP
      port: 9050
      targetPort: 9050
    - name: tcp-9060-9060-be02-hs
      protocol: TCP
      port: 9060
      targetPort: 9060
    - name: tcp-9070-9070-be02-hs
      protocol: TCP
      port: 9070
      targetPort: 9070
  clusterIP: None
  selector:
    k8s-app: bdp-doris-be02
---
apiVersion: v1
kind: Service
metadata:
  name: bdp-doris-be03-hs
  namespace: bdp
  labels:
    k8s-app: bdp-doris-be03
spec:
  ports:
    - name: tcp-8040-8040-be03-hs
      protocol: TCP
      port: 8040
      targetPort: 8040
    - name: tcp-9050-9050-be03-hs
      protocol: TCP
      port: 9050
      targetPort: 9050
    - name: tcp-9060-9060-be03-hs
      protocol: TCP
      port: 9060
      targetPort: 9060
    - name: tcp-9070-9070-be03-hs
      protocol: TCP
      port: 9070
      targetPort: 9070
  clusterIP: None
  selector:
    k8s-app: bdp-doris-be03
---
# be01 pv
apiVersion: v1
kind: PersistentVolume
metadata:
  name: bdp-doris-be01-pv  ##pv名称
spec:
  capacity:
    storage: 500Mi ## pv大小
  accessModes:
    - ReadWriteOnce ## pv读写类型，目前支持ReadWriteOnce和ReadOnlyMany
  mountOptions:
    - rw ##挂载类型有只读（ro）,读写{rw}，挂载类型和accessModes要对应起来
    - discard
  persistentVolumeReclaimPolicy: Retain
  storageClassName: mysql-local-storage ## 使用和mysql相同的sc
  local:
    path: /mnt/be01
  nodeAffinity:
    required:
      nodeSelectorTerms:
        - matchExpressions:
            - key: kubernetes.io/hostname
              operator: In
              values:
                - be01
---
# be02 pv
apiVersion: v1
kind: PersistentVolume
metadata:
  name: bdp-doris-be02-pv  ##pv名称
spec:
  capacity:
    storage: 500Mi ## pv大小
  accessModes:
    - ReadWriteOnce ## pv读写类型，目前支持ReadWriteOnce和ReadOnlyMany
  mountOptions:
    - rw ##挂载类型有只读（ro）,读写{rw}，挂载类型和accessModes要对应起来
    - discard
  persistentVolumeReclaimPolicy: Retain
  storageClassName: mysql-local-storage ## 使用和mysql相同的sc
  local:
    path: /mnt/be02
  nodeAffinity:
    required:
      nodeSelectorTerms:
        - matchExpressions:
            - key: kubernetes.io/hostname
              operator: In
              values:
                - be02
---
# be03 pv
apiVersion: v1
kind: PersistentVolume
metadata:
  name: bdp-doris-be03-pv  ##pv名称
spec:
  capacity:
    storage: 500Mi ## pv大小
  accessModes:
    - ReadWriteOnce ## pv读写类型，目前支持ReadWriteOnce和ReadOnlyMany
  mountOptions:
    - rw ##挂载类型有只读（ro）,读写{rw}，挂载类型和accessModes要对应起来
    - discard
  persistentVolumeReclaimPolicy: Retain
  storageClassName: mysql-local-storage ## 使用和mysql相同的sc
  local:
    path: /mnt/be03
  nodeAffinity:
    required:
      nodeSelectorTerms:
        - matchExpressions:
            - key: kubernetes.io/hostname
              operator: In
              values:
                - be03
---
# be01 pvc
apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: bdp-doris-be01-pvc ##pvc名称
  namespace: bdp
spec:                ##pv的筛选条件
  accessModes:
     - ReadWriteOnce ## pv读写模式
  volumeMode: Filesystem
  volumeName: bdp-doris-be01-pv  ##指定pv名称，此为可选字段，当指定特定的pv名称时，只有对应的名称的pv能被bound
  resources:
     requests:
       storage: 500Gi  ##pv大小
---
# be02 pvc
apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: bdp-doris-be02-pvc ##pvc名称
  namespace: bdp
spec:                ##pv的筛选条件
  accessModes:
     - ReadWriteOnce ## pv读写模式
  volumeMode: Filesystem
  volumeName: bdp-doris-be02-pv  ##指定pv名称，此为可选字段，当指定特定的pv名称时，只有对应的名称的pv能被bound
  resources:
     requests:
       storage: 500Gi  ##pv大小
---
# be03 pvc
apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: bdp-doris-be03-pvc ##pvc名称
  namespace: bdp
spec:                ##pv的筛选条件
  accessModes:
     - ReadWriteOnce ## pv读写模式
  volumeMode: Filesystem
  volumeName: bdp-doris-be03-pv  ##指定pv名称，此为可选字段，当指定特定的pv名称时，只有对应的名称的pv能被bound
  resources:
     requests:
       storage: 500Gi  ##pv大小
---
# be01
apiVersion: apps/v1
kind: StatefulSet
metadata:
  name: bdp-doris-be01
spec:
  replicas: 1
  selector:
    matchLabels:
      k8s-app: bdp-doris-be01
  serviceName: bdp-doris-be01-hs
  updateStrategy:
    type: RollingUpdate
  podManagementPolicy: OrderedReady
  template:
    metadata:
      labels:
        app: dbp-doris
        k8s-app: bdp-doris-be01
    spec:
      nodeSelector:
        kubernetes.io/hostname: 192.168.0.4
      restartPolicy: Always
      hostNetwork: true
      dnsPolicy: ClusterFirstWithHostNet
      containers:
      - name: bdp-doris-be01
        image:  harbor.dcos.xixian.unicom.local/bdp/doris:v4
        imagePullPolicy: Always
        args:
        - be
        env:
        - name: FE_HOST
          value: 192.168.0.15  # fe 的 hostname，需要根据实际情况修改
        - name: BE_HOST
          value: 192.168.0.4 # be 的 hostname，需要根据实际情况修改
        - name: BE_NETWORK
          value: 192.168.0.4/24  # 指定 fe 通信的网卡
        resources:
          limits:
            cpu: "8"
            memory: "16Gi"
          requests:
            cpu: 250m
            memory: "100Mi"
        ports:
        - containerPort: 8040
          name: be-ws-port
        - containerPort: 9050
          name: be-hs-port
        - containerPort: 9060
          name: be-port
        - containerPort: 9070
          name: be-rpc-port
        volumeMounts:
        - mountPath: /opt/output/be/data
          name: bdp-doris-be01-pvc
          subPath: data
        - mountPath: /opt/output/be/log
          name: bdp-doris-be01-pvc
          subPath: log
      volumes:
      - name: bdp-doris-be01-pvc
        persistentVolumeClaim:
          claimName: bdp-doris-be01-pvc
---
# be02
apiVersion: apps/v1
kind: StatefulSet
metadata:
  name: bdp-doris-be02
spec:
  replicas: 1
  selector:
    matchLabels:
      k8s-app: bdp-doris-be02
  serviceName: bdp-doris-be02-hs
  updateStrategy:
    type: RollingUpdate
  podManagementPolicy: OrderedReady
  template:
    metadata:
      labels:
        app: dbp-doris
        k8s-app: bdp-doris-be02
    spec:
      nodeSelector:
        kubernetes.io/hostname: 192.168.0.12
      restartPolicy: Always
      hostNetwork: true
      dnsPolicy: ClusterFirstWithHostNet
      containers:
      - name: bdp-doris-be02
        image: harbor.dcos.xixian.unicom.local/bdp/doris:v4
        imagePullPolicy: Always
        args:
        - be
        env:
        - name: FE_HOST
          value: 192.168.0.15  # fe 的 hostname，需要根据实际情况修改
        - name: BE_HOST
          value: 192.168.0.12 # be 的 hostname，需要根据实际情况修改
        - name: BE_NETWORK
          value: 192.168.0.12/24  # 指定 fe 通信的网卡
        resources:
          limits:
            cpu: "8"
            memory: "16Gi"
          requests:
            cpu: 250m
            memory: "100Mi"
        ports:
        - containerPort: 8040
          name: be-ws-port
        - containerPort: 9050
          name: be-hs-port
        - containerPort: 9060
          name: be-port
        - containerPort: 9070
          name: be-rpc-port
        volumeMounts:
        - mountPath: /opt/output/be/data
          name: bdp-doris-be02-pvc
          subPath: data
        - mountPath: /opt/output/be/log
          name: bdp-doris-be02-pvc
          subPath: log
      volumes:
      - name: bdp-doris-be02-pvc
        persistentVolumeClaim:
          claimName: bdp-doris-be02-pvc
---
# be03
apiVersion: apps/v1
kind: StatefulSet
metadata:
  name: bdp-doris-be03
spec:
  replicas: 1
  selector:
    matchLabels:
      k8s-app: bdp-doris-be03
  serviceName: bdp-doris-be03-hs
  updateStrategy:
    type: RollingUpdate
  podManagementPolicy: OrderedReady
  template:
    metadata:
      labels:
        app: dbp-doris
        k8s-app: bdp-doris-be03
    spec:
      nodeSelector:
        kubernetes.io/hostname: 192.168.0.13
      restartPolicy: Always
      hostNetwork: true
      dnsPolicy: ClusterFirstWithHostNet
      containers:
      - name: bdp-doris-be03
        image: harbor.dcos.xixian.unicom.local/bdp/doris:v4
        imagePullPolicy: Always
        args:
        - be
        env:
        - name: FE_HOST
          value: 192.168.0.15  # fe 的 hostname，需要根据实际情况修改
        - name: BE_HOST
          value: 192.168.0.13 # be 的 hostname，需要根据实际情况修改
        - name: BE_NETWORK
          value: 192.168.0.13/24  # 指定 fe 通信的网卡
        resources:
          limits:
            cpu: "8"
            memory: "16Gi"
          requests:
            cpu: 250m
            memory: "100Mi"
        ports:
        - containerPort: 8040
          name: be-ws-port
        - containerPort: 9050
          name: be-hs-port
        - containerPort: 9060
          name: be-port
        - containerPort: 9070
          name: be-rpc-port
        volumeMounts:
        - mountPath: /opt/output/be/data
          name: bdp-doris-be03-pvc
          subPath: data
        - mountPath: /opt/output/be/log
          name: bdp-doris-be03-pvc
          subPath: log
      volumes:
      - name: bdp-doris-be03-pvc
        persistentVolumeClaim:
          claimName: bdp-doris-be03-pvc

关键技术点

优先网络

在Kubernetes多网卡等容器化编排环境中因为有多网卡的存在，通过固定IP的形式部署Doris集群，同一个主机可能存在多个不同的 ip。当前Doris实例并不能自动识别可用 IP。所以当遇到部署主机上有多个IP时，必须通过优先网络（priority_networks）来强制指定正确的 IP（即容器编排是传入的IP地址）。否则doris实例会随机去绑定一个ip，这样以来在当前Doris实例故障恢复时就不能再与当前Doris集群建立连接。

集群实例宕机恢复机制

通过强制指定优先网络和磁盘挂载来实现Doris集群中的实例宕机故障恢复

注意

第一次启动fe一定要用–helper启动，否则启动不成功，无法加入集群，必须借助已经启动的FE节点（master或者follower）来扩容新的节点,helper 不能指向 新FE节点 自身
当新的fe第一次启动失败，或无法加入集群时。修改配置后，一定要先清空fe的meta路径，然后再重启fe，參考。

PONY LEE
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Doris（2）：Doris编译部署
u013938578的博客
04-11 758
这个是官方文档推荐的，可以非常方便顺利的编译源码，如果需要快速部署的，可以使用这种方式。这种方式的优点就是不用配置环境变量，也不用考虑各种版本问题，进入开发镜像系统后直接下载 doris 源码编译即可。将容器中的maven下载的包保存到宿主机本地指定的文件中，避免重复下载，同时会将编译的Doris文件保存到宿主机本地指定的文件，方便部署。拉取Doris官方提供的Docker镜像，目前可用版本有：build-env、build-env-1.1、build-env-1.2。开启之后, 就在容器内了。
Doris--基础--2.1--部署--源码编译(使用Docker开发镜像)
zhou920786312的博客
03-05 1097
从 build-env-1.3.1 的docker镜像起，同时包含了 OpenJDK 8 和 OpenJDK 11，并且默认使用 OpenJDK 11 编译。如果你是第一次使用 build-env-for-0.15.0 或之后的版本，第一次编译的时候要使用如下命令。请确保编译使用的 JDK 版本和运行时使用的 JDK 版本一致，否则会导致非预期的运行错误。编译完成后，产出文件在 output/ 目录中。编译完成后，产出文件在 output/ 目录中。因为我的机器是支持的，所以我的编译命令如下。
Docker部署Doris超详细教程
高性价比服务器就选：蓝易云
08-02 2618
请注意，以上教程提供了一个基本的Docker部署Doris的指南。具体的配置和部署选项可能会因版本和需求而有所不同。建议参考Doris的官方文档和其他权威资源，以获取更详细的配置和部署指导。Doris是一款开源的分布式数据仓库，适用于大规模数据存储和分析。替换为包含Doris配置文件的本地目录，将。替换为Doris数据目录的本地目录。
Apache Doris 之 Docker 部署篇
欲望以提升热忱 毅力以磨平高山
06-18 1626
本文主要讲了如何构建一个单机版的 Doris 以便于学习使用，最后演示了官网的一个小示例仅供参考。遇到这些问题无解的时候给人一种深深的无力挫败感，如按照官网说的去做，可能真的就是从入门到放弃了。我花费了 4 个多小时踩了各种坑才最终将环境问题解决，希望大家可以避过这些坑，保持对学习的热忱，加油。
Docker-compose 进行Doris自动化编排部署
何以问_的博客
06-23 1997
在 wsl 使用 docker-compose 进行Doris自动化编排部署
基于Flink+Doris构建高性能高扩展的全端实时数据仓库视频教程
06-21
基于Flink+Doris构建高性能高扩展的全端实时数据仓库视频教程 课程具体数仓报表应用指标包括：实时大屏分析、流量分析、订单分析、商品分析、商家分析等，数据涵盖全端（PC、移动、小程序）应用，与互联网企业大数据...
编译运行doris 的镜像
07-31
编译运行doris 的镜像
基于Flink+Doris构建电商实时数据分析平台（PC、移动、小程序）
05-19
本课程以“基于Flink+Doris构建电商实时数据分析平台（PC、移动、小程序）”为主题，重点讲解如何利用Apache Flink和Doris两大技术工具，实现全端（PC、移动、小程序）的实时数据处理与分析。 Apache Flink是一款...
Doris应用指南Doris
05-06
Doris应用指南Doris
Apache Doris
最新发布
07-20
### Apache Doris 知识点详解 #### 一、Apache Doris 概述 - **起源与发展**：Apache Doris 最初由百度大数据...此外，其简洁的架构设计和强大的功能特性，使其成为企业和开发者在构建数据分析平台时的一个优秀选择。
Windows系统下通过docker部署doris集群
weixin_55577709的博客
05-09 1884
在windows系统中通过docker部署doris集群以及遇到过的一些问题
Doris进阶——初识Doris_FE、BE、BROKER的扩缩容
weixin_59812175的博客
06-15 9376
Doris的简单介绍以及FE、BE、BROKER的扩缩容
Doris集群环境搭建
Learning_xzj的博客
10-18 4166
首页 - Apache DorisJava语言开发，存储和维护集群的元数据，负责接收和解析用户的查询请求，规划查询计化，调度查询结果。C++语言开发，Doris 系统的计算和存储节点，根据FE生成的物理执行计划，然后进行查询（分布式，多节点并行执行查询，统一汇总），同时BE还会将数据存储为多副本。BrokerBroker 为一个独立的无状态进程。封装了文件系统接口，提供 Doris 读取远端存储系统中文件的能力，包括HDFS，S3，BOS等。Doris端口列表Doris镜像版本与编译环境对应关系。
Doris 编译安装(完整版)
@羲凡—只为更好的活着
12-16 6043
@羲凡——只为了更好的活着 Doris 编译安装(完整版) 前期准备 安装java8、mysql、docker 安装java8、mysql 这个基本操作，晚上也有很多例子，我就不赘述了。 安装docker，这有两个博客拿走不谢(Centos7和Ubuntu) 集群规划 可能有小白会问，为啥只有 FE-Follower ，却没有FE-Leader？因为Leader是从Follower中选举出来的，如果自由一个Follower ，那么它就呗选举为Leader hostname FE-Follower F
Doris学习笔记之介绍、编译安装与部署
四国棋客
06-25 1230
Apache Doris是一个现代化的MPP（Massively Parallel Processing，即大规模并行处理）分析型数据库产品。仅需亚秒级响应时间即可获得查询结果，有效地支持实时数据分析。 Apache Doris的分布式架构非常简洁，易于运维，并且可以支持10PB以上的超大数据集...
使用 Docker 开发镜像编译Doris0.12.0（采坑）
TRX的博客
03-31 1493
跟着Doris官网（官网：doris0.12.0）使用Docker镜像编译Doris0.12.0时遇到一些问题，记录一下~ 一、编译Doris 1.下载Docker 选择Doris版本对应的镜像版本，这里我的Doris版本是0.12.0。 docker pull apachedoris/doris-dev:build-env-1.2 ...
docker解决时间不同步的问题
917058965
04-04 968
docker run -d -p 3306:3306 -v /etc/timezone:/etc/timezone:ro mysql:5.6或者在dockerfile中volumes: - "/etc/timezone:/etc/timezone:ro" - "/etc/localtime:/etc/localtime:ro"
Doris是什么？
点点的博客
03-28 5716
一、什么是Doris Doris 是一个 MPP 的 OLAP 系统，主要整合了 Google Mesa（数据模型），Apache Impala（MPP Query Engine) 和 Apache ORCFile (存储格式，编码和压缩) 的技术。 ...
DORIS软件InSAR数据处理详解及应用
"这篇文档是关于DORIS软件的InSAR数据处理流程的说明，主要涉及DORIS软件的使用、版本信息以及用户协议。DORIS软件主要用于科学研究，其版本为3.16，由代尔夫特理工大学的雷达团队修订并提供。文档描述了软件在干涉...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值