如何使用Docker容器部署ApacheDoris并实现分布式查询

小雪酱_7262

小雪酱_7262

2026-05-18

875人浏览

原创

用 Docker 部署 Apache Doris 实现分布式查询,核心是启动 1 个 FE 和 2 个 BE 容器,共用 bridge 网络并正确配置 FE_SERVERS 与 BE_ADDR;宿主机必须提前设置 vm.max_map_count=2000000,BE 才能注册成功并支持分布式查询。

如何使用docker容器部署apachedoris并实现分布式查询

用 Docker 部署 Apache Doris 并实现分布式查询,核心在于正确启动 FE(Frontend)和 BE(Backend)两个角色,并确保它们能互相发现、注册成功。单机上通过容器编排模拟分布式行为是完全可行的,不需要多台物理机。

必须提前配置的系统参数

Doris 的 BE 进程对 Linux 内存映射区域数量敏感,宿主机必须调高 vm.max_map_count,否则 BE 启动失败或状态异常:

  • 执行命令临时生效:sudo sysctl -w vm.max_map_count=2000000
  • 写入配置永久生效:echo "vm.max_map_count=2000000" | sudo tee -a /etc/sysctl.conf && sudo sysctl -p
  • 验证是否生效:sysctl vm.max_map_count,输出应为 2000000

使用 docker-compose 部署最小分布式集群

推荐采用 1 个 FE + 2 个 BE 的结构——这是功能完整、资源可控、又能体现“分布式查询”特性的最小组合。所有服务在同一台机器运行,但彼此独立,BE 会自动向 FE 注册并参与数据存储与计算分发。

创建 docker-compose.yml,内容如下:

version: '3.8'
services:
  doris-fe:
    image: apache/doris:2.0.0-fe-x86_64
    container_name: doris-fe
    environment:
      - FE_SERVERS=fe1:127.0.0.1:9010
      - FE_ID=1
    ports:
      - "8030:8030"  # Web UI
      - "9020:9020"  # RPC
      - "9030:9030"  # MySQL protocol
      - "9010:9010"  # Edit log
    volumes:
      - ./fe/conf:/opt/doris-fe/conf
      - ./fe/log:/opt/doris-fe/log
      - ./fe/data:/opt/doris-fe/doris-meta
    networks:
      - doris-net
<p>doris-be1:
image: apache/doris:2.0.0-be-x86_64
container_name: doris-be1
environment:</p>
  • FE_SERVERS=fe1:127.0.0.1:9010
  • BE_ADDR=127.0.0.1:9050 ports:
  • "8040:8040"
  • "9050:9050"
  • "9060:9060" volumes:
  • ./be1/conf:/opt/doris-be/conf
  • ./be1/log:/opt/doris-be/log
  • ./be1/data:/opt/doris-be/storage depends_on:
  • doris-fe networks:
  • doris-net

doris-be2: image: apache/doris:2.0.0-be-x86_64 container_name: doris-be2 environment:

  • FE_SERVERS=fe1:127.0.0.1:9010
  • BE_ADDR=127.0.0.1:9051 ports:
  • "8041:8040"
  • "9051:9050"
  • "9061:9060" volumes:
  • ./be2/conf:/opt/doris-be/conf
  • ./be2/log:/opt/doris-be/log
  • ./be2/data:/opt/doris-be/storage depends_on:
  • doris-fe networks:
  • doris-net

networks: doris-net: driver: bridge

关键点说明:

Docker Compose Optimizer
Docker Compose Optimizer

优化 Docker Compose 配置,适用于开发和生产环境——审计服务、网络、卷、健康检查和资源管理。

下载
  • 两个 BE 使用不同端口映射(如 9050/9051),避免宿主机端口冲突
  • BE_ADDR 必须设为容器内可解析的地址(127.0.0.1 在容器内即本机),且与 FE 的 FE_SERVERS 中 IP 和端口一致
  • 所有容器共用 doris-net 网络,保障内部通信;FE 和 BE 之间不依赖宿主机 localhost,而是走 Docker 内网

验证分布式查询能力

集群启动后,需确认 BE 已成功加入并能协同处理查询:

  • 启动命令:docker-compose up -d,等待约 2–3 分钟
  • 检查状态:docker-compose ps,所有服务应显示 Up
  • 连接 MySQL 客户端:mysql -h 127.0.0.1 -P 9030 -u root
  • 执行诊断 SQL:
-- 查看前端节点(应有 1 行,Join 和 Alive 均为 true)
SELECT host, join, alive FROM frontends();
<p>-- 查看后端节点(应有 2 行,Alive 均为 true)
SELECT host, port, alive FROM backends();</p><p>-- 创建测试表(Doris 自动按 BE 数量分片)
CREATE TABLE test_dist (
id BIGINT,
name STRING,
dt DATE
) DISTRIBUTED BY HASH(id) BUCKETS 10;</p><p>-- 插入少量数据
INSERT INTO test_dist VALUES (1, 'Alice', '2026-05-07'), (2, 'Bob', '2026-05-07');</p><p>-- 执行查询(FE 会将任务拆解,调度到多个 BE 并行执行)
SELECT COUNT(*) FROM test_dist;
</p>

若 backends() 返回两行且 alive=true,且 COUNT(*) 查询能秒级返回结果,即表明分布式查询链路已通。

常见问题排查提示

如果 BE 显示 alive=false 或无法注册:

  • 检查宿主机 vm.max_map_count 是否真正生效(不是容器内,是 Docker 宿主机)
  • 确认 docker-compose.yml 中两个 BE 的 BE_ADDR 和端口不重复,且与各自 ports 映射逻辑一致
  • 查看 BE 日志:docker logs doris-be1,重点搜索 register to FE 或 failed to connect
  • 确保没有防火墙或 SELinux 阻断容器间通信(Docker bridge 网络通常默认放行)

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

docker apache

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
什么是分布式
什么是分布式

分布式是一种计算和数据处理的方式,将计算任务或数据分散到多个计算机或节点中进行处理。本专题为大家提供分布式相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.11

2093

5

分布式和微服务的区别
分布式和微服务的区别

分布式和微服务的区别在定义和概念、设计思想、粒度和复杂性、服务边界和自治性、技术栈和部署方式等。本专题为大家提供分布式和微服务相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.07

3334

5

k8s和docker区别
k8s和docker区别

k8s和docker区别有抽象层次不同、管理范围不同、功能不同、应用程序生命周期管理不同、缩放能力不同、高可用性等等区别。本专题为大家提供k8s和docker区别相关的各种文章、以及下载和课程。

2023.07.24

765

4

docker进入容器的方法有哪些
docker进入容器的方法有哪些

docker进入容器的方法:1. Docker exec;2. Docker attach;3. Docker run --interactive --tty;4. Docker ps -a;5. 使用 Docker Compose。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.08

6059

6

docker容器无法访问外部网络怎么办
docker容器无法访问外部网络怎么办

docker 容器无法访问外部网络的原因和解决方法:配置 nat 端口映射以将容器端口映射到主机端口。根据主机兼容性选择正确的网络驱动(如 host 或 overlay)。允许容器端口通过主机的防火墙。配置容器的正确 dns 服务器。选择正确的容器网络模式。排除主机网络问题,如防火墙或连接问题。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.08

7137

6

docker镜像有什么用
docker镜像有什么用

docker 镜像是预构建的软件组件,用途广泛,包括:应用程序部署:简化部署,提高移植性。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.08

2813

7

Docker容器化部署与DevOps实践
Docker容器化部署与DevOps实践

本专题面向后端与运维开发者,系统讲解 Docker 容器化技术在实际项目中的应用。内容涵盖 Docker 镜像构建、容器运行机制、Docker Compose 多服务编排,以及在 DevOps 流程中的持续集成与持续部署实践。通过真实场景演示,帮助开发者实现应用的快速部署、环境一致性与运维自动化。

2026.02.11

319

16

Docker 容器部署
Docker 容器部署

本专题整合了Docker容器部署相关内容,阅读专题下面的文章了解更多详细操作教程。

2026.03.31

471

14

Java容器化部署与Docker实践教程合集
Java容器化部署与Docker实践教程合集

聚焦 Java 应用的容器化与云原生部署,讲解 Dockerfile 编写规范与 Java 应用镜像构建、多阶段构建(Multi-stage Build)减小镜像体积、Jib / Buildpacks 免 Dockerfile 镜像构建方案、JVM 容器感知参数(-XX:MaxRAMPercentage)配置、Docker Compose 编排多服务(应用 + MySQL + Redis)、容器健康检查与资源限制、Kubernetes

2026.05.11

440

26

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpMyAdmin 安装文档
phpMyAdmin 安装文档

共0课时 | 0人学习

Docker 官方文档
Docker 官方文档

共0课时 | 0人学习

宝塔 Docker 模块使用手册
宝塔 Docker 模块使用手册

共0课时 | 0人学习