news 2026/2/26 18:56:11

Apache Doris的部署

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
Apache Doris的部署

Apache Doris 部署有单机快速部署和生产环境的集群部署两种常见方式,单机部署适合测试与开发,集群部署适用于正式业务场景。以下是基于主流 2.x 版本的详细部署步骤,以 Linux 系统为例:

前期准备

  1. 环境依赖安装
    组件要求及安装命令
    JDKFE 依赖 JDK 8,下载后配置环境变量。示例配置:export JAVA_HOME=/root/jdk1.8.0_431export PATH=$PATH:$JAVA_HOME/bin
    系统依赖库BE 需依赖相关库,CentOS 执行:yum install -y libstdc++-devel zlib-devel snappy-devel lz4-devel;Ubuntu 执行:apt-get install -y libstdc++6 zlib1g-dev libsnappy-dev liblz4-dev
    辅助工具安装 mysql - client 用于连接 FE,ntp 用于时间同步:yum install -y mysql - client ntp(CentOS)或apt install -y mysql - client-core - 8.0 ntp(Ubuntu)
  2. 系统参数优化执行以下命令调整系统配置,避免部署后出现运行异常:

    bash

    运行

    # 调整虚拟内存映射数 sysctl -w vm.max_map_count=2000000 # 关闭swap分区 swapoff -a # 提高文件描述符限制 ulimit -n 655350 # 写入配置文件确保重启生效 echo "* soft nofile 65535" >> /etc/security/limits.conf echo "* hard nofile 65535" >> /etc/security/limits.conf
  3. 下载安装包从Doris 镜像站下载稳定版安装包,示例命令:

    bash

    运行

    wget https://apache-doris-releases.oss-accelerate.aliyuncs.com/apache-doris-2.1.10-bin-x64.tar.gz # 解压到指定目录 mkdir -p /opt/doris tar -zxvf apache-doris-2.1.10-bin-x64.tar.gz -C /opt/doris cd /opt/doris

单机部署(测试环境)

单机部署会在同一台机器上同时启动 FE 和 BE,步骤简单适合快速测试。

  1. 部署 FE(前端节点)
    1. 编辑 FE 配置文件conf/fe.conf,关键配置如下:

    bash

    运行

    # 指定本机内网IP priority_networks = 192.168.0.118/24 # 配置JDK路径 JAVA_HOME=/root/jdk1.8.0_431 # JVM内存配置,根据机器内存调整 JAVA_OPTS="-Xms2g -Xmx2g -XX:+UseG1GC"
    1. 启动 FE 并验证:

    bash

    运行

    # 后台启动FE bin/start_fe.sh --daemon # 查看进程,存在DorisFE则启动成功 jps
  2. 部署 BE(后端节点)
    1. 编辑 BE 配置文件conf/be.conf,配置内网 IP:

    bash

    运行

    priority_networks = 192.168.0.118/24
    1. 启动 BE 并验证:

    bash

    运行

    # 后台启动BE bin/start_be.sh --daemon # 查看进程,存在DorisBE则启动成功 jps
  3. 注册 BE 到 FE通过 MySQL 客户端连接 FE,完成 BE 节点注册:

    bash

    运行

    # 连接FE,默认无密码 mysql -uroot -P9030 -h127.0.0.1 --default-auth=mysql_native_password # 执行注册命令,IP为本机地址 alter system add backend "192.168.0.118:9050"; # 查看BE状态,Alive为true表示注册成功 show proc '/backends'\G

集群部署(生产环境)

生产环境建议 FE 节点≥3 台(1 主 2 从)、BE 节点≥3 台,保障高可用,以下是核心步骤。

  1. 节点规划示例
    节点 IP角色说明
    192.168.1.10FE(Leader)主前端节点,管理元数据
    192.168.1.11FE(Follower)从前端节点,实现高可用
    192.168.1.12BE数据存储与计算节点
    192.168.1.13BE数据存储与计算节点
    192.168.1.14BE数据存储与计算节点
  2. 批量部署 FE
    1. 先在 192.168.1.10 启动主 FE,步骤同单机部署的 FE 部署。
    2. 在 192.168.1.11 等从 FE 节点,修改fe.conf后,执行命令加入集群:

    bash

    运行

    # 从FE节点启动并关联主FE bin/start_fe.sh --daemon --helper 192.168.1.10:9010
  3. 批量部署 BE
    1. 每台 BE 节点修改conf/be.conf中的priority_networks为对应本机 IP。
    2. 启动所有 BE 后,通过 MySQL 客户端连接主 FE,批量注册 BE:

    bash

    运行

    alter system add backend "192.168.1.12:9050","192.168.1.13:9050","192.168.1.14:9050";

验证部署

  1. 访问 FE 的 Web 界面,默认端口 8030,如http://192.168.1.10:8030,可查看集群节点状态。
  2. 通过 MySQL 客户端执行简单查询,验证功能正常:

    sql

    create database test_db; use test_db; create table test_table(id int) distributed by hash(id) buckets 1; insert into test_table values(1); select * from test_table;
版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/2/15 2:03:34

Unity角色移动系统架构设计:构建高性能状态机驱动控制器

Unity角色移动系统架构设计:构建高性能状态机驱动控制器 【免费下载链接】unity-genshin-impact-movement-system A movement system made in Unity that attempts to replicate Genshin Impact Movement. 项目地址: https://gitcode.com/gh_mirrors/un/unity-gen…

作者头像 李华
网站建设 2026/2/23 20:45:20

JSON翻译神器:零基础掌握json-translator的完整指南

JSON翻译神器:零基础掌握json-translator的完整指南 【免费下载链接】json-translator jsontt 💡 - FREE simple CLI to translate your json files into other languages ✅ Check Readme ✌ stable version is v1.9.0 项目地址: https://gitcode.com…

作者头像 李华
网站建设 2026/2/26 17:43:48

35岁程序员转行人模型:让经验成为你的转型底气

当35岁的职业焦虑遇上大模型的技术浪潮,许多程序员陷入两难:是在熟悉的技术栈里坚守,还是抓住AI时代的新机遇?事实上,35岁不仅不是转行大模型的障碍,反而能凭借多年积累的工程经验、架构思维和业务洞察&…

作者头像 李华
网站建设 2026/2/26 3:18:08

跨平台窗口检测工具:快速掌握活动窗口管理技巧

跨平台窗口检测工具:快速掌握活动窗口管理技巧 【免费下载链接】active-win Get metadata about the active window (title, id, bounds, owner, etc) 项目地址: https://gitcode.com/gh_mirrors/ac/active-win 想要轻松获取当前活动窗口的详细信息吗&#x…

作者头像 李华
网站建设 2026/2/11 2:53:00

5分钟搞定网页转PDF:wkhtmltopdf完全使用手册

5分钟搞定网页转PDF:wkhtmltopdf完全使用手册 【免费下载链接】wkhtmltopdf 项目地址: https://gitcode.com/gh_mirrors/wkh/wkhtmltopdf 还在为如何将网页内容完美转换为PDF文档而苦恼?wkhtmltopdf HTML转PDF工具正是你需要的解决方案&#xff…

作者头像 李华
网站建设 2026/2/22 16:21:53

波动率套利实战策略:期权定价异常捕捉隐藏利润

波动率套利实战策略:期权定价异常捕捉隐藏利润 【免费下载链接】gs-quant 用于量化金融的Python工具包。 项目地址: https://gitcode.com/GitHub_Trending/gs/gs-quant 你知道市场上有一种几乎被忽视的套利机会吗?当平值期权波动率仅为15%时&…

作者头像 李华