news 2026/6/24 7:53:45

Apache Doris的部署

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
Apache Doris的部署

Apache Doris 部署有单机快速部署和生产环境的集群部署两种常见方式,单机部署适合测试与开发,集群部署适用于正式业务场景。以下是基于主流 2.x 版本的详细部署步骤,以 Linux 系统为例:

前期准备

  1. 环境依赖安装
    组件要求及安装命令
    JDKFE 依赖 JDK 8,下载后配置环境变量。示例配置:export JAVA_HOME=/root/jdk1.8.0_431export PATH=$PATH:$JAVA_HOME/bin
    系统依赖库BE 需依赖相关库,CentOS 执行:yum install -y libstdc++-devel zlib-devel snappy-devel lz4-devel;Ubuntu 执行:apt-get install -y libstdc++6 zlib1g-dev libsnappy-dev liblz4-dev
    辅助工具安装 mysql - client 用于连接 FE,ntp 用于时间同步:yum install -y mysql - client ntp(CentOS)或apt install -y mysql - client-core - 8.0 ntp(Ubuntu)
  2. 系统参数优化执行以下命令调整系统配置,避免部署后出现运行异常:

    bash

    运行

    # 调整虚拟内存映射数 sysctl -w vm.max_map_count=2000000 # 关闭swap分区 swapoff -a # 提高文件描述符限制 ulimit -n 655350 # 写入配置文件确保重启生效 echo "* soft nofile 65535" >> /etc/security/limits.conf echo "* hard nofile 65535" >> /etc/security/limits.conf
  3. 下载安装包从Doris 镜像站下载稳定版安装包,示例命令:

    bash

    运行

    wget https://apache-doris-releases.oss-accelerate.aliyuncs.com/apache-doris-2.1.10-bin-x64.tar.gz # 解压到指定目录 mkdir -p /opt/doris tar -zxvf apache-doris-2.1.10-bin-x64.tar.gz -C /opt/doris cd /opt/doris

单机部署(测试环境)

单机部署会在同一台机器上同时启动 FE 和 BE,步骤简单适合快速测试。

  1. 部署 FE(前端节点)
    1. 编辑 FE 配置文件conf/fe.conf,关键配置如下:

    bash

    运行

    # 指定本机内网IP priority_networks = 192.168.0.118/24 # 配置JDK路径 JAVA_HOME=/root/jdk1.8.0_431 # JVM内存配置,根据机器内存调整 JAVA_OPTS="-Xms2g -Xmx2g -XX:+UseG1GC"
    1. 启动 FE 并验证:

    bash

    运行

    # 后台启动FE bin/start_fe.sh --daemon # 查看进程,存在DorisFE则启动成功 jps
  2. 部署 BE(后端节点)
    1. 编辑 BE 配置文件conf/be.conf,配置内网 IP:

    bash

    运行

    priority_networks = 192.168.0.118/24
    1. 启动 BE 并验证:

    bash

    运行

    # 后台启动BE bin/start_be.sh --daemon # 查看进程,存在DorisBE则启动成功 jps
  3. 注册 BE 到 FE通过 MySQL 客户端连接 FE,完成 BE 节点注册:

    bash

    运行

    # 连接FE,默认无密码 mysql -uroot -P9030 -h127.0.0.1 --default-auth=mysql_native_password # 执行注册命令,IP为本机地址 alter system add backend "192.168.0.118:9050"; # 查看BE状态,Alive为true表示注册成功 show proc '/backends'\G

集群部署(生产环境)

生产环境建议 FE 节点≥3 台(1 主 2 从)、BE 节点≥3 台,保障高可用,以下是核心步骤。

  1. 节点规划示例
    节点 IP角色说明
    192.168.1.10FE(Leader)主前端节点,管理元数据
    192.168.1.11FE(Follower)从前端节点,实现高可用
    192.168.1.12BE数据存储与计算节点
    192.168.1.13BE数据存储与计算节点
    192.168.1.14BE数据存储与计算节点
  2. 批量部署 FE
    1. 先在 192.168.1.10 启动主 FE,步骤同单机部署的 FE 部署。
    2. 在 192.168.1.11 等从 FE 节点,修改fe.conf后,执行命令加入集群:

    bash

    运行

    # 从FE节点启动并关联主FE bin/start_fe.sh --daemon --helper 192.168.1.10:9010
  3. 批量部署 BE
    1. 每台 BE 节点修改conf/be.conf中的priority_networks为对应本机 IP。
    2. 启动所有 BE 后,通过 MySQL 客户端连接主 FE,批量注册 BE:

    bash

    运行

    alter system add backend "192.168.1.12:9050","192.168.1.13:9050","192.168.1.14:9050";

验证部署

  1. 访问 FE 的 Web 界面,默认端口 8030,如http://192.168.1.10:8030,可查看集群节点状态。
  2. 通过 MySQL 客户端执行简单查询,验证功能正常:

    sql

    create database test_db; use test_db; create table test_table(id int) distributed by hash(id) buckets 1; insert into test_table values(1); select * from test_table;
版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/6/23 15:27:23

poemyang单线程如何撑起百万连接?I/O多路复用:现代网络架构的基石

O多路复用(I/O Multiplexing)是一种允许单个线程同时监视多个文件描述符的I/O模型。其核心价值在于,它将应用程序从低效的I/O等待中解放出来,实现了“一次等待,响应多个事件”的高效并发模式。要理解其优势&#xff0c…

作者头像 李华
网站建设 2026/6/23 13:21:46

【收藏】为什么一定要做 Agent 智能体?大模型开发者必学的核心方向

在大模型技术飞速迭代的当下,Agent 智能体已然成为行业内的热门赛道,也是不少开发者和技术爱好者进阶的关键方向。但很多人对 Agent 的认知还停留在 “大模型调用 API” 的浅层阶段,今天我们就来深度拆解 Agent 的定义、核心优势、现存挑战&a…

作者头像 李华
网站建设 2026/6/23 10:22:31

【值得收藏】RAG架构演进详解:从Naive RAG到Agentic RAG的技术突破

本文系统梳理了RAG架构从基础到智能化的演进历程,对比分析了Naive RAG、Advanced RAG、Modular RAG和Agentic RAG四代架构的核心特点与技术突破。揭示了RAG技术如何通过模块化设计、智能体协同等创新解决知识更新、语义对齐和复杂任务处理等关键问题,为L…

作者头像 李华
网站建设 2026/6/22 10:34:47

MiGPT终极教程:如何让小爱音箱变身智能AI语音助手

MiGPT终极教程:如何让小爱音箱变身智能AI语音助手 【免费下载链接】mi-gpt 🏠 将小爱音箱接入 ChatGPT 和豆包,改造成你的专属语音助手。 项目地址: https://gitcode.com/GitHub_Trending/mi/mi-gpt 还在为小爱音箱的机械回答感到失望…

作者头像 李华
网站建设 2026/6/22 5:53:13

拼多多API助力,实现商品批量管理,提高运营效率!

在电商运营日益精细化的今天,高效管理海量商品信息已成为提升竞争力的关键。对于拼多多平台的商家而言,手动逐条操作商品不仅耗时耗力,更容易出错。而拼多多开放平台提供的API接口,则为商家们打开了一扇通往自动化、智能化运营的大…

作者头像 李华