Doris开发-使用 IntelliJ IDEA 搭建 FE 开发环境

作者: ApacheDoris
Doris

1.环境准备

JDK1.8+, IntelliJ IDEA

  1. 从 https://github.com/apache/doris.git 下载源码到本地

  2. 使用IntelliJ IDEA 打开代码根目录

  3. 如果仅进行fe开发而没有编译过thirdparty，则需要安装thrift，并将thrift 复制或者连接到 thirdparty/installed/bin 目录下

     安装 `thrift` 0.13.0 版本(注意：`Doris` 0.15 和最新的版本基于 `thrift` 0.13.0 构建, 之前的版本依然使用`thrift` 0.9.3 构建)

 Windows: 
    1. 下载：`http://archive.apache.org/dist/thrift/0.13.0/thrift-0.13.0.exe`
    2. 拷贝：将文件拷贝至 `./thirdparty/installed/bin`

 MacOS: 
    1. 下载：`brew install thrift@0.13.0`
    2. 建立软链接： 
       `mkdir -p ./thirdparty/installed/bin`
       # ARM架构macOS
       `ln -s /opt/homebrew/Cellar/thrift@0.13.0/0.13.0/bin/thrift ./thirdparty/installed/bin/thrift`
       # Intel架构macOS
       `ln -s /usr/local/Cellar/thrift@0.13.0/0.13.0/bin/thrift ./thirdparty/installed/bin/thrift`

 注：MacOS执行 `brew install thrift@0.13.0` 可能会报找不到版本的错误，解决方法如下，在终端执行：
    1. `brew tap-new $USER/local-tap`
    2. `brew extract --version='0.13.0' thrift $USER/local-tap`
    3. `brew install thrift@0.13.0`
 参考链接: `https://gist.github.com/tonydeng/02e571f273d6cce4230dc8d5f394493c`

  4. 如果是Mac 或者 Linux 环境 可以通过 如下命令自动生成代码：

    cd fe
mvn generate-sources

    如果出现错误，则执行：

    cd fe && mvn clean install -DskipTests

或者通过图形界面运行 maven 命令生成 

如果使用windows环境可能会有make命令和sh脚本无法执行的情况 可以通过拷贝linux上的 fe/fe-core/target/generated-sources 目录拷贝到相应的目录的方式实现，也可以通过docker 镜像挂载本地目录之后，在docker 内部生成自动生成代码，可以参照编译一节

  1. 如果还未生成过help文档，需要跳转到docs目录，执行sh build_help_zip.sh， 然后将build中的help-resource.zip拷贝到fe/fe-core/target/classes中

2.调试

  1. 用idea导入fe工程
  2. 在fe目录下创建下面红框标出的目录（在新版本中该目录可能存在，如存在则跳过，否则创建） 
  3. 编译ui项目，将 ui/dist/目录中的文件拷贝到webroot中（如果你不需要看Doris UI，这一步可以跳过）

3.配置conf/fe.conf

下面是我自己的配置，你可以根据自己的需要进行修改(注意：如果使用Mac开发，由于docker for Mac不支持Host模式，需要使用-p方式暴露be端口，同时fe.conf的priority_networks配置为容器内可访问的Ip，例如WIFI的Ip)

# Licensed to the Apache Software Foundation (ASF) under one
# or more contributor license agreements.  See the NOTICE file
# distributed with this work for additional information
# regarding copyright ownership.  The ASF licenses this file
# to you under the Apache License, Version 2.0 (the
# "License"); you may not use this file except in compliance
# with the License.  You may obtain a copy of the License at
#
#   http://www.apache.org/licenses/LICENSE-2.0
#
# Unless required by applicable law or agreed to in writing,
# software distributed under the License is distributed on an
# "AS IS" BASIS, WITHOUT WARRANTIES OR CONDITIONS OF ANY
# KIND, either express or implied.  See the License for the
# specific language governing permissions and limitations
# under the License.

#####################################################################

## The uppercase properties are read and exported by bin/start_fe.sh.

## To see all Frontend configurations,

## see fe/src/org/apache/doris/common/Config.java

#####################################################################
# the output dir of stderr and stdout 
LOG_DIR = $/log
DATE = `date +%Y%m%d-%H%M%S`
JAVA_OPTS="-Xmx2048m -XX:+UseMembar -XX:SurvivorRatio=8 -XX:MaxTenuringThreshold=7 -XX:+PrintGCDateStamps -XX:+PrintGCDetails -XX:+UseConcMarkSweepGC -XX:+UseParNewGC -XX:+CMSClassUnloadingEnabled -XX:-CMSParallelRemarkEnabled -XX:CMSInitiatingOccupancyFraction=80 -XX:SoftRefLRUPolicyMSPerMB=0 -Xloggc:$DORIS_HOME/log/fe.gc.log.$DATE"
# For jdk 9+, this JAVA_OPTS will be used as default JVM options
JAVA_OPTS_FOR_JDK_9="-Xmx4096m -XX:SurvivorRatio=8 -XX:MaxTenuringThreshold=7 -XX:+CMSClassUnloadingEnabled -XX:-CMSParallelRemarkEnabled -XX:CMSInitiatingOccupancyFraction=80 -XX:SoftRefLRUPolicyMSPerMB=0 -Xlog:gc*:$DORIS_HOME/log/fe.gc.log.$DATE:time"

##

## the lowercase properties are read by main program.

##
# INFO, WARN, ERROR, FATAL
sys_log_level = INFO
# store metadata, create it if it is not exist.
# Default value is $/doris-meta
# meta_dir = $/doris-meta
http_port = 8030
rpc_port = 9020
query_port = 9030
edit_log_port = 9010
mysql_service_nio_enabled = true
# Choose one if there are more than one ip except loopback address. 
# Note that there should at most one ip match this list.
# If no ip match this rule, will choose one randomly.
# use CIDR format, e.g. 10.10.10.0/24
# Default value is empty.
# priority_networks = 10.10.10.0/24;192.168.0.0/16
# Advanced configurations 
# log_roll_size_mb = 1024
# sys_log_dir = $/log
# sys_log_roll_num = 10
# sys_log_verbose_modules = 
# audit_log_dir = $/log
# audit_log_modules = slow_query, query
# audit_log_roll_num = 10
# meta_delay_toleration_second = 10
# qe_max_connection = 1024
# max_conn_per_user = 100
# qe_query_timeout_second = 300
# qe_slow_log_ms = 5000

4.设置环境变量

在IDEA中设置运行环境变量 

5.配置options

由于部分依赖使用了provided，idea需要做下特殊配置，在Run/Debug Configurations设置中点击右侧Modify options，勾选Add dependencies with "provided" scope to classpath选项 

6.启动fe

下面你就可以愉快的启动，调试你的FE了

文章列表

更多推荐

更多
  • IOS开发者的AWS和DevOps指南-十、iOS 应用开发的持续交付渠道 Jenkins 管道公司，AWS 代码管道，摘要，Fastlane 测试阶段，AWS 设备场测试阶段，Fastlane 构建阶段，Fastlane 交付阶段，为 AWS 代码管道设置 Jenkins 环境，在 AWS 控制台上设置代码管
    Apache CN

  • IOS开发者的AWS和DevOps指南-九、将 AWS 设备群用于测试 AWS 设备群简介，为应用测试生成 ipa 包，设置设备场项目并安排测试运行，AWS 设备场 Jenkins 插件，使用 Jenkins 自动化 AWS 设备群测试，摘要，使用 AWS 控制台安排测试运行，使用 AWS CLI 计划测试
    Apache CN

  • IOS开发者的AWS和DevOps指南-八、使用 Fastlane 自动构建、测试和发布 使用 Fastlane 匹配和亚马逊 S3 设置代码签名，设置 Jenkins 环境，用 Fastlane 自动化测试和构建，自动发布到 App Store Connect，摘要，正在初始化 Fastlane 匹配，在亚马逊 S3 存储
    Apache CN

  • IOS开发者的AWS和DevOps指南-六、使用 AWS CodeCommit 的源代码管理 Git 基础，创建 AWS 代码提交存储库，在 AWS 代码提交中添加源代码，AWS 代码提交中分支，AWS 代码提交中的拉请求，摘要，Git 安装，初始化 Git 存储库，记录对 Git 存储库的更改，克隆和使用远程 Git 存储库，
    Apache CN

  • IOS开发者的AWS和DevOps指南-七、将 AWS CodeCommit 与 Jenkins 集成 Jenkins 代码提交插件，设置集成组件，配置插件，使用 AWS 代码提交源创建 Jenkins 作业，摘要，通过 AWS 控制台设置组件，通过 Terraform 设置组件，测试 AWS 代码提交插件， 当应用源代码存储在 AWS
    Apache CN

  • IOS开发者的AWS和DevOps指南-四、AWS 上的 macOS 服务器 Amazon EC2 Mac 服务器，部署 Amazon EC2 Mac 服务器，连接到 Amazon EC2 Mac 服务器，使用 Amazon CloudWatch 监控 EC2 Mac 服务器，清理 Amazon EC2 Mac
    Apache CN

  • IOS开发者的AWS和DevOps指南-五、在 macOS 实例上设置开发工具 增加 macOS 实例宗卷大小，设置 Xcode，陷害 Jenkins，建立 Fastlane，设置 GitLab，摘要，Xcode 命令行工具，供应 Jenkins 控制器，EC2 Mac 实例作为 Jenkins 构建代理，创建 G
    Apache CN

  • IOS开发者的AWS和DevOps指南-三、亚马逊网络服务（AWS）上的 DevOps 三、亚马逊网络服务AWS上的 DevOpsAWS 上的持续集成，AWS 上的连续交付，基础设施作为代码，监控和记录，摘要，AWS 代码提交，AWS 代码构建，AWS 程式码人工因素，AWS 代码部署，AWS 代码管道，AWS 云阵，AW
    Apache CN

  • IOS开发者的AWS和DevOps指南-二、从 Xcode 到 App Store Connect 标识符，应用商店连接，从 Xcode 上传构件，测试和发布，摘要，截图和应用详细信息，TestFlight 软件，应用提交， 在前一章中，我们看到了如何使用 Xcode 在物理 iPhone 设备和模拟器上构建和运行应用。我们将进一步探
    Apache CN

  • IOS开发者的AWS和DevOps指南-一、iOS 应用开发基础 开发要求，迅速发生的，摘要，苹果个人计算机，苹果开发者账户，Xcode 简介，创建应用，构建应用，Xcode 命令行工具， 为了开发 iOS 应用，苹果提供了几种工具和资源。iOS 应用可以用原生编程语言开发，如 Swift 或 Obj
    Apache CN

    • ApacheDoris

    503
    文章数
    1066
    获赞数
    1024
    粉丝数
    Doris

    近期文章

    更多
    文章目录

      热门标签

      更多

      推荐作者

      更多