Doris集群安装部署（1.2.4.1 release）
此文阅读需要有Linux和服务器硬件基础！某些内容写的不是特别细，如果常见的linux基础命令tar、uzip、mv、mkdir、系统包的安装等等，以文字带过了，这样可以减少文章篇幅。
官方的安装部署方式一定要好好看一下，最好是尝试着做一下，再看本教程最好!
标准部署 - Apache Doris
本文章基于Doris 1.2.4 relase更新：更新日志请看 Release 1.2.4
一.部署方式选择
Doris安装部署分为两种方式：
- 下载Apache Doris源码进行编译：GitHub - apache/doris: Apache Doris is an easy-to-use, high performance and unified analytics database.
- 下载预编译版本，不需要编译源码，直接安装就行**【推荐】**
- 官方下载途径：Download - Apache Doris
- SelectDB下载：https://cn.selectdb.com/distribution#download
- 现在社区版的Doris主要由SelectDB方进行快速迭代，团队很不错。
这里我们采用的是第2种，主要是安装省时、门槛低，更多SelectDB和Doris的区别可以看下方的注意内容。这里不再建议采用官方源码进行编译。如果能自己更改源码进行新功能的尝试，可以选择较新的分支进行编译，以体验最新功能。
注意：
- SelectDB版本为 Apache Doris快速迭代版本。包含全部 Apache Doris 的功能，并能快速迭代。因Apache发版过程较长，对于某些功能BUG影响到自己使用时，可以联系SelectDB侧渠道，获取最新的补丁包并尝鲜。
- Apache 官方 Release 版本请前往 Apache Doris 官方网站下载。
其他简单想说的：
我是从0.13版本开始跟Doris的，但未决定要上生产。直到1.2.3 release的发布，定下来把生产Hive数仓完整迁移到生产Doris上，so刚好也更新下该部署文章。
**一是：**Doris现在功能强大，特别在联邦查询、高性能计算、运维成本、先期投入、学习成本等方面都是较优的选择。
**二是：**Doris现在的Catalog用的很爽，我们可以通过Doris直接连上Hive、SAP HANA、Mysql、SQLServer、Oracle、ClickHouse等等，然后通过insert into select的方式，把数据load到Doris。也可以通过insert into select的方式把Doris数据insert到外部数据源中。
**三是：**Hive数仓1200多个job，目前我们的调度需要跑5-6个小时。可以预想到今后在现有资源的基础上，整个调度周期会再加长，当任务跑批失败故障处理完后，再跑，这个时间跨度慢慢不能被业务侧所接受。所以我们用Doris和hive跑批做了个对比。原先用Hive跑批需要15分钟完成的调度，用Doris只需要1.5分钟，效率提升9+倍有余。
最后：虽然Doirs性能很好，但还在成长，到现在为止也算较为稳定了，但是还达不到非常稳定，也会有一些小问题存在，不过现在看来也还好，毕竟瑕不掩瑜。
二.部署前准备工作
1. 服务器硬件准备
建议调研环境、测试环境可以用低配或者虚拟机。生产环境建议物理机，3台FE+7台BE组成。具体服务器配置相关问题，可以留言交流，或者浏览 Apache Doris安装与部署 章节.
推荐生产环境如下：
| 序号 | 角色 | CPU | 内存 | 系统盘 | 数据盘 | 网络 |
|---|---|---|---|---|---|---|
| 1 | FE-Master | Intel Gold 6326 * 1，16C | 64GB | SSD 480*2，RAID | Nvme SSD 960GB*3，读写速率 2.5G/s 7GB /s，RAID | 万兆光纤 |
| 2 | FE-follower | Intel Gold 6326 * 1，16C | 64GB | SSD 480*2，RAID | Nvme SSD 960GB*3，读写速率 2.5G/s 7GB /s，RAID | 万兆光纤 |
| 3 | FE-follower | Intel Gold 6326 * 1，16C | 64GB | SSD 480*2，RAID | Nvme SSD 960GB*3，读写速率 2.5G/s 7GB /s，RAID | 万兆光纤 |
| 4 | BE | Intel Gold 6326 * 2，32C | 256GB | SSD 480*2，RAID | Nvme SSD 1.92TB*5，读写速率 2.5G/s 7GB /s | 万兆光纤 |
| 5 | BE | Intel Gold 6326 * 2，32C | 256GB | SSD 480*2，RAID | Nvme SSD 1.92TB*5，读写速率 2.5G/s 7GB /s | 万兆光纤 |
| 6 | BE | Intel Gold 6326 * 2，32C | 256GB | SSD 480*2，RAID | Nvme SSD 1.92TB*5，读写速率 2.5G/s 7GB /s | 万兆光纤 |
| 7 | BE | Intel Gold 6326 * 2，32C | 256GB | SSD 480*2，RAID | Nvme SSD 1.92TB*5，读写速率 2.5G/s 7GB /s | 万兆光纤 |
| 8 | BE | Intel Gold 6326 * 2，32C | 256GB | SSD 480*2，RAID | Nvme SSD 1.92TB*5，读写速率 2.5G/s 7GB /s | 万兆光纤 |
| 9 | BE | Intel Gold 6326 * 2，32C | 256GB | SSD 480*2，RAID | Nvme SSD 1.92TB*5，读写速率 2.5G/s 7GB /s | 万兆光纤 |
| 10 | BE | Intel Gold 6326 * 2，32C | 256GB | SSD 480*2，RAID | Nvme SSD 1.92TB*5，读写速率 2.5G/s 7GB /s | 万兆光纤 |
FE建议3台组成HA，后续如果发现BE计算能力不足，扩展BE即可，不需要在折腾FE了。
FE 的部署推荐，在 安装与部署文档 中有介绍，这里再做一些补充。
- 如果你并不十分了解 FE 元数据的运行逻辑，或者没有足够 FE 元数据的运维经验，我们强烈建议在实际使用中，只部署一个 FOLLOWER 类型的 FE 作为 MASTER，其余 FE 都是 OBSERVER，这样可以减少很多复杂的运维问题！ 不用过于担心 MASTER 单点故障导致无法进行元数据写操作。首先，如果你配置合理，FE 作为 java 进程很难挂掉。其次，如果 MASTER 磁盘损坏（概率非常低），我们也可以用 OBSERVER 上的元数据，通过
故障恢复的方式手动恢复。- FE 进程的 JVM 一定要保证足够的内存。我们强烈建议 FE 的 JVM 内存至少在 10GB 以上，推荐 32GB 至 64GB。并且部署监控来监控 JVM 的内存使用情况。因为如果FE出现OOM，可能导致元数据写入失败，造成一些无法恢复的故障！
- FE 所在节点要有足够的磁盘空间，以防止元数据过大导致磁盘空间不足。同时 FE 日志也会占用十几G 的磁盘空间。
关于硬件最后一点想说的，BE节点的CPU、内存、硬盘、网络请尽量上高配。目前我们生产BE节点，CPU：32物理核心、内存：256GB 3200MT/s、硬盘：读5GB+/s 写2.5GB+/s、网络：万兆光纤，共大家参考
2.系统软件准备
所有服务器都需要做。【必须】的内容一定要做，【按需】的 内容可以不用做：
（1）【必须】 Linux CentOS 7.9 安装所有最新补丁，在安装操作系统的时候，推荐选择ext4文件系统。
（2）【必须】 时钟同步：https://www.cnblogs.com/jhxxb/p/11526098.html
（3）【必须】关闭交换分区（swap）：https://www.cnblogs.com/whm-blog/p/10920881.html
（4）【必须】把limits调到最大：linux中的limits.conf文件配置 - 简书
（5）【必须】 安装gcc 10.2.0+：https://www.cnblogs.com/sakela/p/14652712.html
（6）【必须】安装JDK1.8：java jdk linux 安装_Linux安装JDK_费米子父的博客-CSDN博客，1.2.4版本也不需要了，安装自带JDK8
（7）~~【必须】 在所有BE节点上安装ODBC：Doris BE节点上安装ODBC - 简书~~ 不需要了，请大家移步 多源数据目录 Multi-Catalog
（8）【按需】如果有新建root账号的需求，可以参照：CentOS7 增加SSH端口，给新用户登录 - 简书
（9）【按需】关于broker，因我们并没有用到涉及需使用broker接入内容，所以文章中并没有写broker的接入过程，可参照：标准部署 - Apache Doris
三.部署Doris
部署Doris时，用的都是root用户！
1.安装FE（集群）
（1）先确认待安装的服务器的CPU是否支持avx2指令，这个过程所有服务器都需要确定。
0.14.13.1 及之后的版本需要运行环境的 CPU 支持 avx2 指令，你可以通过 cat /proc/cpuinfo 查看是否支持。如果不支持，请使用带 no-avx2 后缀的版本。avx2 指令会显著提升 bloomfilter 等数据结构的计算效率，从而影响索引过滤、runtime filter 等功能的效率。
使用以下命令查看：
[root@DORIS-FE-PRD01 ~]# cat /proc/cpuinfo
可以看到cpu是支持avx2指令的，那就可以下载支持avx2指令的已编译版本。如果cpu不支持avx2指令，需要下载不支持avx2指令的已编译版本。
先去下载已编译好的版本，以下是下载地址，点击图片中的Link下载适合的版本。X64（avx2）下的是支持avx2指令，X64（no avx2）下的是不支持avx2指令：
官方：Doris预编译版本下载地址
SelectDB：Doris预编译版本下载地址
（2）下载完后得到apache-doris-fe-1.2.4-bin-x86_64.tar.xz``````apache-doris-be-1.2.4-bin-x86_64.tar.xz``````apache-doris-dependencies-1.2.4-bin-x86_64.tar.xz，
（3）apache-doris-fe-1.2.4-bin-x86_64.tar.xz上传至所有fe节点服务器/opt/software目录，每台服务器都需要上传。apache-doris-be-1.2.4-bin-x86_64.tar.xz``````apache-doris-dependencies-1.2.4-bin-x86_64.tar.xz上传至所有be节点服务器。
（4）解压apache-doris-fe-1.2.4-bin-x86_64.tar.xz得到apache-doris-fe-1.2.4-bin-x86_64目录，目录结构如下：
（5）把fe挪到/home/doris/目录下去，前提需要创建该目录。
（6）进入/home/doris/fe/conf, vim be.conf,有以下几项需要增加或修改：
以下配置中不会详述每个配置的含义，可以访问Doris文档查看具体释义和更多配置：
https://doris.apache.org/zh-CN/docs/dev/admin-manual/config/fe-config
- ①
JAVA_OPTS中-Xmx调到32768m，即32GB
JAVA_OPTS="-Xmx32768m -XX:+UseMembar -XX:SurvivorRatio=8 -XX:MaxTenuringThreshold=7 -XX:+PrintGCDateStamps -XX:+PrintGCDetails -XX:+UseConcMarkSweepGC
-XX:+UseParNewGC -XX:+CMSClassUnloadingEnabled -XX:-CMSParallelRemarkEnabled -XX:CMSInitiatingOccupancyFraction=80 -XX:SoftRefLRUPolicyMSPerMB=0 -Xlogg
c:$DORIS_HOME/log/fe.gc.log.$DATE"
- ②
meta_dir中配置fe元数据的存放路径需要修改为/doris-meta。
meta_dir = /doris-meta1
这里需要注意，fe的源程序包是放在
/home/doris/下，是系统盘位置为480G RAID所在盘符目录。fe元数据的存放硬盘为/doris-meta，fe节点的3块960G的硬盘做了RAID5阵列，整体大小由960G*3的数量大小，变为960G*2即1.8TB左右的大小，并挂载到/doris-meta目录下。
- ③ 增加
enable_http_server_v2 = true配置，支持https，这样可以打开新的前端UI界面。
http_port = 8030
rpc_port = 9020
query_port = 9030
edit_log_port = 9010
mysql_service_nio_enabled = true
enable_http_server_v2 = true # 在这里加该配置就行
- ④
priority_networks需要设置fe所在的服务器IP，这里我的服务器只用了单网口只有一个IP。
priority_networks = 192.168.16.44/24
- ⑤
dynamic_partition_enable = true增加动态分区配置，后续使用中动态分区用的比较多，先把它配置上。在文件末尾加上就行。
dynamic_partition_enable = true
这里贴上我的fe.conf完整的文件内容，可以做个参照：
# Licensed to the Apache Software Foundation (ASF) under one
# or more contributor license agreements. See the NOTICE file
# distributed with this work for additional information
# regarding copyright ownership. The ASF licenses this file
# to you under the Apache License, Version 2.0 (the
# "License"); you may not use this file except in compliance
# with the License. You may obtain a copy of the License at
#
# http://www.apache.org/licenses/LICENSE-2.0
#
# Unless required by applicable law or agreed to in writing,
# software distributed under the License is distributed on an
# "AS IS" BASIS, WITHOUT WARRANTIES OR CONDITIONS OF ANY
# KIND, either express or implied. See the License for the
# specific language governing permissions and limitations
# under the License.#####################################################################
## The uppercase properties are read and exported by bin/start_fe.sh.
## To see all Frontend configurations,
## see fe/src/org/apache/doris/common/Config.java
###################################################################### the output dir of stderr and stdout
LOG_DIR = ${DORIS_HOME}/logDATE = `date +%Y%m%d-%H%M%S`
JAVA_OPTS="-Xmx32768m -XX:+UseMembar -XX:SurvivorRatio=8 -XX:MaxTenuringThreshold=7 -XX:+PrintGCDateStamps -XX:+PrintGCDetails -XX:+UseConcMarkSweepGC -XX:+UseParNewGC -XX:+CMSClassUnloadingEnabled -XX:-CMSParallelRemarkEnabled -XX:CMSInitiatingOccupancyFraction=80 -XX:SoftRefLRUPolicyMSPerMB=0 -Xloggc:$DORIS_HOME/log/fe.gc.log.$DATE"# For jdk 9+, this JAVA_OPTS will be used as default JVM options
JAVA_OPTS_FOR_JDK_9="-Xmx32768m -XX:SurvivorRatio=8 -XX:MaxTenuringThreshold=7 -XX:+CMSClassUnloadingEnabled -XX:-CMSParallelRemarkEnabled -XX:CMSInitiatingOccupancyFraction=80 -XX:SoftRefLRUPolicyMSPerMB=0 -Xlog:gc*:$DORIS_HOME/log/fe.gc.log.$DATE:time"##
## the lowercase properties are read by main program.
### INFO, WARN, ERROR, FATAL
sys_log_level = INFO# store metadata, must be created before start FE.
# Default value is ${DORIS_HOME}/doris-meta
# meta_dir = ${DORIS_HOME}/doris-meta
meta_dir = /doris-metahttp_port = 8030
rpc_port = 9020
query_port = 9030
edit_log_port = 9010
mysql_service_nio_enabled = true
enable_http_server_v2 = true# Choose one if there are more than one ip except loopback address.
# Note that there should at most one ip match this list.
# If no ip match this rule, will choose one randomly.
# use CIDR format, e.g. 10.10.10.0/24
# Default value is empty.
# priority_networks = 10.10.10.0/24;192.168.0.0/16
priority_networks = 192.168.16.44/24# Advanced configurations
# log_roll_size_mb = 1024
# sys_log_dir = ${DORIS_HOME}/log
# sys_log_roll_num = 10
# sys_log_verbose_modules = org.apache.doris
# audit_log_dir = ${DORIS_HOME}/log
# audit_log_modules = slow_query, query
# audit_log_roll_num = 10
# meta_delay_toleration_second = 10
# qe_max_connection = 1024
# max_conn_per_user = 100
# qe_query_timeout_second = 300
# qe_slow_log_ms = 5000
dynamic_partition_enable = true（7）启动fe。启动和关闭fe的命令是sh start_fe.sh --daemon、sh stop_fe.sh --daemon
[root@DORIS-FE-PRD01 bin]# cd /home/doris/fe/bin
[root@DORIS-FE-PRD01 bin]# sh start_fe.sh --daemon
注意：
Doris启动过程中如果发生问题，可以进入/home/doris/fe/log目录下查看日志，找到异常寻求解决方案
官方运维常见问题
（7）下面需要通过mysql客户端连接fe节点
- ① 下载
mysql-5.7.36，上传至/opt/software/，并解压，解压后不用安装，只用它来连接doris。
mysql-5.7.36官方下载链接 - ② 使用以下命令连接doris，能进入到doris表示连接成功，说明fe启动正常
[root@DORIS-FE-PRD01 bin]# cd /opt/software/mysql-5.7.36-linux-glibc2.12-x86_64/bin
[root@DORIS-FE-PRD01 bin]# ./mysql -h 192.168.16.44 -P 9030 -uroot
Welcome to the MySQL monitor. Commands end with ; or \g.
Your MySQL connection id is 5781
Server version: 5.1.0 Doris version 0.15.1-rc09-UnknownCopyright (c) 2000, 2021, Oracle and/or its affiliates.Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.mysql>
[root@node3 fe]# sh bin/start_fe.sh --daemon
[root@node3 fe]# jps
7234 Jps
7160 PaloFe（8）剩下两台fe节点需要做一下第（1）至第（5）个步骤，但是在 首次启动 其余两个fe节点时，需要注意用以下命令执行，后续启动采用第（6）中的命令执行即可：
第二个节点：
[root@DORIS-FE-PRD02 bin]# cd /home/doris/fe/bin
[root@DORIS-FE-PRD02 bin]# ./start_fe.sh --helper 192.168.16.44:9010 --daemon
第三个节点：
[root@DORIS-FE-PRD03 bin]# cd /home/doris/fe/bin
[root@DORIS-FE-PRD03 bin]# ./start_fe.sh --helper 192.168.16.44:9010 --daemon
192.168.16.44为第一个启动的fe节点，该节点为master节点。剩下两台为follower节点，3台fe节点组成读写HA。
（9）在192.168.16.44 master fe节点服务器上，用mysql连接master fe，并用sql添加其余两台follower节点：
[root@DORIS-FE-PRD01 conf]# cd /opt/software/mysql-5.7.36-linux-glibc2.12-x86_64/bin
[root@DORIS-FE-PRD01 bin]# ./mysql -h 192.168.16.44 -P 9030 -uroot
Welcome to the MySQL monitor. Commands end with ; or \g.
Your MySQL connection id is 5782
Server version: 5.1.0 Doris version 0.15.1-rc09-UnknownCopyright (c) 2000, 2021, Oracle and/or its affiliates.Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.mysql> ALTER SYSTEM ADD FOLLOWER "192.168.16.64:9010";
mysql> ALTER SYSTEM ADD FOLLOWER "192.168.16.53:9010";
添加完后，通过show proc '/frontends';查看fe节点的状态，主要关注Role角色、IsMaster是否主节点、alive节点存活状态 三列是否正常。
mysql> show proc '/frontends';
+----------------------------------+---------------+-------------+----------+-----------+---------+----------+----------+------------+------+-------+-------------------+---------------------+----------+--------+--------------------------+------------------+
| Name | IP | EditLogPort | HttpPort | QueryPort | RpcPort | Role | IsMaster | ClusterId | Join | Alive | ReplayedJournalId | LastHeartbeat | IsHelper | ErrMsg | Version | CurrentConnected |
+----------------------------------+---------------+-------------+----------+-----------+---------+----------+----------+------------+------+-------+-------------------+---------------------+----------+--------+--------------------------+------------------+
| 192.168.16.64_9010_1682469350180 | 192.168.16.64 | 9010 | 8030 | 9030 | 9020 | FOLLOWER | false | 2079148326 | true | true | 267346748 | 2023-05-04 19:12:59 | true | | doris-1.2.4-rc01-Unknown | No |
| 192.168.16.44_9010_1651040787813 | 192.168.16.44 | 9010 | 8030 | 9030 | 9020 | FOLLOWER | true | 2079148326 | true | true | 267346749 | 2023-05-04 19:12:59 | true | | doris-1.2.4-rc01-Unknown | Yes |
| 192.168.16.53_9010_1682469352336 | 192.168.16.53 | 9010 | 8030 | 9030 | 9020 | FOLLOWER | false | 2079148326 | true | true | 267346748 | 2023-05-04 19:12:59 | true | | doris-1.2.4-rc01-Unknown | No |
+----------------------------------+---------------+-------------+----------+-----------+---------+----------+----------+------------+------+-------+-------------------+---------------------+----------+--------+--------------------------+------------------+
3 rows in set (0.06 sec)
（10）到此为止，如果一切顺利，fe集群就搭建完了。
2.安装BE（集群）
（1）进入be节点服务器上，解压apache-doris-be-1.2.4-bin-x86_64.tar.xz``````apache-doris-dependencies-1.2.4-bin-x86_64.tar.xz，得到以下两个目录：
（2）把apache-doris-dependencies-1.2.4-bin-x86_64目录下的java-udf-jar-with-dependencies.jar挪到apache-doris-be-1.2.4-bin-x86_64/lib目录下
（3）把be目录挪到/home/doris/下，需要创建该目录。
（4）进入/home/doris/be/conf目录下，修改配置：
以下配置中不会详述每个配置的含义，可以访问Doris文档查看具体释义和更多配置：
BE 配置项 - Apache Doris
- ① 修改
priority_networks
priority_networks = 192.168.16.65/24
- ② 修改数据存放目录
storage_root_path：
storage_root_path = /doris-data1,medium:hdd,capacity:890;/doris-data2,medium:ssd,capacity:890;/doris-data3,medium:ssd,capacity:890
说明：
1.be节点与fe节点服务器配置是一样的，但是be节点的960G*3的SSD硬盘，没有做磁盘阵列，当做3块磁盘去用，分别挂载到/doris-data1 /doris-data2 /doris-data3目录下。
2.配置中第一个磁盘目录/doris-data1,medium:hdd,capacity:890medium指定的是hdd。这里需要注意，虽然说3块硬盘都是SSD，但是如果在配置时把medium都配置ssd，会发现在建表的时候会报错。所以这里把第一个改成了hdd，剩下两个还是ssd。如果都是用的SSD可以这样配置/doris-data1,/doris-data2,/doris-data3,，不用指定硬盘那些参数。
- ③ 增加如下配置，这几项配置是我们在使用过程中自己添加的，可能也不一定适合各位，各位可以按需添加。
max_tablet_version_num = 5000
max_compaction_threads = 16
compaction_task_num_per_disk = 8
cumulative_size_based_promotion_size_mbytes = 2048
row_step_for_compaction_merge_log = 1
total_permits_for_compaction_score = 50000
以下是我的be.conf全部配置内容，供参照：
# Licensed to the Apache Software Foundation (ASF) under one
# or more contributor license agreements. See the NOTICE file
# distributed with this work for additional information
# regarding copyright ownership. The ASF licenses this file
# to you under the Apache License, Version 2.0 (the
# "License"); you may not use this file except in compliance
# with the License. You may obtain a copy of the License at
#
# http://www.apache.org/licenses/LICENSE-2.0
#
# Unless required by applicable law or agreed to in writing,
# software distributed under the License is distributed on an
# "AS IS" BASIS, WITHOUT WARRANTIES OR CONDITIONS OF ANY
# KIND, either express or implied. See the License for the
# specific language governing permissions and limitations
# under the License.PPROF_TMPDIR="$DORIS_HOME/log/"# INFO, WARNING, ERROR, FATAL
sys_log_level = INFO# ports for admin, web, heartbeat service
be_port = 9060
webserver_port = 8040
heartbeat_service_port = 9050
brpc_port = 8060
priority_networks = 192.168.16.66/24
storage_root_path = /doris-data1.hdd,890;/doris-data2.ssd,890;/doris-data3.ssd,890
max_tablet_version_num = 5000
max_compaction_threads = 16
compaction_task_num_per_disk = 8
cumulative_size_based_promotion_size_mbytes = 2048
row_step_for_compaction_merge_log = 1
total_permits_for_compaction_score = 50000
# Choose one if there are more than one ip except loopback address.
# Note that there should at most one ip match this list.
# If no ip match this rule, will choose one randomly.
# use CIDR format, e.g. 10.10.10.0/24
# Default value is empty.
# priority_networks = 10.10.10.0/24;192.168.0.0/16# data root path, separate by ';'
# you can specify the storage medium of each root path, HDD or SSD
# you can add capacity limit at the end of each root path, seperate by ','
# eg:
# storage_root_path = /home/disk1/doris.HDD,50;/home/disk2/doris.SSD,1;/home/disk2/doris
# /home/disk1/doris.HDD, capacity limit is 50GB, HDD;
# /home/disk2/doris.SSD, capacity limit is 1GB, SSD;
# /home/disk2/doris, capacity limit is disk capacity, HDD(default)
#
# you also can specify the properties by setting '<property>:<value>', seperate by ','
# property 'medium' has a higher priority than the extension of path
#
# Default value is ${DORIS_HOME}/storage, you should create it by hand.
# storage_root_path = ${DORIS_HOME}/storage# Advanced configurations
# sys_log_dir = ${DORIS_HOME}/log
# sys_log_roll_mode = SIZE-MB-1024
# sys_log_roll_num = 10
# sys_log_verbose_modules = *
# log_buffer_level = -1
# palo_cgroups
- ④ 还剩6台
be节点，都按照以上内容进行配置，后者把be放到/home/doris/下后，同步一下be.conf改一下ip地址就行。 - ⑤ 启动所有
be节点
[root@DORIS-BE-PRD01 conf]# cd /home/doris/be/bin
[root@DORIS-BE-PRD01 bin]# sh start_be.sh --daemon[root@DORIS-BE-PRD02 conf]# cd /home/doris/be/bin
[root@DORIS-BE-PRD02 bin]# sh start_be.sh --daemon[root@DORIS-BE-PRD03 conf]# cd /home/doris/be/bin
[root@DORIS-BE-PRD03 bin]# sh start_be.sh --daemon[root@DORIS-BE-PRD04 conf]# cd /home/doris/be/bin
[root@DORIS-BE-PRD04 bin]# sh start_be.sh --daemon[root@DORIS-BE-PRD05 conf]# cd /home/doris/be/bin
[root@DORIS-BE-PRD05 bin]# sh start_be.sh --daemon[root@DORIS-BE-PRD06 conf]# cd /home/doris/be/bin
[root@DORIS-BE-PRD06 bin]# sh start_be.sh --daemon[root@DORIS-BE-PRD07 conf]# cd /home/doris/be/bin
[root@DORIS-BE-PRD07 bin]# sh start_be.sh --daemon
- ⑥ 进入
fe master节点，用mysql连接进入sql命令行模式，挨个添加be节点
[root@DORIS-FE-PRD01 bin]# cd /opt/software/mysql-5.7.36-linux-glibc2.12-x86_64/bin
[root@DORIS-FE-PRD01 bin]# ./mysql -h 192.168.16.44 -P 9030 -uroot
Welcome to the MySQL monitor. Commands end with ; or \g.
Your MySQL connection id is 5783
Server version: 5.1.0 Doris version doris-1.2.4-rc01-UnknownCopyright (c) 2000, 2021, Oracle and/or its affiliates.Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.mysql> ALTER SYSTEM ADD BACKEND "192.168.16.66:9050";
mysql> ALTER SYSTEM ADD BACKEND "192.168.16.59:9050";
mysql> ALTER SYSTEM ADD BACKEND "192.168.16.60:9050";
mysql> ALTER SYSTEM ADD BACKEND "192.168.16.51:9050";
mysql> ALTER SYSTEM ADD BACKEND "192.168.16.65:9050";
mysql> ALTER SYSTEM ADD BACKEND "192.168.16.63:9050";
添加完后，通过show proc '/backends';查看be节点的状态，主要关注alive节点存活状态 是否正常。
mysql> show proc '/backends';
+-----------+-----------------+----------------+---------------+--------+----------+----------+---------------------+---------------------+-------+----------------------+-----------------------+-----------+------------------+---------------+---------------+---------+----------------+--------------------+--------------------------+--------+--------------------------+-------------------------------------------------------------------------------------------------------------------------------+-------------------------+----------+
| BackendId | Cluster | IP | HeartbeatPort | BePort | HttpPort | BrpcPort | LastStartTime | LastHeartbeat | Alive | SystemDecommissioned | ClusterDecommissioned | TabletNum | DataUsedCapacity | AvailCapacity | TotalCapacity | UsedPct | MaxDiskUsedPct | RemoteUsedCapacity | Tag | ErrMsg | Version | Status | HeartbeatFailureCounter | NodeRole |
+-----------+-----------------+----------------+---------------+--------+----------+----------+---------------------+---------------------+-------+----------------------+-----------------------+-----------+------------------+---------------+---------------+---------+----------------+--------------------+--------------------------+--------+--------------------------+-------------------------------------------------------------------------------------------------------------------------------+-------------------------+----------+
| 82668153 | default_cluster | 192.168.16.xxx | 9050 | 9060 | 8040 | 8060 | 2023-04-25 18:28:53 | 2023-05-04 19:21:40 | true | false | false | 54406 | 16.239 GB | 8.667 TB | 8.729 TB | 0.70 % | 0.81 % | 0.000 | {"location" : "default"} | | doris-1.2.4-rc01-Unknown | {"lastSuccessReportTabletsTime":"2023-05-04 19:21:00","lastStreamLoadTime":-1,"isQueryDisabled":false,"isLoadDisabled":false} | 0 | mix |
| 82668154 | default_cluster | 192.168.16.xxx | 9050 | 9060 | 8040 | 8060 | 2023-04-25 18:28:53 | 2023-05-04 19:21:40 | true | false | false | 53964 | 19.080 GB | 8.665 TB | 8.729 TB | 0.73 % | 0.84 % | 0.000 | {"location" : "default"} | | doris-1.2.4-rc01-Unknown | {"lastSuccessReportTabletsTime":"2023-05-04 19:21:11","lastStreamLoadTime":-1,"isQueryDisabled":false,"isLoadDisabled":false} | 0 | mix |
| 82668155 | default_cluster | 192.168.16.xxx | 9050 | 9060 | 8040 | 8060 | 2023-04-25 18:28:53 | 2023-05-04 19:21:40 | true | false | false | 50290 | 17.190 GB | 8.668 TB | 8.729 TB | 0.69 % | 0.83 % | 0.000 | {"location" : "default"} | | doris-1.2.4-rc01-Unknown | {"lastSuccessReportTabletsTime":"2023-05-04 19:20:56","lastStreamLoadTime":-1,"isQueryDisabled":false,"isLoadDisabled":false} | 0 | mix |
| 82668156 | default_cluster | 192.168.16.xxx | 9050 | 9060 | 8040 | 8060 | 2023-04-25 18:28:53 | 2023-05-04 19:21:40 | true | false | false | 54965 | 16.714 GB | 8.668 TB | 8.729 TB | 0.70 % | 0.88 % | 0.000 | {"location" : "default"} | | doris-1.2.4-rc01-Unknown | {"lastSuccessReportTabletsTime":"2023-05-04 19:20:53","lastStreamLoadTime":-1,"isQueryDisabled":false,"isLoadDisabled":false} | 0 | mix |
| 82668157 | default_cluster | 192.168.16.xxx | 9050 | 9060 | 8040 | 8060 | 2023-04-25 18:28:53 | 2023-05-04 19:21:40 | true | false | false | 53024 | 19.122 GB | 8.660 TB | 8.729 TB | 0.78 % | 1.05 % | 0.000 | {"location" : "default"} | | doris-1.2.4-rc01-Unknown | {"lastSuccessReportTabletsTime":"2023-05-04 19:20:56","lastStreamLoadTime":-1,"isQueryDisabled":false,"isLoadDisabled":false} | 0 | mix |
| 82668158 | default_cluster | 192.168.16.xxx | 9050 | 9060 | 8040 | 8060 | 2023-04-25 18:28:53 | 2023-05-04 19:21:40 | true | false | false | 52119 | 18.351 GB | 8.661 TB | 8.729 TB | 0.77 % | 0.98 % | 0.000 | {"location" : "default"} | | doris-1.2.4-rc01-Unknown | {"lastSuccessReportTabletsTime":"2023-05-04 19:21:32","lastStreamLoadTime":-1,"isQueryDisabled":false,"isLoadDisabled":false} | 0 | mix |
| 82668159 | default_cluster | 192.168.16.xxx | 9050 | 9060 | 8040 | 8060 | 2023-04-25 18:28:53 | 2023-05-04 19:21:40 | true | false | false | 50999 | 14.106 GB | 8.662 TB | 8.729 TB | 0.76 % | 1.10 % | 0.000 | {"location" : "default"} | | doris-1.2.4-rc01-Unknown | {"lastSuccessReportTabletsTime":"2023-05-04 19:21:39","lastStreamLoadTime":-1,"isQueryDisabled":false,"isLoadDisabled":false} | 0 | mix |
+-----------+-----------------+----------------+---------------+--------+----------+----------+---------------------+---------------------+-------+----------------------+-----------------------+-----------+------------------+---------------+---------------+---------+----------------+--------------------+--------------------------+--------+--------------------------+-------------------------------------------------------------------------------------------------------------------------------+-------------------------+----------+
- ⑦ 到此为止，如果顺利的话，整个doris集群搭建完毕。后面可以用DB工具用连接mysql的方式连接Doris了。
四.负载均衡
当部署多个 FE 节点时，用户可以在多个 FE 之上部署负载均衡层来实现 Doris 的高可用。
该步骤是建议在生产环境一定要做的！
目前负载均衡有两种方式：ProxySQL 及 Nginx，我觉得nginx简单，推荐Nginx方式。如采用ProxySQL，后面要增加doris数据库账号，还需要在ProxySQL代理层增加对应用户，比较麻烦。
主要步骤可以完全按照官网给的安装手册进行，写的很详细，完全参照即可：
负载均衡 - Apache Doris
五.连接Doris，进行查询
在第四步中我已经做好了ProxySQL的代理，下面将通过连接Proxy代理的IP和端口，连接Doris。
因为我们的doris安装的早，那会还只有ProxySQL，现在可以用nginx
我的ProxySQL地址端口：192.168.16.53:9033
我的FE地址端口：192.168.16.53:9030、192.168.16.64:9030、192.168.16.44:9030
（1）通过DBeaver连接Proxy，选择 mysql，点击下一步
（2）填写IP、端口、账号、密码
（3）点击“测试链接”，显示成功
（4）如图所示，test数据库是导入的测试数据集，大约6+亿条70+GB的数据，可以按照官方的教程，导入测试数据集，测试doris集群性能的初步表现：Star Schema Benchmark - Apache Doris
（5）执行一条官方测试教程中sql，该条sql执行在400ms左右
-- 设置并发度为8
set parallel_fragment_exec_instance_num=8;
-- 设置runtime_filter为BLOOM_FILTER
set runtime_filter_type="BLOOM_FILTER";
-- 执行sql
SELECT d_year, c_nation,
SUM(lo_revenue - lo_supplycost) AS PROFIT
FROM date, customer, supplier, part, lineorder
WHERE lo_custkey = c_custkey
AND lo_suppkey = s_suppkey
AND lo_partkey = p_partkey
AND lo_orderdate = d_datekey
AND c_region = 'AMERICA'
AND s_region = 'AMERICA'
AND (p_mfgr = 'MFGR#1'
OR p_mfgr = 'MFGR#2')
GROUP BY d_year, c_nation
ORDER BY d_year, c_nation;
用上面我推荐集群的配置，执行Doris官方测试查询sql，比官方执行效率更高！
^_^
| Query | 官方 1.2.0(ms) | 我方 1.2.4(ms) |
|---|---|---|
| Q1.1 | 40 | 8 |
| Q1.2 | 30 | 9 |
| Q1.3 | 20 | 8 |
| Q2.1 | 350 | 227 |
| Q2.2 | 320 | 209 |
| Q2.3 | 300 | 204 |
| Q3.1 | 650 | 364 |
| Q3.2 | 260 | 180 |
| Q3.3 | 220 | 155 |
| Q3.4 | 60 | 80 |
| Q4.1 | 840 | 294 |
| Q4.2 | 460 | 246 |
| Q4.3 | 610 | 309 |
5.2. 建库建表并查询
# 创建数据库
create database test;
# 切换数据库
use test;
# 创建表
CREATE TABLE student
(
id INT,
name VARCHAR(50),
age INT,
count BIGINT SUM DEFAULT '0'
)
AGGREGATE KEY (id,name,age)
DISTRIBUTED BY HASH(id) buckets 10
PROPERTIES("replication_num" = "1");
# 插入数据
insert into student values(1, '张三', 10, 1),(2, '李四', 20, 2);
# 查询结果
mysql> select * from student;
+------+--------+------+-------+
| id | name | age | count |
+------+--------+------+-------+
| 2 | 李四 | 20 | 2 |
| 1 | 张三 | 10 | 1 |
+------+--------+------+-------+
2 rows in set (0.07 sec)
5.3. 通过navicat远程工具访问
5.4. 通过web页面访问
访问url： http://bigdata1:8030/login
登录账号：root
登录密码：上述修改的root的密码（这里是123456）
FE的扩容与缩容
命令介绍
• 添加Follower或Oberser
首先连接到已启动的FE，并执行
#oberser只能用来读，follower用来做高可用，leader宕掉follower能重新选举一个leader顶上
alter system add follower "ip:port";
或
alter system add observer "ip:port";
删除FE节点
alter system drop follower[observer] "ip:port"
操作
启动104 106的FE服务（之前已启动10.19.162.103机器FE作为leader角色）特别说明：--helper 参数仅在 follower 和 observer 第一次启动时才需要。
# 登录104、106机器分别启动FE，需要指定103为leader
sh /root/apache-doris-0.15/fe/bin/start_fe.sh --helper 10.19.162.103:9010 --daemon
至此3个节点都启动了FE实例，此外还需 使用 mysql-client 连接到已启动的103机器的FE，执行添加集群的SQL操作。由于我们期望部署3个FE，需要在SQL窗口执行以下两条命令：
#添加FE
ALTER SYSTEM ADD FOLLOWER "10.19.162.104:9010";
ALTER SYSTEM ADD FOLLOWER "10.19.162.106:9010";
再次查看FE实例
show proc '/frontends';
BE的扩容与缩容
BE节点的扩容和缩容过程，不影响当前系统运行以及正在执行的任务，并且不会影响当前系统的性能。数据均衡会自动进行。根据集群现有数据量的大小，集群会在几个小时到1天不等的时间内，恢复到负载均衡的状态。
• 使用mysql-client或客户端工具（dbeaver）连接到已启动的FE
• 通过执行以下SQL命令来增加BE节点
alter system add backend "ip:node"
#例 alter system add backend "10.19.162.103:9050"
• 删除BE节点
# 删除节点有两种方式：drop和decommission
alter system dropp backend “ndoe01:9050”; #硬删除
或者
alter system decommission backend "ndoe01:9050"; #软删除 推荐使用这个
查看所有BE
show proc '/backends'
本案例的BE扩容，已经在上述步骤完成，BE是3节点集群，具体参见上述安装BE步骤：“通过SQL命令添加Broker节点”。
Broker的扩容与缩容
Broker实例的数量没有硬性要求。通常每台物理机部署一个即可，Broker的添加和删除可以通过一下命令完成
alter system add broker broker_030406 "10.19.162.104:8000"
alter system add broker broker_030406 "10.19.162.106:8000"
alter system drop all broker broker_030406
Broker的扩容已经在上述步骤完成，具体操作参见上述安装Broker步骤：“通过SQL命令添加Broker节点”。
常用指令
sh /root/apache-doris-0.15/fe/bin/start_fe.sh --daemon
sh /root/apache-doris-0.15/be/bin/start_be.sh --daemon
mysql -uroot -h 10.19.162.111 -P 9030 -p
show proc '/frontends';
show proc '/backends';
alter system add backend "10.19.162.111:9050";
alter system dropp backend "10.19.162.111:9050";
alter system decommission backend "10.19.162.110:9050";
SHOW PROC '/backends'\G
相关文章：
Doris集群安装部署（1.2.4.1 release）
此文阅读需要有Linux和服务器硬件基础！某些内容写的不是特别细，如果常见的linux基础命令tar、uzip、mv、mkdir、系统包的安装等等，以文字带过了，这样可以减少文章篇幅。官方的安装部署方式一定要好好看一下，最好是尝试…...
对HashMap的value做升序、降序
public class MapUtils {// Map的value值降序排序public static <K, V extends Comparable<? super V>> Map<K, V> sortDescend(Map<K, V> map) {List<Map.Entry<K, V>> list new ArrayList<>(map.entrySet());list.sort((o1, o2)…...
算法面试-深度学习基础面试题整理-AIGC相关（2023.9.01开始，持续更新...）
1、stable diffusion和GAN哪个好？为什么 ？ Stable diffusion是一种基于随机微分方程的生成方法，它通过逐步增加噪声来扰动原始图像，直到完全随机化。然后，它通过逐步减少噪声来恢复图像，同时使用一个神经网…...
Python、PHP和Java下的反序列化漏洞复现实例
环境准备 这篇文章旨在用于网络安全学习，请勿进行任何非法行为，否则后果自负。 python反序列化 p83 CTF夺旗 Python考点SST&反序列化&字符串_正经人_____的博客-CSDN博客 php反序列化 p84 CTF夺旗-PHP弱类型&异或取反&序列化&…...
html的使用
一,HBuilder –1,使用 直接解压就可以用, 创建项目: 直接点击 新建项目,输入项目名和选中项目存放位置,创建. 创建资源: 选中项目,右键,新建… 二,HTML –1,概述 是超文本标记语言,专门用来制作网页的. 超文本: 网页中可以包含各种类型的元素.包括: 文字,数字,符号,图片,音频,…...
docker linux（centos 7） 安装
这是个目录 1:安装1:手动安装(适用于centos7)之一2:手动安装(适用于centos7)之二3：一键安装docker4:二进制安装1：下载二进制包2：解压3：移动文件4：后台运行docker5：测试 dicker命令表999：遇到的问…...
C语言sizeof和strlen的区别？
sizeof和strlen有什么区别？ sizeof本质是运算符（sizoof既是关键字也是运算符，不是函数哈），而strlen就是函数。sizeof后面如果是类型，则必须加括号，如果是变量，可以不加括号。 sizeof…...
小文智能GPT助手介绍
如何使用小文交互的GPT助手，让AI更加智能，适用更多场景？ 在小文智能最新推出的4.0版本，有一个新功能，叫做GPT助手。GPT助手，顾名思义，即在小文智能的场景中，接入ChatGPT，…...
SpringBoot使用i18n国际化
使用的SpringBoot版本是2.3.5 <parent><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-parent</artifactId><version>2.3.5.RELEASE</version><relativePath/> </parent> 一、简单测试…...
Jmeter的自动化测试实施方案
前言： Jmeter是目前最流行的一种测试工具，基于此工具我们搭建了一整套的自动化方案，包括了脚本添加配置、本地配置和运行、服务器配置等内容，完成了自动化测试闭环，通过这种快捷简便高效的方式，希望可以解…...
nginx优化相关
https://blog.csdn.net/liuxiao723846/article/details/46862381 Nginx反向代理，当后端为Https时的一些细节和原理_nginx反向代理https_赶路人儿的博客-CSDN博客 nginx - 寒星12345678999 - 博客园 (cnblogs.com)...
美客多（mercadolibre)测评下单技术（养号环境搭建详解）
MercadoLibre（美客多）是拉丁美洲的一个网购平台。该公司为其客户提供电子商务交易的购买，出售，支付和收集机制。目前全球第十大电商市场——巴西是MercadoLibre的主要市场，占据近60%的平台营收，接着是阿根廷…...
UE5- c++ websocket客户端写法
# 实现目标 ue5 c 实现socket客户端，读取服务端数据，并进行解析 #实现步骤 {projectName}.Build.cs里增加 "WebSockets","JsonUtilities", "Json"配置信息，最终输出如下： using UnrealBuildTool;…...
C语言——函数的使用
无参无返回值 语法格式如下： // 函数定义 void 函数名() {函数体 }// 函数调用 函数名();函数名是标识符的一种，需要遵循规则函数只需要定义一次，反复调用只定义函数, 不调用函数, 函数永远不会被执行案例需求： 编写一个函数&am…...
DVWA XSS
反射型 low 查看源代码，没有任何过滤 构造 medium 这里是过滤了 high 这里把双写和大小写和JavaScript都过滤了,用事件来绕过<img src0 οnerrοralert(“xss”)> impossible 这里使用htmlspecialchars进行实体转换并且输出的结果还不能使用事件来…...
石油化工智慧安监方案：TSINGSEE青犀视频AI智能识别安全生产风险预警平台建设
一、行业背景 石油化工生产存储企业属于高温、高压、易燃、易爆、有毒的危险行业，其生产装置大型化、密集化、生产工艺复杂、生产过程紧密耦合。随着互联网技术的发展，运用先进的AI、物联网、大数据、云计算等技术手段不断提高石油化工行业的安全监管水…...
R语言图形绘制
（1）条形图 > barplot(c(1,2,4,2,6,4,3,5)) > barplot(c(1,2,4,2,6,4,3,5),horiz TRUE) #besideTRUE 表示将多个组别的图形并排显示，使它们在水平方向上对齐 #而当 besideFALSE（默认值）时，多个组别的…...
2023第七届蓝帽杯 初赛 web LovePHP
LovePHP 直接给了源码。 network查看到，PHP版本是7.4.33 题目要求我们GET一个my_secret.flag参数，根据PHP字符串解析特性，PHP需要将所有参数转换为有效的变量名，因此在解析查询字符串时，它会做两件事： 删…...
Pytorch 的基本概念和使用场景介绍
文章目录 一、基本概念1. 张量（Tensor）2. 自动微分（Autograd）3. 计算图（Computation Graph）4. 动态计算图（Dynamic Computation Graph）5. 变量（Variable） 二、…...
git 基础入门
Git基础入门 Git是一个分布式 版本管理系统，用于跟踪文件的变化和协同开发。 版本管理：理解成档案馆，记录开发阶段各个版本 分布式&集中式 分布式每个人都有一个档案馆，集中式只有一个档案馆。分布式每人可以管理自己的档案…...
(LeetCode 每日一题) 3442. 奇偶频次间的最大差值 I (哈希、字符串)
题目：3442. 奇偶频次间的最大差值 I 思路 ：哈希，时间复杂度0(n)。 用哈希表来记录每个字符串中字符的分布情况，哈希表这里用数组即可实现。 C版本： class Solution { public:int maxDifference(string s) {int a[26]…...
Spring Boot 实现流式响应（兼容 2.7.x）
在实际开发中，我们可能会遇到一些流式数据处理的场景，比如接收来自上游接口的 Server-Sent Events（SSE） 或 流式 JSON 内容，并将其原样中转给前端页面或客户端。这种情况下，传统的 RestTemplate 缓存机制会…...
Debian系统简介
目录 Debian系统介绍 Debian版本介绍 Debian软件源介绍 软件包管理工具dpkg dpkg核心指令详解 安装软件包 卸载软件包 查询软件包状态 验证软件包完整性 手动处理依赖关系 dpkg vs apt Debian系统介绍 Debian 和 Ubuntu 都是基于 Debian内核 的 Linux 发行版ÿ…...
STM32+rt-thread判断是否联网
一、根据NETDEV_FLAG_INTERNET_UP位判断 static bool is_conncected(void) {struct netdev *dev RT_NULL;dev netdev_get_first_by_flags(NETDEV_FLAG_INTERNET_UP);if (dev RT_NULL){printf("wait netdev internet up...");return false;}else{printf("loc…...
Opencv中的addweighted函数
一.addweighted函数作用 addweighted（）是OpenCV库中用于图像处理的函数，主要功能是将两个输入图像（尺寸和类型相同）按照指定的权重进行加权叠加（图像融合），并添加一个标量值&#x…...
Vue2 第一节_Vue2上手_插值表达式{{}}_访问数据和修改数据_Vue开发者工具
文章目录 1.Vue2上手-如何创建一个Vue实例,进行初始化渲染2. 插值表达式{{}}3. 访问数据和修改数据4. vue响应式5. Vue开发者工具--方便调试 1.Vue2上手-如何创建一个Vue实例,进行初始化渲染 准备容器引包创建Vue实例 new Vue()指定配置项 ->渲染数据 准备一个容器,例如: …...
【Web 进阶篇】优雅的接口设计：统一响应、全局异常处理与参数校验
系列回顾： 在上一篇中，我们成功地为应用集成了数据库，并使用 Spring Data JPA 实现了基本的 CRUD API。我们的应用现在能“记忆”数据了！但是，如果你仔细审视那些 API，会发现它们还很“粗糙”：有…...
Maven 概述、安装、配置、仓库、私服详解
目录 1、Maven 概述 1.1 Maven 的定义 1.2 Maven 解决的问题 1.3 Maven 的核心特性与优势 2、Maven 安装 2.1 下载 Maven 2.2 安装配置 Maven 2.3 测试安装 2.4 修改 Maven 本地仓库的默认路径 3、Maven 配置 3.1 配置本地仓库 3.2 配置 JDK 3.3 IDEA 配置本地 Ma…...
rnn判断string中第一次出现a的下标
# coding:utf8 import torch import torch.nn as nn import numpy as np import random import json""" 基于pytorch的网络编写 实现一个RNN网络完成多分类任务 判断字符 a 第一次出现在字符串中的位置 """class TorchModel(nn.Module):def __in…...
CVE-2020-17519源码分析与漏洞复现(Flink 任意文件读取)
漏洞概览 漏洞名称：Apache Flink REST API 任意文件读取漏洞CVE编号：CVE-2020-17519CVSS评分：7.5影响版本：Apache Flink 1.11.0、1.11.1、1.11.2修复版本：≥ 1.11.3 或 ≥ 1.12.0漏洞类型：路径遍历&#x…...