This is an automated email from the ASF dual-hosted git repository.
zirui pushed a commit to branch master
in repository https://gitbox.apache.org/repos/asf/inlong-website.git
The following commit(s) were added to refs/heads/master by this push:
new de1349f5d [INLONG-510][Improve] Adjust the format TubeMQ configuration
document in the Chinese version (#511)
de1349f5d is described below
commit de1349f5dc23fc402f8d602ec2623cee0c8efc9b
Author: Goson Zhang <[email protected]>
AuthorDate: Tue Aug 9 09:52:02 2022 +0800
[INLONG-510][Improve] Adjust the format TubeMQ configuration document in
the Chinese version (#511)
---
.../modules/tubemq/configure_introduction.md | 245 ++++++++++++---------
1 file changed, 140 insertions(+), 105 deletions(-)
diff --git
a/i18n/zh-CN/docusaurus-plugin-content-docs/current/modules/tubemq/configure_introduction.md
b/i18n/zh-CN/docusaurus-plugin-content-docs/current/modules/tubemq/configure_introduction.md
index afdf7f6b3..e44feb1a9 100644
---
a/i18n/zh-CN/docusaurus-plugin-content-docs/current/modules/tubemq/configure_introduction.md
+++
b/i18n/zh-CN/docusaurus-plugin-content-docs/current/modules/tubemq/configure_introduction.md
@@ -25,60 +25,77 @@ Master除了后端系统配置文件外,还在resources里存放了Web前端
## 2 配置项详情:
### 2.1 master.ini文件中关键配置内容说明:
-
-| 配置单元 | 配置项 | 是否必选 | 值类型 | 配置说明
|
-| --- |-----| --- | ---
|---------------------------------------------------------|
-| [master] | | 是 | 配置单元 |
[master]是Master系统运行主配置单元,必填单元,值固定为"[master]" |
-| | hostName | 是 | String |
Master对外服务的主机地址,必填项,必须在网卡中已配置,处于启用状态,非回环且不能为127.0.0.1的IP |
-| | port | 否 | int | Master监听的端口,可选项,缺省值为8715 |
-| | webPort | 否 | int | Master Web控制台的访问端口,缺省值为8080 |
-| | webResourcePath | 是 | String | Master Web
Resource部署绝对路径,必填项,该值设置不正确时Web页面将不能正常显示 |
-| | confModAuthToken | 否 | String |
通过Master的Web或API做变更操作(包括增、删、改配置,以及变更Master及管理的Broker状态)时操作者需要提供的授权Token,该值可选,缺省为"ASDFGHJKL"
|
-| | firstBalanceDelayAfterStartMs | 否 | long |
Master启动至首次开始Rebalance的时间间隔,可选项,缺省30000毫秒 |
-| | consumerBalancePeriodMs | 否 | long |
Master对消费组进行Rebalance的均衡周期,可选项,缺省60000毫秒,当集群规模较大时,请调大该值 |
-| | consumerHeartbeatTimeoutMs | 否 | long |
消费者心跳超时周期,可选项,缺省30000毫秒,当集群规模较大时,请调大该值 |
-| | producerHeartbeatTimeoutMs | 否 | long |
生产者心跳超时周期,可选项,缺省30000毫秒,当集群规模较大时,请调大该值 |
-| | brokerHeartbeatTimeoutMs | 否 | long |
Broker心跳超时周期,可选项,缺省30000毫秒,当集群规模较大时,请调大该值 |
-| | rebalanceParallel | 否 | int | Master Rebalance处理并行度,可选项,缺省4,取值范围[1, 20],
当集群规模较大时,请调大该值 |
-| | socketRecvBuffer | 否 | long | Socket接收Buffer缓冲区SO\_RCVBUF大小,单位字节,
负数为不做设置以缺省值为准 |
-| | socketSendBuffer | 否 | long | Socket发送Buffer缓冲区SO\_SNDBUF大小,单位字节,
负数为不做设置以缺省值为准 |
-| | maxAutoForbiddenCnt | 否 | int |
Broker出现IO故障时最大允许Master自动下线Broker个数,可选项,缺省为5,建议该值不超过集群内Broker总数的10% |
-| | startOffsetResetCheck | 否 | boolean | 是否启用客户端Offset重置功能的检查功能,可选项,缺省为false |
-| | needBrokerVisitAuth | 否 | boolean |
是否启用Broker访问鉴权,缺省为false,如果为true,则Broker上报的消息里必须携带正确的用户名及签名信息 |
-| | visitName | 否 | String |
Broker访问鉴权的用户名,缺省为空字符串,在needBrokerVisitAuth为true时该值必须存在,该值必须与broker.ini里的visitName字段值同
|
-| | visitPassword | 否 | String |
Broker访问鉴权的密码,缺省为空字符串,在needBrokerVisitAuth为true时该值必须存在,该值必须与broker.ini里的visitPassword字段值同
|
-| | startVisitTokenCheck | 否 | boolean | 是否启用客户端visitToken检查,缺省为false |
-| | startProduceAuthenticate | 否 | boolean | 是否启用生产端用户认证,缺省为false |
-| | startProduceAuthorize | 否 | boolean | 是否启用生产端生产授权认证,缺省为false |
-| | startConsumeAuthenticate | 否 | boolean | 是否启用消费端用户认证,缺省为false |
-| | startConsumeAuthorize | 否 | boolean | 是否启用消费端消费授权认证,缺省为false |
-| | maxGroupBrokerConsumeRate | 否 | int |
集群Broker数与消费组里成员数的最大比值,可选项,缺省为50,50台Broker集群里允许1个消费组最少启动1个客户端消费 |
-| [meta_zookeeper] | | 条件 | 配置单元 |
元数据存储到ZooKeeper时的配置单元,[meta_bdb]与[meta_zookeeper]二选一 |
-| | zkServerAddr | 否 | String | zk服务器地址,可选配置,缺省为"localhost:2181" |
-| | zkNodeRoot | 否 | String | zk上的节点根目录路径,可选配置,缺省为"/tubemq" |
-| | zkSessionTimeoutMs | 否 | long | zk心跳超时,单位毫秒,默认30秒 |
-| | zkConnectionTimeoutMs | 否 | long | zk连接超时时间,单位毫秒,默认30秒 |
-| | zkSyncTimeMs | 否 | long | zk数据同步时间,单位毫秒,默认5秒 |
-| | zkCommitPeriodMs | 否 | long | Master缓存数据刷新到zk上的时间间隔,单位毫秒,默认5秒 |
-| | zkMasterCheckPeriodMs | 否 | long | 当前节点是否为Master角色的检查周期,单位毫秒,缺省为5秒 |
-| [meta_bdb] | | 条件 | 配置单元 | 元数据存储到BDB时的配置单元,[meta_bdb]与[meta_zookeeper]二选一 |
-| | repGroupName | 否 | String |
集群名,所属主备Master节点值必须相同,可选字段,缺省为"tubemqMasterGroup" |
-| | repNodeName | 是 | String | 所属Master在集群中的节点名,该值各个节点必须不重复,必填字段 |
-| | metaDataPath | 否 | String |
Metadata存储路径,可以是绝对路径、或者相对TubeMQ安装目录("$BASE_DIR")的相对路径。缺省为"var/meta_data"
|
-| | repNodePort | 否 | int | 节点复制通讯端口,可选字段,缺省为9001 |
-| | repHelperHost | 否 | String | 集群启动时的主节点,可选字段,缺省为"127.0.0.1:9001" |
-| | metaLocalSyncPolicy | 否 | int |
数据节点本地保存方式,该字段取值范围[1,2,3],缺省为1:其中1为数据保存到磁盘,2为数据只保存到内存,3为只将数据写文件系统buffer,但不刷盘 |
-| | metaReplicaSyncPolicy | 否 | int |
数据节点同步保存方式,该字段取值范围[1,2,3],缺省为1:其中1为数据保存到磁盘,2为数据只保存到内存,3为只将数据写文件系统buffer,但不刷盘 |
-| | repReplicaAckPolicy | 否 | int |
节点数据同步时的应答策略,该字段取值范围为[1,2,3],缺省为1:其中1为超过1/2多数为有效,2为所有节点应答才有效;3为不需要节点应答 |
-| | repStatusCheckTimeoutMs | 否 | long | 节点状态检查间隔,可选字段,单位毫秒,缺省为10秒 |
-| [tlsSetting] | | 否 | 配置单元 |
[tlsSetting]是Master采用TLS进行传输层数据加密,启用TLS时通过该配置单元提供相关的设置,可选单元,值固定为"[tlsSetting]"
|
-| | tlsEnable | 否 | boolean | 是否启用TLS功能,可选配置,缺省为false |
-| | tlsPort | 否 | int | Master的TLS端口号,可选配置,缺省为8716 |
-| | tlsKeyStorePath | 否 | String |
TLS的keyStore文件的绝对存储路径+keyStore文件名,在启动TLS功能时,该字段必填且不能为空 |
-| | tlsKeyStorePassword | 否 | String |
TLS的keyStorePassword文件的绝对存储路径+keyStorePassword文件名,在启动TLS功能时,该字段必填且不能为空 |
-| | tlsTwoWayAuthEnable | 否 | boolean | 是否启用TLS双向认证功能,可选配置,缺省为false |
-| | tlsTrustStorePath | 否 | String |
TLS的TrustStore文件的绝对存储路径+TrustStore文件名,在启动TLS功能且启用双向认证时,该字段必填且不能为空 |
-| | tlsTrustStorePassword | 否 | String |
TLS的TrustStorePassword文件的绝对存储路径+TrustStorePassword文件名,在启动TLS功能且启用双向认证时,该字段必填且不能为空
|
+[master]
+> master 系统运行主要配置单元,必填单元,值固定为 "[master]"
+
+| 配置项 | 是否必选 | 值类型 | 配置说明 |
+|-----| --- | --- |---------------------------------------------------------|
+| hostName | 是 | String |
Master对外服务的主机地址,必填项,必须在网卡中已配置,处于启用状态,非回环且不能为127.0.0.1的IP |
+| port | 否 | int | Master监听的端口,可选项,缺省值为8715 |
+| webPort | 否 | int | Master Web控制台的访问端口,缺省值为8080 |
+| webResourcePath | 是 | String | Master Web
Resource部署绝对路径,必填项,该值设置不正确时Web页面将不能正常显示 |
+| confModAuthToken | 否 | String |
通过Master的Web或API做变更操作(包括增、删、改配置,以及变更Master及管理的Broker状态)时操作者需要提供的授权Token,该值可选,缺省为"ASDFGHJKL"
|
+| firstBalanceDelayAfterStartMs | 否 | long |
Master启动至首次开始Rebalance的时间间隔,可选项,缺省30000毫秒 |
+| consumerBalancePeriodMs | 否 | long |
Master对消费组进行Rebalance的均衡周期,可选项,缺省60000毫秒,当集群规模较大时,请调大该值 |
+| consumerHeartbeatTimeoutMs | 否 | long |
消费者心跳超时周期,可选项,缺省30000毫秒,当集群规模较大时,请调大该值 |
+| producerHeartbeatTimeoutMs | 否 | long |
生产者心跳超时周期,可选项,缺省30000毫秒,当集群规模较大时,请调大该值 |
+| brokerHeartbeatTimeoutMs | 否 | long |
Broker心跳超时周期,可选项,缺省30000毫秒,当集群规模较大时,请调大该值 |
+| rebalanceParallel | 否 | int | Master Rebalance处理并行度,可选项,缺省4,取值范围[1, 20],
当集群规模较大时,请调大该值 |
+| socketRecvBuffer | 否 | long | Socket接收Buffer缓冲区SO\_RCVBUF大小,单位字节,
负数为不做设置以缺省值为准 |
+| socketSendBuffer | 否 | long | Socket发送Buffer缓冲区SO\_SNDBUF大小,单位字节,
负数为不做设置以缺省值为准 |
+| maxAutoForbiddenCnt | 否 | int |
Broker出现IO故障时最大允许Master自动下线Broker个数,可选项,缺省为5,建议该值不超过集群内Broker总数的10% |
+| startOffsetResetCheck | 否 | boolean | 是否启用客户端Offset重置功能的检查功能,可选项,缺省为false |
+| needBrokerVisitAuth | 否 | boolean |
是否启用Broker访问鉴权,缺省为false,如果为true,则Broker上报的消息里必须携带正确的用户名及签名信息 |
+| visitName | 否 | String |
Broker访问鉴权的用户名,缺省为空字符串,在needBrokerVisitAuth为true时该值必须存在,该值必须与broker.ini里的visitName字段值同
|
+| visitPassword | 否 | String |
Broker访问鉴权的密码,缺省为空字符串,在needBrokerVisitAuth为true时该值必须存在,该值必须与broker.ini里的visitPassword字段值同
|
+| startVisitTokenCheck | 否 | boolean | 是否启用客户端visitToken检查,缺省为false |
+| startProduceAuthenticate | 否 | boolean | 是否启用生产端用户认证,缺省为false |
+| startProduceAuthorize | 否 | boolean | 是否启用生产端生产授权认证,缺省为false |
+| startConsumeAuthenticate | 否 | boolean | 是否启用消费端用户认证,缺省为false |
+| startConsumeAuthorize | 否 | boolean | 是否启用消费端消费授权认证,缺省为false |
+| maxGroupBrokerConsumeRate | 否 | int |
集群Broker数与消费组里成员数的最大比值,可选项,缺省为50,50台Broker集群里允许1个消费组最少启动1个客户端消费 |
+
+[meta_zookeeper]
+> Master 基于 ZooKeeper 进行元数据存储和多节点热备的配置单元,"[meta_zookeeper]" 这部分和
"[meta_bdb]" 二选一。
+
+| 配置项 | 是否必选 | 值类型 | 配置说明 |
+|-----| --- | --- |---------------------------------------------------------|
+| zkServerAddr | 否 | String | zk服务器地址,可选配置,缺省为"localhost:2181" |
+| zkNodeRoot | 否 | String | zk上的节点根目录路径,可选配置,缺省为"/tubemq" |
+| zkSessionTimeoutMs | 否 | long | zk心跳超时,单位毫秒,默认30秒 |
+| zkConnectionTimeoutMs | 否 | long | zk连接超时时间,单位毫秒,默认30秒 |
+| zkSyncTimeMs | 否 | long | zk数据同步时间,单位毫秒,默认5秒 |
+| zkCommitPeriodMs | 否 | long | Master缓存数据刷新到zk上的时间间隔,单位毫秒,默认5秒 |
+| zkMasterCheckPeriodMs | 否 | long | 当前节点是否为Master角色的检查周期,单位毫秒,缺省为5秒 |
+
+[meta_bdb]
+> Master 基于 BDB 存储元数据及进行多节点热备保活的配置单元,"[meta_bdb]" 这部分和
"[meta_zookeeper]" 二选一。
+
+| 配置项 | 是否必选 | 值类型 | 配置说明 |
+|-----| --- | --- |---------------------------------------------------------|
+| repGroupName | 否 | String |
集群名,所属主备Master节点值必须相同,可选字段,缺省为"tubemqMasterGroup" |
+| repNodeName | 是 | String | 所属Master在集群中的节点名,该值各个节点必须不重复,必填字段 |
+| metaDataPath | 否 | String |
Metadata存储路径,可以是绝对路径、或者相对TubeMQ安装目录("$BASE_DIR")的相对路径。缺省为"var/meta_data"
|
+| repNodePort | 否 | int | 节点复制通讯端口,可选字段,缺省为9001 |
+| repHelperHost | 否 | String | 集群启动时的主节点,可选字段,缺省为"127.0.0.1:9001" |
+| metaLocalSyncPolicy | 否 | int |
数据节点本地保存方式,该字段取值范围[1,2,3],缺省为1:其中1为数据保存到磁盘,2为数据只保存到内存,3为只将数据写文件系统buffer,但不刷盘 |
+| metaReplicaSyncPolicy | 否 | int |
数据节点同步保存方式,该字段取值范围[1,2,3],缺省为1:其中1为数据保存到磁盘,2为数据只保存到内存,3为只将数据写文件系统buffer,但不刷盘 |
+| repReplicaAckPolicy | 否 | int |
节点数据同步时的应答策略,该字段取值范围为[1,2,3],缺省为1:其中1为超过1/2多数为有效,2为所有节点应答才有效;3为不需要节点应答 |
+| repStatusCheckTimeoutMs | 否 | long | 节点状态检查间隔,可选字段,单位毫秒,缺省为10秒 |
+
+
+[tlsSetting]
+> Master 启用 TLS 进行传输层数据加密通的相关设置,可选单元,值固定为 "[tlsSetting]"
+
+| 配置项 | 是否必选 | 值类型 | 配置说明 |
+|-----| --- | --- |---------------------------------------------------------|
+| tlsEnable | 否 | boolean | 是否启用TLS功能,可选配置,缺省为false |
+| tlsPort | 否 | int | Master的TLS端口号,可选配置,缺省为8716 |
+| tlsKeyStorePath | 否 | String |
TLS的keyStore文件的绝对存储路径+keyStore文件名,在启动TLS功能时,该字段必填且不能为空 |
+| tlsKeyStorePassword | 否 | String |
TLS的keyStorePassword文件的绝对存储路径+keyStorePassword文件名,在启动TLS功能时,该字段必填且不能为空 |
+| tlsTwoWayAuthEnable | 否 | boolean | 是否启用TLS双向认证功能,可选配置,缺省为false |
+| tlsTrustStorePath | 否 | String |
TLS的TrustStore文件的绝对存储路径+TrustStore文件名,在启动TLS功能且启用双向认证时,该字段必填且不能为空 |
+| tlsTrustStorePassword | 否 | String |
TLS的TrustStorePassword文件的绝对存储路径+TrustStorePassword文件名,在启动TLS功能且启用双向认证时,该字段必填且不能为空
|
**注意**:
-
基于Docker容器化的需要,master.ini文件里对[meta_bdb]如上3个参数部分都是使用的缺省设置,在实际组网使用时需要以Master节点真实信息配置
@@ -88,59 +105,77 @@ Master除了后端系统配置文件外,还在resources里存放了Web前端
### 2.2 Master的前台配置文件velocity.properties中关键配置内容说明:
-| 配置单元 | 配置项 | 是否必选 | 值类型 | 配置说明 |
-| --- | --- | --- | --- | --- |
-| | file.resource.loader.path | 是 | String |
Master的Web的模板绝对路径,该部分为实际部署Master时的工程绝对路径+/resources/templates,该配置要与实际部署相吻合,配置失败会导致Master前端页面访问失败。
|
+| 配置项 | 是否必选 | 值类型 | 配置说明 |
+| --- | --- | --- | --- |
+| file.resource.loader.path | 是 | String |
Master的Web的模板绝对路径,该部分为实际部署Master时的工程绝对路径+/resources/templates,该配置要与实际部署相吻合,配置失败会导致Master前端页面访问失败。
|
-### 2.3 broker.ini文件中关键配置内容说明:
-| 配置单元 | 配置项 | 是否必选 | 值类型 | 配置说明
|
-|--------------| ---
|------|---------|------------------------------------------------------------------------------------------------------------------|
-| [broker] | | 是 | 配置单元 |
[broker]是Broker系统运行主配置单元,必填单元,值固定为"[broker]"
|
-| | brokerId | 是 | int |
服务器唯一标志,必填字段,可设为0;设为0时系统将默认取本机IP转化为int值再取abs绝对值,避免brokerId为负数,如果使用环境的IP比较复杂存在生成的brokerId值冲突时,则需要指定brokerId值进行设置。
|
-| | hostName | 是 | String |
Broker对外服务的主机地址,必填项,必须在网卡中已配置,处于启用状态,非回环且不能为127.0.0.1的IP
|
-| | port | 否 | int | Broker监听的端口,可选项,缺省值为8123
|
-| | webPort | 否 | int | Broker的http管理访问端口,可选项,缺省为8081
|
-| | masterAddressList | 是 | String |
Broker所属集群的Master地址列表,必填字段,格式必须是ip1:port1,ip2:port2,ip3:port3
|
-| | primaryPath | 是 | String | Broker存储消息的绝对路径,必选字段
|
-| | maxSegmentSize | 否 | int |
Broker存储消息Data内容的文件大小,可选字段,缺省512M,最大1G
|
-| | maxIndexSegmentSize | 否 | int |
Broker存储消息Index内容的文件大小,可选字段,缺省18M,约70W条消息每文件
|
-| | transferSize | 否 | int |
Broker允许每次传输给客户端的最大消息内容大小,可选字段,缺省为512K
|
-| | consumerRegTimeoutMs | 否 | long |
consumer心跳超时时间,可选项,单位毫秒,默认30秒
|
-| | socketRecvBuffer | 否 | long |
Socket接收Buffer缓冲区SO\_RCVBUF大小,单位字节,负数为不做设置以缺省值为准
|
-| | socketSendBuffer | 否 | long |
Socket发送Buffer缓冲区SO\_SNDBUF大小,单位字节,负数为不做设置以缺省值为准
|
-| | tcpWriteServiceThread | 否 | int |
Broker支持TCP生产服务的socket worker线程数,可选字段,缺省为所在机器的2倍CPU个数
|
-| | tcpReadServiceThread | 否 | int |
Broker支持TCP消费服务的socket worker线程数,可选字段,缺省为所在机器的2倍CPU个数
|
-| | logClearupDurationMs | 否 | long | 消息文件的老化清理周期, 单位为毫秒,
缺省为3分钟进行一次日志清理操作,最低1分钟
|
-| | logFlushDiskDurMs | 否 | long | 批量检查消息持久化到文件的检查周期,单位为毫秒,
缺省为20秒进行一次全量的检查及刷盘
|
-| | visitTokenCheckInValidTimeMs | 否 | long |
visitToken检查时允许Broker注册后延迟检查的时长,单位ms,缺省120000,取值范围[60000,300000]
|
-| | visitMasterAuth | 否 | boolean |
是否启用上报Master鉴权,缺省为false,如果为true,则会在上报Master的信令里加入用户名及签名信息
|
-| | visitName | 否 | String |
访问Master的用户名,缺省为空字符串,在visitMasterAuth为true时该值必须存在,该值必须与master.ini里的visitName字段值同
|
-| | visitPassword | 否 | String |
访问Master的密码,缺省为空字符串,在visitMasterAuth为true时该值必须存在,该值必须与master.ini里的visitPassword字段值同
|
-| | logFlushMemDurMs | 否 | long |
批量检查消息内存持久化到文件的检查周期,单位为毫秒, 缺省为10秒进行一次全量的检查及刷盘
|
-| [zookeeper] | | 否 | 配置单元 | [zookeeper]是Broker对应的Tube
MQ集群存储Offset的ZooKeeper集群相关信息,必填单元,值固定为"[zookeeper]"
|
-| | zkServerAddr | 否 | String |
zk服务器地址,可选配置,缺省为"localhost:2181"
|
-| | zkNodeRoot | 否 | String |
zk上的节点根目录路径,可选配置,缺省为"/tubemq"
|
-| | zkSessionTimeoutMs | 否 | long | zk心跳超时,单位毫秒,默认30秒
|
-| | zkConnectionTimeoutMs | 否 | long | zk连接超时时间,单位毫秒,默认30秒
|
-| | zkSyncTimeMs | 否 | long | zk数据同步时间,单位毫秒,默认5秒
|
-| | zkCommitPeriodMs | 否 | long |
Broker缓存数据刷新到zk上的时间间隔,单位毫秒,默认5秒
|
-| | zkCommitFailRetries | 否 | int |
Broker刷新缓存数据到Zk失败后的最大重刷次数
|
-| [tlsSetting] | | 否 | 配置单元 |
[tlsSetting]是Master采用TLS进行传输层数据加密,启用TLS时通过该配置单元提供相关的设置,可选单元,值固定为"[tlsSetting]"
|
-| | tlsEnable | 否 | boolean | 是否启用TLS功能,可选配置,缺省为false
|
-| | tlsPort | 否 | int | Broker的TLS端口号,可选配置,缺省为8124
|
-| | tlsKeyStorePath | 否 | String |
TLS的keyStore文件的绝对存储路径+keyStore文件名,在启动TLS功能时,该字段必填且不能为空
|
-| | tlsKeyStorePassword | 否 | String |
TLS的keyStorePassword文件的绝对存储路径+keyStorePassword文件名,在启动TLS功能时,该字段必填且不能为空
|
-| | tlsTwoWayAuthEnable | 否 | boolean |
是否启用TLS双向认证功能,可选配置,缺省为false
|
-| | tlsTrustStorePath | 否 | String |
TLS的TrustStore文件的绝对存储路径+TrustStore文件名,在启动TLS功能且启用双向认证时,该字段必填且不能为空
|
-| | tlsTrustStorePassword | 否 | String |
TLS的TrustStorePassword文件的绝对存储路径+TrustStorePassword文件名,在启动TLS功能且启用双向认证时,该字段必填且不能为空
|
-| [audit] | | 否 | 配置单元 | [audit] 是 Broker
使用审计模块来报告数据设置单元,启用审计时,配置单元提供相关设置,该可选配置单位有一个固定值 " [audit] "
|
-| | auditEnable | 否 | boolean | 是否启用审计上报功能,可选配置,缺省为false
|
-| | auditProxyAddr | 是 | String | 审计上报地址,当 auditEnable 为
true 时必填字段,格式必须是 " ip1:port1,ip2:port2,ip3:port3 "
|
-| | auditCacheFilePath | 否 | String | 审计上报数据的缓存文件路径,缺省为
" /data/inlong/audit "
|
-| | auditCacheMaxRows | 否 | int | 最大审计缓存的数据条数,缺省为2000000条
|
-| | auditIdProduce | 否 | int | 上报生产数据的审计ID,缺省值为9
|
-| | auditIdConsume | 否 | int | 上报消费数据的审计ID,缺省值为10
|
+### 2.3 broker.ini文件中关键配置内容说明:
+[broker]
+> Broker 系统运行主配置单元,必填单元,值固定为 "[broker]"
+
+| 配置项 | 是否必选 | 值类型 | 配置说明
|
+| ---
|------|---------|------------------------------------------------------------------------------------------------------------------|
+| brokerId | 是 | int |
服务器唯一标志,必填字段,可设为0;设为0时系统将默认取本机IP转化为int值再取abs绝对值,避免brokerId为负数,如果使用环境的IP比较复杂存在生成的brokerId值冲突时,则需要指定brokerId值进行设置。
|
+| hostName | 是 | String |
Broker对外服务的主机地址,必填项,必须在网卡中已配置,处于启用状态,非回环且不能为127.0.0.1的IP
|
+| port | 否 | int | Broker监听的端口,可选项,缺省值为8123
|
+| webPort | 否 | int | Broker的http管理访问端口,可选项,缺省为8081
|
+| masterAddressList | 是 | String |
Broker所属集群的Master地址列表,必填字段,格式必须是ip1:port1,ip2:port2,ip3:port3
|
+| primaryPath | 是 | String | Broker存储消息的绝对路径,必选字段
|
+| maxSegmentSize | 否 | int | Broker存储消息Data内容的文件大小,可选字段,缺省512M,最大1G
|
+| maxIndexSegmentSize | 否 | int |
Broker存储消息Index内容的文件大小,可选字段,缺省18M,约70W条消息每文件
|
+| transferSize | 否 | int | Broker允许每次传输给客户端的最大消息内容大小,可选字段,缺省为512K
|
+| consumerRegTimeoutMs | 否 | long | consumer心跳超时时间,可选项,单位毫秒,默认30秒
|
+| socketRecvBuffer | 否 | long |
Socket接收Buffer缓冲区SO\_RCVBUF大小,单位字节,负数为不做设置以缺省值为准
|
+| socketSendBuffer | 否 | long |
Socket发送Buffer缓冲区SO\_SNDBUF大小,单位字节,负数为不做设置以缺省值为准
|
+| tcpWriteServiceThread | 否 | int | Broker支持TCP生产服务的socket
worker线程数,可选字段,缺省为所在机器的2倍CPU个数
|
+| tcpReadServiceThread | 否 | int | Broker支持TCP消费服务的socket
worker线程数,可选字段,缺省为所在机器的2倍CPU个数
|
+| logClearupDurationMs | 否 | long | 消息文件的老化清理周期, 单位为毫秒,
缺省为3分钟进行一次日志清理操作,最低1分钟
|
+| logFlushDiskDurMs | 否 | long | 批量检查消息持久化到文件的检查周期,单位为毫秒,
缺省为20秒进行一次全量的检查及刷盘
|
+| visitTokenCheckInValidTimeMs | 否 | long |
visitToken检查时允许Broker注册后延迟检查的时长,单位ms,缺省120000,取值范围[60000,300000]
|
+| visitMasterAuth | 否 | boolean |
是否启用上报Master鉴权,缺省为false,如果为true,则会在上报Master的信令里加入用户名及签名信息
|
+| visitName | 否 | String |
访问Master的用户名,缺省为空字符串,在visitMasterAuth为true时该值必须存在,该值必须与master.ini里的visitName字段值同
|
+| visitPassword | 否 | String |
访问Master的密码,缺省为空字符串,在visitMasterAuth为true时该值必须存在,该值必须与master.ini里的visitPassword字段值同
|
+| logFlushMemDurMs | 否 | long | 批量检查消息内存持久化到文件的检查周期,单位为毫秒,
缺省为10秒进行一次全量的检查及刷盘
|
+
+[zookeeper]
+> Broker 对应的 Tube MQ 集群存储 Offset 的 ZooKeeper
集群相关信息,必填单元,值固定为"[zookeeper]"
+
+| 配置项 | 是否必选 | 值类型 | 配置说明 |
+|-----| --- | --- |---------------------------------------------------------|
+| zkServerAddr | 否 | String | zk服务器地址,可选配置,缺省为"localhost:2181"
|
+| zkNodeRoot | 否 | String | zk上的节点根目录路径,可选配置,缺省为"/tubemq"
|
+| zkSessionTimeoutMs | 否 | long | zk心跳超时,单位毫秒,默认30秒
|
+| zkConnectionTimeoutMs | 否 | long | zk连接超时时间,单位毫秒,默认30秒
|
+| zkSyncTimeMs | 否 | long | zk数据同步时间,单位毫秒,默认5秒
|
+| zkCommitPeriodMs | 否 | long | Broker缓存数据刷新到zk上的时间间隔,单位毫秒,默认5秒
|
+| zkCommitFailRetries | 否 | int | Broker刷新缓存数据到Zk失败后的最大重刷次数
|
+
+[tlsSetting]
+> Broker启用TLS时通过该配置单元提供相关的设置,可选单元,值固定为"[tlsSetting]"
+
+| 配置项 | 是否必选 | 值类型 | 配置说明 |
+|-----| --- | --- |---------------------------------------------------------|
+| tlsEnable | 否 | boolean | 是否启用TLS功能,可选配置,缺省为false
|
+| tlsPort | 否 | int | Broker的TLS端口号,可选配置,缺省为8124
|
+| tlsKeyStorePath | 否 | String |
TLS的keyStore文件的绝对存储路径+keyStore文件名,在启动TLS功能时,该字段必填且不能为空
|
+| tlsKeyStorePassword | 否 | String |
TLS的keyStorePassword文件的绝对存储路径+keyStorePassword文件名,在启动TLS功能时,该字段必填且不能为空
|
+| tlsTwoWayAuthEnable | 否 | boolean | 是否启用TLS双向认证功能,可选配置,缺省为false
|
+| tlsTrustStorePath | 否 | String |
TLS的TrustStore文件的绝对存储路径+TrustStore文件名,在启动TLS功能且启用双向认证时,该字段必填且不能为空
|
+| tlsTrustStorePassword | 否 | String |
TLS的TrustStorePassword文件的绝对存储路径+TrustStorePassword文件名,在启动TLS功能且启用双向认证时,该字段必填且不能为空
|
+
+
+[audit]
+> Broker 使用审计模块来报告数据设置单元,启用审计时,配置单元提供相关设置,该可选配置单位有一个固定值 " [audit] "
+
+| 配置项 | 是否必选 | 值类型 | 配置说明 |
+|-----| --- | --- |---------------------------------------------------------|
+| auditEnable | 否 | boolean | 是否启用审计上报功能,可选配置,缺省为false
|
+| auditProxyAddr | 是 | String | 审计上报地址,当 auditEnable 为 true 时必填字段,格式必须是
" ip1:port1,ip2:port2,ip3:port3 " |
+| auditCacheFilePath | 否 | String | 审计上报数据的缓存文件路径,缺省为 "
/data/inlong/audit "
|
+| auditCacheMaxRows | 否 | int | 最大审计缓存的数据条数,缺省为2000000条
|
+| auditIdProduce | 否 | int | 上报生产数据的审计ID,缺省值为9
|
+| auditIdConsume | 否 | int | 上报消费数据的审计ID,缺省值为10
|
---
<a href="#top">Back to top</a>