dockerzhang commented on code in PR #838: URL: https://github.com/apache/inlong-website/pull/838#discussion_r1300933133
########## i18n/zh-CN/docusaurus-plugin-content-docs/current/quick_start/file_pulsar_clickhouse_example.md: ########## @@ -0,0 +1,99 @@ +--- +title: File -> Pulsar -> ClickHouse 示例 +sidebar_position: 2 +--- + +在下面的内容中，我们将通过一个完整的示例介绍如何使用 Apache InLong 创建File -> Pulsar -> ClickHouse数据流。 + +## 环境部署 +### 安装 InLong +在开始之前，我们需要安装 InLong 的全部组件，这里提供两种方式： +1. 按照 [这里的说明](deployment/docker.md)，使用 Docker 进行快速部署。（推荐） +2. 按照 [这里的说明](deployment/bare_metal.md)，使用二进制包依次安装各组件。 + +### 安装 ClickHouse +```shell +docker run -d --rm --net=host --name clickhouse -e CLICKHOUSE_USER=admin -e CLICKHOUSE_PASSWORD=inlong -e CLICKHOUSE_DEFAULT_ACCESS_MANAGEMENT=1 clickhouse/clickhouse-server:22.8 +``` + +## 集群初始化 +容器启动成功后，访问 InLong Dashboard 地址 http://localhost，并使用以下默认账号登录： +``` +User: admin +Password: inlong +``` + +### 创建集群标签 +页面点击 【集群管理】->【标签管理】->【新建】，指定集群标签名称和负责人： + + +**注：default_cluster 是各个组件默认上报集群标签，请勿使用其它名称** + +### 注册 Pulsar 集群 +页面点击 [集群管理]->[集群管理]->[新建集群]，注册 Pulsar 集群： + + +:::note +集群标签选择刚创建的 `default_cluster`，docker 部署的 Pulsar 集群： + +Service URL 为 `pulsar://pulsar:6650`，Admin URL 为 `http://pulsar:8080`。 +::: + +### 注册 Clickhouse 数据节点 +页面点击 【数据节点】→【新建】，新增 ClickHouse 数据节点： + + +## 任务创建 +### 新建数据流组 +页面点击【数据接入】→【新建接入】，只用填写 ID 接选择 Pulsar 即可： + + +:::note +注：如果需要使用kafka，需要修改 docker-compose.yml 中的 MQ_TYPE。 +::: + +### 新建数据流 +点击【下一步】→【新建数据流】，配置 ID 及测试源字段信息： + + +### 为数据流添加文件数据源 +点击【新建数据源】，选择file类型，配置数据源信息，包括名称、选择采集 Agent 集群及 IP 、采集文件路径等： Review Comment: 选择file类型 -> 选择 File 类型 ########## i18n/zh-CN/docusaurus-plugin-content-docs/current/quick_start/file_pulsar_clickhouse_example.md: ########## @@ -0,0 +1,99 @@ +--- +title: File -> Pulsar -> ClickHouse 示例 +sidebar_position: 2 +--- + +在下面的内容中，我们将通过一个完整的示例介绍如何使用 Apache InLong 创建File -> Pulsar -> ClickHouse数据流。 + +## 环境部署 +### 安装 InLong +在开始之前，我们需要安装 InLong 的全部组件，这里提供两种方式： +1. 按照 [这里的说明](deployment/docker.md)，使用 Docker 进行快速部署。（推荐） +2. 按照 [这里的说明](deployment/bare_metal.md)，使用二进制包依次安装各组件。 + +### 安装 ClickHouse +```shell +docker run -d --rm --net=host --name clickhouse -e CLICKHOUSE_USER=admin -e CLICKHOUSE_PASSWORD=inlong -e CLICKHOUSE_DEFAULT_ACCESS_MANAGEMENT=1 clickhouse/clickhouse-server:22.8 +``` + +## 集群初始化 +容器启动成功后，访问 InLong Dashboard 地址 http://localhost，并使用以下默认账号登录： +``` +User: admin +Password: inlong +``` + +### 创建集群标签 +页面点击 【集群管理】->【标签管理】->【新建】，指定集群标签名称和负责人： + + +**注：default_cluster 是各个组件默认上报集群标签，请勿使用其它名称** + +### 注册 Pulsar 集群 +页面点击 [集群管理]->[集群管理]->[新建集群]，注册 Pulsar 集群： + + +:::note +集群标签选择刚创建的 `default_cluster`，docker 部署的 Pulsar 集群： + +Service URL 为 `pulsar://pulsar:6650`，Admin URL 为 `http://pulsar:8080`。 +::: + +### 注册 Clickhouse 数据节点 +页面点击 【数据节点】→【新建】，新增 ClickHouse 数据节点： + + +## 任务创建 +### 新建数据流组 +页面点击【数据接入】→【新建接入】，只用填写 ID 接选择 Pulsar 即可： + + +:::note +注：如果需要使用kafka，需要修改 docker-compose.yml 中的 MQ_TYPE。 +::: + +### 新建数据流 +点击【下一步】→【新建数据流】，配置 ID 及测试源字段信息： + + +### 为数据流添加文件数据源 +点击【新建数据源】，选择file类型，配置数据源信息，包括名称、选择采集 Agent 集群及 IP 、采集文件路径等： + + +### 新建数据目标 +点击【新建数据目标】，选择ClickHouse类型，配置包括名称、库表名称、选择已创建的节点及 Schema 映射信息等，然后点击【提交审批】： Review Comment: 选择ClickHouse类型 -> 选择 ClickHouse 类型 ########## i18n/zh-CN/docusaurus-plugin-content-docs/current/quick_start/file_pulsar_clickhouse_example.md: ########## @@ -0,0 +1,99 @@ +--- +title: File -> Pulsar -> ClickHouse 示例 +sidebar_position: 2 +--- + +在下面的内容中，我们将通过一个完整的示例介绍如何使用 Apache InLong 创建File -> Pulsar -> ClickHouse数据流。 + +## 环境部署 +### 安装 InLong +在开始之前，我们需要安装 InLong 的全部组件，这里提供两种方式： +1. 按照 [这里的说明](deployment/docker.md)，使用 Docker 进行快速部署。（推荐） +2. 按照 [这里的说明](deployment/bare_metal.md)，使用二进制包依次安装各组件。 + +### 安装 ClickHouse +```shell +docker run -d --rm --net=host --name clickhouse -e CLICKHOUSE_USER=admin -e CLICKHOUSE_PASSWORD=inlong -e CLICKHOUSE_DEFAULT_ACCESS_MANAGEMENT=1 clickhouse/clickhouse-server:22.8 +``` + +## 集群初始化 +容器启动成功后，访问 InLong Dashboard 地址 http://localhost，并使用以下默认账号登录： +``` +User: admin +Password: inlong +``` + +### 创建集群标签 +页面点击 【集群管理】->【标签管理】->【新建】，指定集群标签名称和负责人： + + +**注：default_cluster 是各个组件默认上报集群标签，请勿使用其它名称** + +### 注册 Pulsar 集群 +页面点击 [集群管理]->[集群管理]->[新建集群]，注册 Pulsar 集群： + + +:::note +集群标签选择刚创建的 `default_cluster`，docker 部署的 Pulsar 集群： + +Service URL 为 `pulsar://pulsar:6650`，Admin URL 为 `http://pulsar:8080`。 +::: + +### 注册 Clickhouse 数据节点 +页面点击 【数据节点】→【新建】，新增 ClickHouse 数据节点： + + +## 任务创建 +### 新建数据流组 +页面点击【数据接入】→【新建接入】，只用填写 ID 接选择 Pulsar 即可： + + +:::note +注：如果需要使用kafka，需要修改 docker-compose.yml 中的 MQ_TYPE。 +::: + +### 新建数据流 +点击【下一步】→【新建数据流】，配置 ID 及测试源字段信息： + + +### 为数据流添加文件数据源 +点击【新建数据源】，选择file类型，配置数据源信息，包括名称、选择采集 Agent 集群及 IP 、采集文件路径等： + + +### 新建数据目标 +点击【新建数据目标】，选择ClickHouse类型，配置包括名称、库表名称、选择已创建的节点及 Schema 映射信息等，然后点击【提交审批】： Review Comment: 选择ClickHouse类型 -> 选择 ClickHouse 类型 ########## i18n/zh-CN/docusaurus-plugin-content-docs/current/quick_start/file_pulsar_clickhouse_example.md: ########## @@ -0,0 +1,99 @@ +--- +title: File -> Pulsar -> ClickHouse 示例 +sidebar_position: 2 +--- + +在下面的内容中，我们将通过一个完整的示例介绍如何使用 Apache InLong 创建File -> Pulsar -> ClickHouse数据流。 Review Comment: 创建File -> Pulsar -> ClickHouse数据流 -> 创建 File -> Pulsar -> ClickHouse 数据流 ########## i18n/zh-CN/docusaurus-plugin-content-docs/current/quick_start/file_pulsar_clickhouse_example.md: ########## @@ -0,0 +1,99 @@ +--- +title: File -> Pulsar -> ClickHouse 示例 +sidebar_position: 2 +--- + +在下面的内容中，我们将通过一个完整的示例介绍如何使用 Apache InLong 创建File -> Pulsar -> ClickHouse数据流。 + +## 环境部署 +### 安装 InLong +在开始之前，我们需要安装 InLong 的全部组件，这里提供两种方式： +1. 按照 [这里的说明](deployment/docker.md)，使用 Docker 进行快速部署。（推荐） +2. 按照 [这里的说明](deployment/bare_metal.md)，使用二进制包依次安装各组件。 + +### 安装 ClickHouse +```shell +docker run -d --rm --net=host --name clickhouse -e CLICKHOUSE_USER=admin -e CLICKHOUSE_PASSWORD=inlong -e CLICKHOUSE_DEFAULT_ACCESS_MANAGEMENT=1 clickhouse/clickhouse-server:22.8 +``` + +## 集群初始化 +容器启动成功后，访问 InLong Dashboard 地址 http://localhost，并使用以下默认账号登录： +``` +User: admin +Password: inlong +``` + +### 创建集群标签 +页面点击 【集群管理】->【标签管理】->【新建】，指定集群标签名称和负责人： + + +**注：default_cluster 是各个组件默认上报集群标签，请勿使用其它名称** + +### 注册 Pulsar 集群 +页面点击 [集群管理]->[集群管理]->[新建集群]，注册 Pulsar 集群： + + +:::note +集群标签选择刚创建的 `default_cluster`，docker 部署的 Pulsar 集群： Review Comment: docker 部署的 Pulsar 集群 -> 配置 Docker 部署的 Pulsar 集群： ########## i18n/zh-CN/docusaurus-plugin-content-docs/current/quick_start/file_pulsar_clickhouse_example.md: ########## @@ -0,0 +1,99 @@ +--- +title: File -> Pulsar -> ClickHouse 示例 +sidebar_position: 2 +--- + +在下面的内容中，我们将通过一个完整的示例介绍如何使用 Apache InLong 创建File -> Pulsar -> ClickHouse数据流。 + +## 环境部署 +### 安装 InLong +在开始之前，我们需要安装 InLong 的全部组件，这里提供两种方式： +1. 按照 [这里的说明](deployment/docker.md)，使用 Docker 进行快速部署。（推荐） +2. 按照 [这里的说明](deployment/bare_metal.md)，使用二进制包依次安装各组件。 + +### 安装 ClickHouse +```shell +docker run -d --rm --net=host --name clickhouse -e CLICKHOUSE_USER=admin -e CLICKHOUSE_PASSWORD=inlong -e CLICKHOUSE_DEFAULT_ACCESS_MANAGEMENT=1 clickhouse/clickhouse-server:22.8 +``` + +## 集群初始化 +容器启动成功后，访问 InLong Dashboard 地址 http://localhost，并使用以下默认账号登录： +``` +User: admin +Password: inlong +``` + +### 创建集群标签 +页面点击 【集群管理】->【标签管理】->【新建】，指定集群标签名称和负责人： + + +**注：default_cluster 是各个组件默认上报集群标签，请勿使用其它名称** + +### 注册 Pulsar 集群 +页面点击 [集群管理]->[集群管理]->[新建集群]，注册 Pulsar 集群： + + +:::note +集群标签选择刚创建的 `default_cluster`，docker 部署的 Pulsar 集群： + +Service URL 为 `pulsar://pulsar:6650`，Admin URL 为 `http://pulsar:8080`。 +::: + +### 注册 Clickhouse 数据节点 +页面点击 【数据节点】→【新建】，新增 ClickHouse 数据节点： + + +## 任务创建 +### 新建数据流组 +页面点击【数据接入】→【新建接入】，只用填写 ID 接选择 Pulsar 即可： + + +:::note +注：如果需要使用kafka，需要修改 docker-compose.yml 中的 MQ_TYPE。 Review Comment: 如果需要使用kafka -> 如果需要使用 Kafka ########## i18n/zh-CN/docusaurus-plugin-content-docs/current/quick_start/file_pulsar_clickhouse_example.md: ########## @@ -0,0 +1,99 @@ +--- +title: File -> Pulsar -> ClickHouse 示例 +sidebar_position: 2 +--- + +在下面的内容中，我们将通过一个完整的示例介绍如何使用 Apache InLong 创建File -> Pulsar -> ClickHouse数据流。 Review Comment: 创建File -> Pulsar -> ClickHouse数据流 -> 创建 File -> Pulsar -> ClickHouse 数据流 ########## i18n/zh-CN/docusaurus-plugin-content-docs/current/quick_start/file_pulsar_clickhouse_example.md: ########## @@ -0,0 +1,99 @@ +--- +title: File -> Pulsar -> ClickHouse 示例 +sidebar_position: 2 +--- + +在下面的内容中，我们将通过一个完整的示例介绍如何使用 Apache InLong 创建File -> Pulsar -> ClickHouse数据流。 + +## 环境部署 +### 安装 InLong +在开始之前，我们需要安装 InLong 的全部组件，这里提供两种方式： +1. 按照 [这里的说明](deployment/docker.md)，使用 Docker 进行快速部署。（推荐） +2. 按照 [这里的说明](deployment/bare_metal.md)，使用二进制包依次安装各组件。 + +### 安装 ClickHouse +```shell +docker run -d --rm --net=host --name clickhouse -e CLICKHOUSE_USER=admin -e CLICKHOUSE_PASSWORD=inlong -e CLICKHOUSE_DEFAULT_ACCESS_MANAGEMENT=1 clickhouse/clickhouse-server:22.8 +``` + +## 集群初始化 +容器启动成功后，访问 InLong Dashboard 地址 http://localhost，并使用以下默认账号登录： +``` +User: admin +Password: inlong +``` + +### 创建集群标签 +页面点击 【集群管理】->【标签管理】->【新建】，指定集群标签名称和负责人： + + +**注：default_cluster 是各个组件默认上报集群标签，请勿使用其它名称** + +### 注册 Pulsar 集群 +页面点击 [集群管理]->[集群管理]->[新建集群]，注册 Pulsar 集群： + + +:::note +集群标签选择刚创建的 `default_cluster`，docker 部署的 Pulsar 集群： Review Comment: docker 部署的 Pulsar 集群 -> 配置 Docker 部署的 Pulsar 集群： ########## i18n/zh-CN/docusaurus-plugin-content-docs/current/quick_start/file_pulsar_clickhouse_example.md: ########## @@ -0,0 +1,99 @@ +--- +title: File -> Pulsar -> ClickHouse 示例 +sidebar_position: 2 +--- + +在下面的内容中，我们将通过一个完整的示例介绍如何使用 Apache InLong 创建File -> Pulsar -> ClickHouse数据流。 + +## 环境部署 +### 安装 InLong +在开始之前，我们需要安装 InLong 的全部组件，这里提供两种方式： +1. 按照 [这里的说明](deployment/docker.md)，使用 Docker 进行快速部署。（推荐） +2. 按照 [这里的说明](deployment/bare_metal.md)，使用二进制包依次安装各组件。 + +### 安装 ClickHouse +```shell +docker run -d --rm --net=host --name clickhouse -e CLICKHOUSE_USER=admin -e CLICKHOUSE_PASSWORD=inlong -e CLICKHOUSE_DEFAULT_ACCESS_MANAGEMENT=1 clickhouse/clickhouse-server:22.8 +``` + +## 集群初始化 +容器启动成功后，访问 InLong Dashboard 地址 http://localhost，并使用以下默认账号登录： +``` +User: admin +Password: inlong +``` + +### 创建集群标签 +页面点击 【集群管理】->【标签管理】->【新建】，指定集群标签名称和负责人： + + +**注：default_cluster 是各个组件默认上报集群标签，请勿使用其它名称** + +### 注册 Pulsar 集群 +页面点击 [集群管理]->[集群管理]->[新建集群]，注册 Pulsar 集群： + + +:::note +集群标签选择刚创建的 `default_cluster`，docker 部署的 Pulsar 集群： + +Service URL 为 `pulsar://pulsar:6650`，Admin URL 为 `http://pulsar:8080`。 +::: + +### 注册 Clickhouse 数据节点 +页面点击 【数据节点】→【新建】，新增 ClickHouse 数据节点： + + +## 任务创建 +### 新建数据流组 +页面点击【数据接入】→【新建接入】，只用填写 ID 接选择 Pulsar 即可： + + +:::note +注：如果需要使用kafka，需要修改 docker-compose.yml 中的 MQ_TYPE。 +::: + +### 新建数据流 +点击【下一步】→【新建数据流】，配置 ID 及测试源字段信息： + + +### 为数据流添加文件数据源 +点击【新建数据源】，选择file类型，配置数据源信息，包括名称、选择采集 Agent 集群及 IP 、采集文件路径等： Review Comment: 选择file类型 -> 选择 File 类型 ########## i18n/zh-CN/docusaurus-plugin-content-docs/current/quick_start/file_pulsar_clickhouse_example.md: ########## @@ -0,0 +1,99 @@ +--- +title: File -> Pulsar -> ClickHouse 示例 +sidebar_position: 2 +--- + +在下面的内容中，我们将通过一个完整的示例介绍如何使用 Apache InLong 创建File -> Pulsar -> ClickHouse数据流。 + +## 环境部署 +### 安装 InLong +在开始之前，我们需要安装 InLong 的全部组件，这里提供两种方式： +1. 按照 [这里的说明](deployment/docker.md)，使用 Docker 进行快速部署。（推荐） +2. 按照 [这里的说明](deployment/bare_metal.md)，使用二进制包依次安装各组件。 + +### 安装 ClickHouse +```shell +docker run -d --rm --net=host --name clickhouse -e CLICKHOUSE_USER=admin -e CLICKHOUSE_PASSWORD=inlong -e CLICKHOUSE_DEFAULT_ACCESS_MANAGEMENT=1 clickhouse/clickhouse-server:22.8 +``` + +## 集群初始化 +容器启动成功后，访问 InLong Dashboard 地址 http://localhost，并使用以下默认账号登录： +``` +User: admin +Password: inlong +``` + +### 创建集群标签 +页面点击 【集群管理】->【标签管理】->【新建】，指定集群标签名称和负责人： + + +**注：default_cluster 是各个组件默认上报集群标签，请勿使用其它名称** + +### 注册 Pulsar 集群 +页面点击 [集群管理]->[集群管理]->[新建集群]，注册 Pulsar 集群： + + +:::note +集群标签选择刚创建的 `default_cluster`，docker 部署的 Pulsar 集群： + +Service URL 为 `pulsar://pulsar:6650`，Admin URL 为 `http://pulsar:8080`。 +::: + +### 注册 Clickhouse 数据节点 +页面点击 【数据节点】→【新建】，新增 ClickHouse 数据节点： + + +## 任务创建 +### 新建数据流组 +页面点击【数据接入】→【新建接入】，只用填写 ID 接选择 Pulsar 即可： + + +:::note +注：如果需要使用kafka，需要修改 docker-compose.yml 中的 MQ_TYPE。 Review Comment: 如果需要使用kafka -> 如果需要使用 Kafka -- This is an automated message from the Apache Git Service. To respond to the message, please log on to GitHub and use the URL above to go to the specific comment. To unsubscribe, e-mail: [email protected] For queries about this service, please contact Infrastructure at: [email protected]
