yiguolei commented on code in PR #8808:
URL: https://github.com/apache/incubator-doris/pull/8808#discussion_r846907689
##########
docs/zh-CN/sql-reference/sql-statements/Data Definition/CREATE RESOURCE.md:
##########
@@ -53,21 +59,72 @@ under the License.
"broker" = "broker0",
"broker.username" = "user0",
"broker.password" = "password0"
- );
-
+ );
+ ```
- Spark 相关参数如下:
- 1. spark.master: 必填,目前支持yarn,spark://host:port。
- 2. spark.submit.deployMode: Spark 程序的部署模式,必填,支持 cluster,client 两种。
- 3. spark.hadoop.yarn.resourcemanager.address: master为yarn时必填。
- 4. spark.hadoop.fs.defaultFS: master为yarn时必填。
- 5. 其他参数为可选,参考http://spark.apache.org/docs/latest/configuration.html
-
- Spark 用于 ETL 时需要指定 working_dir 和 broker。说明如下:
- working_dir: ETL 使用的目录。spark作为ETL资源使用时必填。例如:hdfs://host:port/tmp/doris。
- broker: broker 名字。spark作为ETL资源使用时必填。需要使用`ALTER SYSTEM ADD BROKER`
命令提前完成配置。
- broker.property_key: broker读取ETL生成的中间文件时需要指定的认证信息等。
+ Spark 相关参数如下:
+ - spark.master: 必填,目前支持yarn,spark://host:port。
+ - spark.submit.deployMode: Spark 程序的部署模式,必填,支持 cluster,client 两种。
+ - spark.hadoop.yarn.resourcemanager.address: master为yarn时必填。
+ - spark.hadoop.fs.defaultFS: master为yarn时必填。
+ - 其他参数为可选,参考http://spark.apache.org/docs/latest/configuration.html
+
+ Spark 用于 ETL 时需要指定 working_dir 和 broker。说明如下:
+ working_dir: ETL 使用的目录。spark作为ETL资源使用时必填。例如:hdfs://host:port/tmp/doris。
+ broker: broker 名字。spark作为ETL资源使用时必填。需要使用`ALTER SYSTEM ADD BROKER`
命令提前完成配置。
+ broker.property_key: broker读取ETL生成的中间文件时需要指定的认证信息等。
+
+ 2. 创建 ODBC resource
+
+ ```
+ CREATE EXTERNAL RESOURCE `oracle_odbc`
+ PROPERTIES (
+ "type" = "odbc_catalog",
+ "host" = "192.168.0.1",
+ "port" = "8086",
+ "user" = "test",
+ "password" = "test",
+ "database" = "test",
+ "odbc_type" = "oracle",
+ "driver" = "Oracle 19 ODBC driver"
+ );
+ ```
+
+ ODBC 的相关参数如下:
+ - hosts:外表数据库的IP地址
+ - driver:ODBC外表的Driver名,该名字需要和be/conf/odbcinst.ini中的Driver名一致。
+ - odbc_type:外表数据库的类型,当前支持oracle, mysql, postgresql
+ - user:外表数据库的用户名
+ - password:对应用户的密码信息
+
+ 3. 创建 S3 resource
+
+ ```
+ CREATE RESOURCE "remote_s3"
+ PROPERTIES
+ (
+ "type" = "s3",
+ "s3_endpoint" = "http://bj.s3.com",
+ "s3_region" = "bj",
+ "s3_root_path" = "/path/to/root",
+ "s3_access_key" = "bbb",
+ "s3_secret_key" = "aaaa",
+ "s3_max_connections" = "50",
+ "s3_request_timeout_ms" = "3000",
+ "s3_connection_timeout_ms" = "1000"
Review Comment:
用户需要创建resource的时候,把这里列举的所有字段都填写吗? 如果不需要的话,有默认值填充吗? 默认值是多少呢?
--
This is an automated message from the Apache Git Service.
To respond to the message, please log on to GitHub and use the
URL above to go to the specific comment.
To unsubscribe, e-mail: [email protected]
For queries about this service, please contact Infrastructure at:
[email protected]
---------------------------------------------------------------------
To unsubscribe, e-mail: [email protected]
For additional commands, e-mail: [email protected]