From ed117381d2d5255c1955a0fa53587792d13d4ef1 Mon Sep 17 00:00:00 2001 From: ZoroWu Date: Fri, 11 Nov 2022 15:01:18 +0800 Subject: [PATCH 1/3] Update postgresqlreader.md --- postgresqlreader/doc/postgresqlreader.md | 2 +- 1 file changed, 1 insertion(+), 1 deletion(-) diff --git a/postgresqlreader/doc/postgresqlreader.md b/postgresqlreader/doc/postgresqlreader.md index 02c354ab..93ad463f 100644 --- a/postgresqlreader/doc/postgresqlreader.md +++ b/postgresqlreader/doc/postgresqlreader.md @@ -177,7 +177,7 @@ PostgresqlReader插件实现了从PostgreSQL读取数据。在底层实现上, * **splitPk** - * 描述:PostgresqlReader进行数据抽取时,如果指定splitPk,表示用户希望使用splitPk代表的字段进行数据分片,DataX因此会启动并发任务进行数据同步,这样可以大大提供数据同步的效能。 + * 描述:PostgresqlReader进行数据抽取时,如果指定splitPk,表示用户希望使用splitPk代表的字段进行数据分片,DataX因此会启动并发任务进行数据同步,这样可以大大提高数据同步的效能。 推荐splitPk用户使用表主键,因为表主键通常情况下比较均匀,因此切分出来的分片也不容易出现数据热点。 From c7746ef6f18dd9407661db80d0187ca9520f466a Mon Sep 17 00:00:00 2001 From: "jiafeng.zhang" Date: Thu, 17 Nov 2022 10:49:35 +0800 Subject: [PATCH 2/3] doris writer doc fix doris writer doc fix --- doriswriter/doc/doriswriter.md | 2 +- 1 file changed, 1 insertion(+), 1 deletion(-) diff --git a/doriswriter/doc/doriswriter.md b/doriswriter/doc/doriswriter.md index cff7da1c..58a688b8 100644 --- a/doriswriter/doc/doriswriter.md +++ b/doriswriter/doc/doriswriter.md @@ -125,7 +125,7 @@ DorisWriter 通过Doris原生支持Stream load方式导入数据, DorisWriter * **maxBatchRows** - - 描述:每批次导入数据的最大行数。和 **maxBatchSize** 共同控制每批次的导入数量。每批次数据达到两个阈值之一,即开始导入这一批次的数据。 + - 描述:每批次导入数据的最大行数。和 **batchSize** 共同控制每批次的导入数量。每批次数据达到两个阈值之一,即开始导入这一批次的数据。 - 必选:否 - 默认值:500000 From 8f6084e1e733472a0af8c38ecd6de92cdd37d987 Mon Sep 17 00:00:00 2001 From: gaoy121 <867837615@qq.com> Date: Thu, 24 Nov 2022 18:08:14 +0800 Subject: [PATCH 3/3] =?UTF-8?q?=E8=AF=BB=E5=8F=96starrocks=E6=95=B0?= =?UTF-8?q?=E6=8D=AE=E6=8A=A5=E9=94=99BUG=E4=BF=AE=E5=A4=8D?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit --- .../java/com/alibaba/datax/plugin/rdbms/util/DataBaseType.java | 2 ++ 1 file changed, 2 insertions(+) diff --git a/plugin-rdbms-util/src/main/java/com/alibaba/datax/plugin/rdbms/util/DataBaseType.java b/plugin-rdbms-util/src/main/java/com/alibaba/datax/plugin/rdbms/util/DataBaseType.java index 6a35b5fd..5468ce06 100755 --- a/plugin-rdbms-util/src/main/java/com/alibaba/datax/plugin/rdbms/util/DataBaseType.java +++ b/plugin-rdbms-util/src/main/java/com/alibaba/datax/plugin/rdbms/util/DataBaseType.java @@ -68,6 +68,8 @@ public enum DataBaseType { break; case Oscar: break; + case StarRocks: + break; default: throw DataXException.asDataXException(DBUtilErrorCode.UNSUPPORTED_TYPE, "unsupported database type."); }