Skip to content

Commit 6cf665f

Browse files
authored
[Doc][Improve] support chinese [docs/zh/connector-v2/sink/Oracle.md] (#8831)
1 parent 4897ddc commit 6cf665f

File tree

1 file changed

+207
-0
lines changed

1 file changed

+207
-0
lines changed

Diff for: docs/zh/connector-v2/sink/Oracle.md

+207
Original file line numberDiff line numberDiff line change
@@ -0,0 +1,207 @@
1+
# Oracle
2+
3+
> JDBC Oracle Sink 连接器
4+
5+
## 支持这些引擎
6+
7+
> Spark<br/>
8+
> Flink<br/>
9+
> SeaTunnel Zeta<br/>
10+
11+
## 描述
12+
13+
通过jdbc写入数据。支持批处理模式和流模式,支持并发写入,支持“精确一次”
14+
语义(使用XA事务保证)。
15+
16+
## 依赖
17+
18+
### 对于 Spark/Flink 引擎
19+
20+
> 1. 您需要确保 [jdbc driver jar package](https://mvnrepository.com/artifact/com.oracle.database.jdbc/ojdbc8)已经添加到目录 `${SEATUNNEL_HOME}/plugins/`.
21+
22+
### 对于 SeaTunnel Zeta 引擎
23+
24+
> 1. 您需要确保 [jdbc driver jar package](https://mvnrepository.com/artifact/com.oracle.database.jdbc/ojdbc8) 已经添加到目录 `${SEATUNNEL_HOME}/lib/`.
25+
26+
## 主要特性
27+
28+
- [x] [精确一次](../../concept/connector-v2-features.md)
29+
- [x] [cdc](../../concept/connector-v2-features.md)
30+
31+
>使用“Xa事务”来确保“精确一次”。因此,数据库只支持“精确一次”,即
32+
>支持“Xa事务”。您可以设置`is_exactly_once=true `来启用它。
33+
34+
## 支持的数据源信息
35+
36+
| 数据源 | 支持的版本 | 驱动器 | 网址 | Maven下载链接 |
37+
|------------|----------------------------------------------------------|--------------------------|----------------------------------------|--------------------------------------------------------------------|
38+
| Oracle | 不同的依赖版本具有不同的驱动程序类。 | oracle.jdbc.OracleDriver | jdbc:oracle:thin:@datasource01:1523:xe | https://mvnrepository.com/artifact/com.oracle.database.jdbc/ojdbc8 |
39+
40+
## 数据库依赖关系
41+
42+
>请下载“Maven”对应的支持列表,并将其复制到“$SEATUNNEL_HOME/plugins/jdbc/lib/”工作目录<br/>
43+
>例如,Oracle数据源:cp ojdbc8-xxxx.jar$SEATUNNEL_HOME/lib/<br/>
44+
>要支持i18n字符集,请将orai18n.jar复制到$SEATUNNEL_HOME/lib/目录。
45+
46+
## 数据类型映射
47+
48+
| Oracle 数据类型 | SeaTunnel 数据类型 |
49+
|--------------------------------------------------------------------------------------|---------------------|
50+
| INTEGER | INT |
51+
| FLOAT | DECIMAL(38, 18) |
52+
| NUMBER(precision <= 9, scale == 0) | INT |
53+
| NUMBER(9 < precision <= 18, scale == 0) | BIGINT |
54+
| NUMBER(18 < precision, scale == 0) | DECIMAL(38, 0) |
55+
| NUMBER(scale != 0) | DECIMAL(38, 18) |
56+
| BINARY_DOUBLE | DOUBLE |
57+
| BINARY_FLOAT<br/>REAL | FLOAT |
58+
| CHAR<br/>NCHAR<br/>NVARCHAR2<br/>VARCHAR2<br/>LONG<br/>ROWID<br/>NCLOB<br/>CLOB<br/> | STRING |
59+
| DATE | DATE |
60+
| TIMESTAMP<br/>TIMESTAMP WITH LOCAL TIME ZONE | TIMESTAMP |
61+
| BLOB<br/>RAW<br/>LONG RAW<br/>BFILE | BYTES |
62+
63+
## 参数
64+
65+
| 名称 | 类型 | 是否必填 | 默认值 | 描述 |
66+
|-------------------------------------------|---------|----------|------------------------------|------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|
67+
| url | String || - | JDBC 连接的 URL。参见示例: jdbc:oracle:thin:@datasource01:1523:xe |
68+
| driver | String || - | 用于连接远程数据源的 JDBC 类名,<br/> 如果使用 Oracle,值为 `oracle.jdbc.OracleDriver`|
69+
| user | String || - | 连接实例用户名。 |
70+
| password | String || - | 连接实例密码。 |
71+
| query | String || - | 使用此sql将上游输入数据写入数据库。例如: `INSERT ...`,`query` 具有更高的优先级 |
72+
| database | String || - | 使用此 `database``table-name` 自动生成sql并接收上游输入数据写入数据库。<br/>此选项与`query` 互斥,具有更高的优先级 |
73+
| table | String || - | 使用数据库和此表名自动生成sql并接收上游输入数据写入数据库。<br/>此选项与`query` 互斥,具有更高的优先级 |
74+
| primary_keys | Array || - | 此选项用于支持以下操作,例如 `insert`, `delete`, 和 `update` 当自动生成sql. |
75+
| support_upsert_by_query_primary_key_exist | Boolean || false | 选择使用INSERT sql、UPDATE sql根据查询主键是否存在来处理更新事件(INSERT、UPDATE_AFTER)。此配置仅在数据库不支持升级语法时使用****:此方法性能低 |
76+
| connection_check_timeout_sec | Int || 30 | 等待用于验证连接的数据库操作完成的时间(秒)。 |
77+
| max_retries | Int || 0 | 提交失败的重试次数(executeBatch) |
78+
| batch_size | Int || 1000 | 对于批量写入,当缓冲记录的数量达到“batch_size”的数量或时间达到“checkpoint.interval”<br/>时,数据将被刷新到数据库中。 |
79+
| batch_interval_ms | Int || 1000 | 对于批写入,当缓冲区的数量达到“batch_size”的数量或时间达到“batch-interval_ms”时,数据将被刷新到数据库中。 |
80+
| is_exactly_once | Boolean || false | 是否启用精确一次语义,这将使用Xa事务。如果启用,则需要<br/>设置`xa_data_source_class_name`|
81+
| generate_sink_sql | Boolean || false | 根据要写入的数据库表生成sql语句 |
82+
| xa_data_source_class_name | String || - | 数据库Driver的xa数据源类名,例如Oracle,是`Oracle.jdbc.xa.client。OracleXADataSource和<br/>请参阅附录了解其他数据源 |
83+
| max_commit_attempts | Int || 3 | 事务提交失败的重试次数 |
84+
| transaction_timeout_sec | Int || -1 | 事务打开后的超时,默认值为-1(永不超时)。请注意,设置超时可能会影响<br/>精确一次语义 |
85+
| auto_commit | Boolean || true | 默认情况下启用自动事务提交 |
86+
| properties | Map || - | 其他连接配置参数,当属性和URL具有相同的参数时,优先级由驱动程序的特定实现决定。例如,在MySQL中,属性优先于URL。 |
87+
| common-options | || - | Sink插件常用参数,请参考 [Sink Common Options](../sink-common-options.md) |
88+
| schema_save_mode | Enum || CREATE_SCHEMA_WHEN_NOT_EXIST | 在启动同步任务之前,对目标侧的现有表面结构选择不同的处理方案。 |
89+
| data_save_mode | Enum || APPEND_DATA | 在启动同步任务之前,对目标端的现有数据选择不同的处理方案。 |
90+
| custom_sql | String || - | 当data_save_mode选择CUSTOM_PROCESSING时,您应该填写CUSTOM_SQL参数。此参数通常填充可以执行的SQL。SQL将在同步任务之前执行。 |
91+
| enable_upsert | Boolean || true | 通过primary_keys存在启用upstart,如果任务只有“插入”,将此参数设置为“false”可以加快数据导入 |
92+
93+
### 提示
94+
95+
>如果未设置partition_column,它将以单并发运行,如果设置了partition_column,它将根据任务的并发数并行执行。
96+
97+
## 任务示例
98+
99+
### 简单的例子:
100+
101+
>此示例定义了一个SeaTunnel同步任务,该任务通过FakeSource自动生成数据并将其发送到JDBC Sink。FakeSource总共生成16行数据(row.num=16),每行有两个字段,name(字符串类型)和age(int类型)。最终的目标表是test_table,表中也将有16行数据。在运行此作业之前,您需要在Oracle中创建测试数据库和表test_table。如果您尚未安装和部署SeaTunnel,则需要按照[安装SeaTunnel](../../start-v2/local/deployment.md)中的说明安装和部署SeaTunnel。然后按照[快速启动SeaTunnel引擎](../../Start-v2/locale/Quick-Start-SeaTunnel-Engine.md)中的说明运行此作业。
102+
103+
```
104+
# 定义运行环境
105+
env {
106+
parallelism = 1
107+
job.mode = "BATCH"
108+
}
109+
110+
source {
111+
FakeSource {
112+
parallelism = 1
113+
plugin_output = "fake"
114+
row.num = 16
115+
schema = {
116+
fields {
117+
name = "string"
118+
age = "int"
119+
}
120+
}
121+
}
122+
#如果你想了解更多关于如何配置seatunnel的信息,并查看完整的源插件列表,
123+
#请前往https://seatunnel.apache.org/docs/connector-v2/source
124+
}
125+
126+
transform {
127+
#如果你想了解更多关于如何配置seatunnel的信息,并查看转换插件的完整列表,
128+
#请前往https://seatunnel.apache.org/docs/transform-v2
129+
}
130+
131+
sink {
132+
jdbc {
133+
url = "jdbc:oracle:thin:@datasource01:1523:xe"
134+
driver = "oracle.jdbc.OracleDriver"
135+
user = root
136+
password = 123456
137+
query = "INSERT INTO TEST.TEST_TABLE(NAME,AGE) VALUES(?,?)"
138+
}
139+
#如果你想了解更多关于如何配置seatunnel的信息,并查看完整的sink插件列表,
140+
#请前往https://seatunnel.apache.org/docs/connector-v2/sink
141+
}
142+
```
143+
144+
### 生成Sink SQL
145+
146+
>此示例不需要编写复杂的sql语句,您可以配置数据库名称表名以自动为您生成add语句
147+
148+
```
149+
sink {
150+
Jdbc {
151+
url = "jdbc:oracle:thin:@datasource01:1523:xe"
152+
driver = "oracle.jdbc.OracleDriver"
153+
user = root
154+
password = 123456
155+
156+
generate_sink_sql = true
157+
database = XE
158+
table = "TEST.TEST_TABLE"
159+
}
160+
}
161+
```
162+
163+
### 精确一次:
164+
165+
为了准确的写入场景,我们保证一次准确
166+
167+
```
168+
sink {
169+
jdbc {
170+
url = "jdbc:oracle:thin:@datasource01:1523:xe"
171+
driver = "oracle.jdbc.OracleDriver"
172+
173+
max_retries = 0
174+
user = root
175+
password = 123456
176+
query = "INSERT INTO TEST.TEST_TABLE(NAME,AGE) VALUES(?,?)"
177+
178+
is_exactly_once = "true"
179+
180+
xa_data_source_class_name = "oracle.jdbc.xa.client.OracleXADataSource"
181+
}
182+
}
183+
```
184+
185+
### CDC(变更数据捕获)事件
186+
187+
>我们也支持CDC更改数据。在这种情况下,您需要配置数据库、表和主键。
188+
189+
```
190+
sink {
191+
jdbc {
192+
url = "jdbc:oracle:thin:@datasource01:1523:xe"
193+
driver = "oracle.jdbc.OracleDriver"
194+
user = root
195+
password = 123456
196+
197+
generate_sink_sql = true
198+
# You need to configure both database and table
199+
database = XE
200+
table = "TEST.TEST_TABLE"
201+
primary_keys = ["ID"]
202+
schema_save_mode = "CREATE_SCHEMA_WHEN_NOT_EXIST"
203+
data_save_mode="APPEND_DATA"
204+
}
205+
}
206+
```
207+

0 commit comments

Comments
 (0)