- 动态与公告
- 产品简介
- 购买指南
- 快速入门
- 操作指南
- SQL 开发指南
- 开发指南概述
- 术语和数据类型
- DDL 数据定义语句
- DML 数据操作语句
- MySQL CDC 多 Source 复用
- 上下游开发指南
- 消息队列 Kafka
- 消息队列 Upsert Kafka
- 消息队列 CMQ
- 消息队列 TDMQ RabbitMQ
- 数据库 MySQL CDC
- 消息队列 Pulsar
- 数据库 TDSQL-MySQL
- 数据库 Redis
- 数据库 MongoDB CDC
- 数据库 MongoDB
- 数据库 PostgreSQL CDC
- 数据库 HBase
- 数据仓库 Hive
- 数据仓库 ClickHouse
- 数据湖计算 DLC
- 数据仓库 Kudu
- 云数据仓库 PostgreSQL
- 数据库连接 JDBC
- 文件系统 FileSystem
- 模拟上下游 Datagen Logger Blackhole
- 自定义 Connector
- 数据湖 Hudi
- 数据湖 Iceberg
- 数据库 SQLServer CDC
- 数据库 StarRocks
- SET 控制语句
- 运算符和内置函数
- 标识符与保留字
- Python 开发指南
- ETL 开发指南
- 常见问题
- 联系我们
- 动态与公告
- 产品简介
- 购买指南
- 快速入门
- 操作指南
- SQL 开发指南
- 开发指南概述
- 术语和数据类型
- DDL 数据定义语句
- DML 数据操作语句
- MySQL CDC 多 Source 复用
- 上下游开发指南
- 消息队列 Kafka
- 消息队列 Upsert Kafka
- 消息队列 CMQ
- 消息队列 TDMQ RabbitMQ
- 数据库 MySQL CDC
- 消息队列 Pulsar
- 数据库 TDSQL-MySQL
- 数据库 Redis
- 数据库 MongoDB CDC
- 数据库 MongoDB
- 数据库 PostgreSQL CDC
- 数据库 HBase
- 数据仓库 Hive
- 数据仓库 ClickHouse
- 数据湖计算 DLC
- 数据仓库 Kudu
- 云数据仓库 PostgreSQL
- 数据库连接 JDBC
- 文件系统 FileSystem
- 模拟上下游 Datagen Logger Blackhole
- 自定义 Connector
- 数据湖 Hudi
- 数据湖 Iceberg
- 数据库 SQLServer CDC
- 数据库 StarRocks
- SET 控制语句
- 运算符和内置函数
- 标识符与保留字
- Python 开发指南
- ETL 开发指南
- 常见问题
- 联系我们
创建 ETL 作业
最后更新时间：2023-11-08 10:51:26
前提条件
步骤1：创建 ETL 作业
登录 流计算 Oceanus 控制台，进入某一工作空间后，单击左侧导航作业管理，进入作业管理页面，单击新建作业，作业类型选中 ETL 作业，输入作业名称，并选择一个运行中的集群，新建的 ETL 作业将运行于此集群，单击确定后即成功创建作业。
注意
步骤2：流计算服务委托授权
选择作业管理中刚新建的作业，单击开发调试。在未授权时，弹出访问授权对话框如下，单击前往授权，授权流计算作业访问您的消息队列或云数据库等资源。此授权的详细说明参见 流计算服务委托授权。
步骤3：配置数据源表
授权完成后，单击作业进入作业开发 > 草稿，从左侧列表拖入 MySQL 数据源。
单击 MySQL 数据源可以进行数据源的配置。
如果当前没有可用的数据库实例，可以单击管理连接信息，并单击新建连接信息增加新的数据源。
腾讯云实例可以使用当前账号下的腾讯云产品实例，但注意账号需要拥有对应产品的查询列表权限。
IP连接则直接用填入的 IP 进行连接，需要确保 IP 与 Oceanus 集群处于同一个 VPC 或是有进行过相关的网络打通操作。
选择好数据源之后，可以通过下拉框选择需要进行同步的数据库与表。
单击下一步，配置需要进行同步的字段，并单击确认完成配置。
再次返回画布，可以看到数据源已经配置完成。
步骤4：配置数据目的
从左侧拖入数据目的，并与数据源相连。
单击数据目的对象，配置好数据库实例与库表选择：
单击下一步进行字段映射配置：
完成后，单击确认完成数据目的的配置：
步骤5：设置作业参数
步骤6：发布运行 ETL 作业
单击运行，会进行作业预检查，并启动作业。
步骤7：查看作业日志
单击日志按钮可以查看作业日志。
是
否
本页内容是否解决了您的问题？