tencent cloud

文档反馈

数据开发概述

最后更新时间:2024-11-01 16:21:57
    WeData 数据开发为数据工程师以及数据开发相关人员提供了高效、协作、智能的数据开发平台。WeData 数据开发模块面向各类引擎(EMR、DLC等),通过提供脚本开发、可视化开发、任务编排、任务发布以及任务运维等能力,帮助组织和企业高效构建数据仓库。

    使用限制

    1. WeData 数据开发中可使用的计算任务取决于项目下绑定的计算引擎类型。绑定 EMR 引擎,需要启动 Hive 和 Spark 服务,可以使用 HiveSQL、SparkSQL和 Spark 任务类型的开发。其他 WeData 中基于 EMR 引擎的任务,例如Trino 等也需要开启对应的 EMR 服务。绑定 DLC 引擎,可以使用 DLC SQL、DLC Spark 类型的任务。其他类型的关系型数据库,如果需要在 WeData 中做数据开发,需要在WeData 中创建数据源,使用 JDBC 的任务来创建 SQL 脚本,WeData 数据开发负责脚本的下发执行。
    2. 每种计算引擎都有各自的数据权限管控体系,WeData 不做具体的数据权限控制,而是通过账号互通的方式来对接各个引擎的权限。例如 WeData 中关于 EMR 数据的权限是通过账号映射的方式来实现的。
    
    联系我们

    联系我们,为您的业务提供专属服务。

    技术支持

    如果你想寻求进一步的帮助,通过工单与我们进行联络。我们提供7x24的工单服务。

    7x24 电话支持