tencent cloud

PrevNext

文档反馈

请输入关键字

Recent Pages

文档
数据开发治理平台 WeData
    文档
    Download PDF

    调度资源组配置

    最后更新时间：2024-11-01 15:37:32
    下载PDF

      调度资源组列表

      执行资源组-调度资源组，支持创建、编辑、运维调度资源组。调度资源组分为标准调度资源组和自定义调度资源组。
      
      
      

      创建标准调度资源组

      在资源组购买页面进行资源组配置、计费配置以及项目关联后，即可完成资源组创建。
      
      
      参数
      说明
      地域
      资源组的所属物理地域。调度资源组所在地域，处于不同地域的云产品间网络不互通，创建成功后不可切换地域，请您谨慎选择；建议与产品版本选择同一地域，可降低服务访问时延
      网络
      指定当前资源组需配置的 VPC 和子网信息。调度资源所选 VPC 需具备访问公网能力。如现有的网络不合适，您可以前往控制台新建私有网络或新建子网
      规格
      单个资源包的规格核数及内存
      数量
      资源组内包含的总的资源包数量
      资源组名称
      设置资源组显示名称，命名不可为空支持中文、英文、数字、-、_
      描述
      设置当前资源组备注信息
      计费模式
      包年包月
      购买时长
      支持1个月、2个月、3个月、4个月、5个月、6个月、7个月、8个月、9个月、1年、2年、3年、4年的购买时长
      续订
      勾选自动续订后，账户余额充足时，设备到期后按月自动续费
      关联项目
      关联项目空间后，仅此项目内任务可使用本资源组运行。后续可在产品控制台中修改。
      配置完成后，单击立即购买并完成支付后，即可前往控制台页面查看调度资源组信息。
      

      创建自定义调度资源组

      创建自定义调度资源组

      1. 单击创建调度资源组，第一步：绑定VPC
      
      
      
      注意：
      资源组与本空间下已配置计算引擎需位于同一地域。
      2. 第二步：安装Agent
      
      
      

      调度资源组详情

      单击资源组名称，即可进入资源组信息页面，查看资源信息、资源监控以及进行资源组运维。
      
      
      

      资源组信息

      资源信息页签中可以查看资源基本信息与资源详细信息。
      基本信息：资源组名称、资源组类型、关联项目、运行状态、所属地域、描述信息。
      资源信息：资源规格、并发数、硬盘、VPC、子网、创建时间、到期时间。
      
      
      
      参数说明：
      参数
      说明
      基本信息
      资源组名称
      用户自定义的调度资源组名称。
      资源组类型
      调度资源组的类型。
      关联项目
      当前调度资源组已关联的项目。
      运行状态
      当前调度资源组的运行状态，包括运行中、创建中、创建失败、初始化中、运行异常、更新中、更新失败、已到期、释放中、已释放的状态类型。
      地域
      当前调度资源组的归属地域。
      描述
      用户自定义的调度资源组描述信息。
      资源信息
      资源规格
      调度资源组的规格类型。
      并发数
      当前调度资源组支持的最高并发数量。
      硬盘
      当前资源组的硬盘空间大小。
      VPC
      当前调度资源组的 VPC 网络信息。
      子网
      当前调度资源组的子网信息。
      创建时间
      当前调度资源组的创建时间。
      到期时间
      当前调度资源组的到期时间。

      资源组监控

      资源监控页签可以监控该调度资源的使用情况，针对关键指标进行实时监控，包含并发使用率、实例运行数量、磁盘使用率等。通过图表展示自定义时间区间内的资源使用趋势。
      
      
      
      参数说明：
      参数
      说明
      资源实时使用详情
      并发使用率
      显示调度资源组并发占用率百分比，运行中的实例个数/并发个数。（此为预估使用率，受任务占用资源大小影响，仅供参考）
      运行中实例数
      显示调度资源运行中的实例数。
      等待中实例数
      显示调度资源等待中的实例数。
      磁盘使用率
      显示当前磁盘的使用率百分比，以及使用量与总量。
      资源使用详情
      并发使用率（%）
      显示最近一段1小时统计区间内，并发使用率的波动情况。
      磁盘使用率（%）
      显示最近一段1小时统计区间内，磁盘使用率的波动情况。
      CPU 使用率（%）
      显示最近一段1小时统计区间内，CPU 使用率的波动情况。
      CPU 系统平均负载
      显示最近一段1小时统计区间内，CPU 系统平均负载的波动情况。
      内存使用率（%）
      显示最近一段1小时统计区间内，内存使用率的波动情况。
      内存使用量（MB）
      显示最近一段1小时统计区间内，内存使用量的波动情况。
      运行中实例数（个）
      显示最近一段1小时统计区间内，运行中实例数量的波动情况。
      调度中任务数（个）
      显示最近一段1小时统计区间内，调度中任务数量的波动情况。

      资源组运维

      资源组运维目前提供 Python 包的安装运维管理功能，为数据开发中的 Python 任务提供 Python 包支持。
      
      
      
      资源组运维界面提供了 Python 包安装、卸载、查看的入口以及命令执行记录列表，用户可以在此处查看 Python 安装和卸载的相关信息，包括名称、安装类型、创建人、状态、描述和时间等。
      
      
      

      Python 包安装

      1. 单击 Python 包安装后，在弹框中配置 Python 包信息。
      注意：
      该功能只在新版规格的调度资源中生效。 老的规格不支持安装。
      
      信息
      描述
      命令名称
      自动生成，默认为“ Python 安装包_当前时间 ”，用户可以修改。
      包类型
      Python 版本，包括 Python2、Python3。
      选择安装包
      支持关键词搜索，目前支持的安装包如下：
      Python2：jieba、numpy、openpyxl、pandas、pyhive、requests、scikit-learn、thrift、thrift_sasl、tencentcloud-sdk-python。
      Python3：jieba、numpy、openpyxl、pandas、pyhive、requests、scikit-learn、thrift、thrift_sasl、tencentcloud-sdk-python、pymysql、cos-python-sdk-v5、threadpool、tencentcloud-dlc-connector、matplotlib。
      版本
      可选择对应 Python 包不同的版本。
      命令执行路径
      WeData 提供的默认路径，Python 包的安装路径。
      安装命令
      自动生成。
      超时时间
      安装命令执行的最长时间，超过时间则终止执行。
      描述
      自定义描述信息。
      2. Python 包安装步骤配置完成后即可生成安装命令，在资源组运维页面单击对应安装命令操作列下的运行，即可执行 Python 包安装命令，安装成功后，会在状态列提示命令运行成功信息。
      
      3. 单击操作列下的查看结果，可以查看安装命令的执行的详细情况。
      
      4. 单击列表中的命令名称，可以查看命令详情。
      

      Python 包查看

      单击 Python 包查看后，在弹框中可以分别看到 Python2、Python3 已安装的 Python 包信息。
      
      
      

      Python 包卸载

      单击 Python 包卸载后，在弹框中可以选择已安装的 Python 包进行卸载。
      
      信息
      描述
      命令名称
      自动生成，默认为“ Python 卸载包_当前时间 ”，用户可以修改。
      包类型
      Python 版本，包括 Python2、Python3。
      选择卸载包
      可选择已安装的 Python 包。
      命令执行路径
      WeData 提供的默认路径，Python 包的卸载路径。
      卸载命令
      自动生成。
      超时时间
      安装命令执行的最长时间，超过时间则终止执行。

      调度资源组操作

      关联项目/解除关联

      关联项目指定当前调度资源组关联的项目空间信息，指定后该项目空间下的任务可使用本资源组。
      注意：
      旧版本资源组仅可关联一个项目空间，新版资源组 可关联多个项目空间。
      
      
      解除关联是将调度资源组从当前空间可使用的资源中移除。解除关联需保证当前项目空间下不存在正在运行的任务，否则将解除失败。
      
      
      

      调整配置

      
      
      

      变更当前资源组内所包含资源包的基础规格或者资源包的数量等操作，包括变更资源规格、增加资源包数量、以及减少资源包数量三种。
      变更资源规格：扩大或者缩小资源组内基础资源包的规格，资源包数量不变。
      增加资源包数量：选择后，仅可增加当前资源组下所包含的资源包总数。
      减少资源包数量：选择后，仅可调整当前资源组下所包含的资源包总数。
      注意
      减少资源包数量可能会影响资源组关联的任务运行，请谨慎操作。

      续费

      对当前资源进行续期操作，当资源组内包含多个资源包续费操作将对所有资源包生效。

      销毁

      销毁是指强制销毁当前资源组，销毁后资源组将无法恢复。
      注意
      若当前资源组有关联的正在运行的任务，此操作会直接影响任务运行与数据产出，请谨慎操作。

      配置告警

      对资源组的并发使用率和磁盘使用率进行告警监控。当使用率高于一定比值时发送告警信息，方便及时发现资源存量不足的情况。
      
      
      参数
      说明
      告警条件
      并发使用率
      执行资源中任务并发执行时的资源占用率，高并发状态下任务需要排队执行。
      磁盘使用率
      执行资源的磁盘使用率。
      告警通知
      接收人
      可以指定账号用户或按值班表排班用户作为告警信息触发时的信息接收人。
      告警方式
      目前支持邮件、短信、微信、电话、企业微信、HTTP、企业微信群、飞书群的告警信息发送方式。
      注意：
      手机、微信、邮件等账号可以在腾讯云用户管理中配置。
      企业微信账号可以在腾讯云联合账号中配置。
      告警状态
      告警触发开关，当开关开启时，告警条件即可生效。
      
      联系我们

      联系我们，为您的业务提供专属服务。

      联系我们
      技术支持

      如果你想寻求进一步的帮助，通过工单与我们进行联络。我们提供7x24的工单服务。

      提交工单
      7x24 电话支持
      Copyright © 2013-2025 Tencent Cloud. All Rights Reserved.
      隐私条款服务条款缓存条款