什么是物联网络管理平台
物联网络管理平台（Alibaba Cloud Link WAN，简称Link WAN），是阿里云面向物联网企业推出的网管平台，旨在帮助开发者搭建企业物联网络，实现企业级、大容量、高并发的网络专网服务。Link WAN可与阿里云物联网平台搭配使用，确保物联网平台...
管理集群
网络管理 Service管理 Ingress管理 服务发现DNS 组件管理 管理组件 应用管理 工作负载 应用调度 配置管理 安全管理 安全 可观测性 日志管理 监控管理 调度 任务调度：任务调度概述 使用Gang scheduling 使用Capacity Scheduling 共享GPU...
产品功能
通过SchedulerX可以管理定时调度任务、查询任务执行记录和运行日志。本文介绍SchedulerX调度、执行和运维三个方面的功能。定时调度 Crontab 支持Unix Crontab表达式，不支持秒级别调度。更多信息，请参见 Cron。Fixed rate Crontab必须被60...
实现任务调度
在EDAS控制台中，已经无缝集成了阿里巴巴的分布式任务调度系统SchedulerX作为核心组件，以实现高效的任务调度管理功能。本文将介绍如何在您的Spring Cloud应用中使用SchedulerX实现任务调度，并部署到EDAS中，实现一个 简单Job单机版 的...
YARN调度器
基础架构&核心流程 CapacityScheduler的主调度流程有三种触发方式：节点心跳驱动（Node-Heartbeat Driven）：是面向节点的局部调度（当调度器收到每个节点心跳时触发，为当前节点选择可调度的应用），受限于心跳间隔时间与接近随机调度，...
任务管理
本文介绍如何在任务管理页面对调度任务进行一系列操作。创建调度任务 重要 创建任务前，请确保您已经创建了任务分组。更多信息，请参见 应用管理。登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏，选择 任务管理。在 任务...
数据详情
状态以及操作 右上角展示了数据的状态以及对应的可执行操作，若数据处于运行中状态且被服务引用，则会展示最新索引详情 未上线数据 运行中表的表 已下线的表 配置管理 调度配置 目前仅支持依赖数据源产出新分区的调度策略 全量更新阈值 ...
创建全域数据表质量规则
权限说明 超级管理员、质量管理员支持为质量规则配置调度、告警、异常归档表、打分权重等。质量负责人支持在自己所负责的监控对象下为质量规则配置调度、告警、异常归档表、打分权重等。质量负责人、普通用户需要额外具备全域数据表所在...
创建全域数据表质量规则
权限说明 超级管理员、质量管理员支持为质量规则配置调度、告警、异常归档表、打分权重等。质量负责人支持在自己所负责的监控对象下为质量规则配置调度、告警、异常归档表、打分权重等。质量负责人、普通用户需要额外具备全域数据表所在...
创建数据表质量规则
权限说明 超级管理员、质量管理员支持为质量规则配置调度、告警、异常归档表、打分权重等。质量负责人支持在自己所负责的监控对象下为质量规则配置调度、告警、异常归档表、打分权重等。质量负责人、普通用户需要额外具备有Dataphin数据表...
创建数据表质量规则
权限说明 超级管理员、质量管理员支持为质量规则配置调度、告警、异常归档表、打分权重等。质量负责人支持在自己所负责的监控对象下为质量规则配置调度、告警、异常归档表、打分权重等。质量负责人、普通用户需要额外具备有Dataphin数据表...
默认工作空间内置逻辑说明
默认工作空间，所有租户成员均可查看并访问该默认工作空间，并且当租户成员单击进入默认工作空间时，将自动授予该成员 访客角色 权限，空间管理员可前往 工作空间成员管理 页面重新为空间成员分配成员角色。默认工作空间数据源/集群绑定 ...
配置调度日历
DataWorks在原有调度配置基础上，新增自定义调度日历功能，您可通过该功能实现更灵活的任务调度日期与调度方式定义。本文为您介绍自定义调度日历的典型应用场景及如何在DataWorks上新增并使用自定义调度日历。背景信息 自定义调度日历适用...
任务管理
本文介绍如何在任务管理页面对调度任务进行一系列操作。创建调度任务 重要 创建任务前，请确保您已经创建了任务分组。更多信息，请参见 应用管理。登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏，选择 任务管理。在 任务...
任务管理
本文介绍如何在任务管理页面对调度任务进行一系列操作。创建调度任务 重要 创建任务前，请确保您已经创建了任务分组。更多信息，请参见 应用管理。登录 EDAS控制台。在左侧导航栏，单击 任务调度。在顶部菜单栏选择地域。在左侧导航栏，...
使用场景
业务流程自动化 结合DMS任务编排的调度和依赖管理功能，可以实现业务流程的自动化处理，提高工作效率和数据处理的准确性。数据治理与数据管控 DMS任务编排提供了数据源的配置和管理功能，支持对数据源进行统一管理和控制，保证数据的安全性...
规划工作空间
不同的工作空间可以有不同的管理员、不同的内部成员，各工作空间拥有完全独立的成员角色设定以及引擎实例的各项参数开关。说明 所有工作空间的所有者账号均为阿里云主账号。数据开发（DataStudio）各工作空间之间的数据开发工作是 完全隔离...
RAM权限配置
您可以给运维人员创建一个管理员角色，使其拥有分布式任务调度平台上所有资源的操作权限。后续再由该管理员来创建相应空间和应用分组资源，并创建操作对应空间或应用分组的权限策略分配给其他需要的RAM用户。操作步骤：登录 RAM控制台。...
机器人监控
“机器人监控”主要功能为查看当前系统中所有机器人的连接状态、认证状态、调度...【认证状态】：已认证、未认证、管理员拒绝，共三种状态。【调度模式】：可调度、不可调度两种状态。监控设置 更改机器人默认的认证状态，和默认的调度状态。
2022年
工作流管理：工作流实例支持批量标记成功。命名空间管理：命名空间支持根据名称、ID进行搜索。任务管理：秒级别任务支持手动运行一次调试。无 用户 任务管理：修复K8s类型任务导入后查询报错的问题。无 2022-10-20 变更类型 功能描述 相关...
基本概念
工作空间管理员可以加入成员至工作空间，并赋予工作角色，以实现多角色协同工作。调度资源组 调度资源组用于任务的调度运行。首次开通EMR Workflow服务时，将免费为您提供一个默认调度资源组。工作流定义 工作流定义是对一系列按照特定逻辑...
数据质量规则配置流程
质量规则列表 在上图的区域②，为您展示 规则名称、规则ID、表名、规则字段、分区表达式、关联调度、规则模板、强/弱、启停状态、配置人 等质量规则详细信息，同时您可以在操作列对规则进行 订阅管理、修改 规则、删除 规则、停止/启动 ...
注册调度集群
Dataphin支持连接不同集群的机器并统一管理对应的调度资源。本文介绍如何注册调度集群。操作步骤 使用元仓租户下的 超级管理员 或 系统管理员 账号登录Dataphin。在Dataphin首页，单击顶部菜单栏中的 管理中心。按照下图操作指引，进入 ...
空间管理员职责
空间管理员需要保证工作空间生产环境的稳定、控制工作空间成员中的角色权限（权限最小化，够用即可），并控制表的权限。添加工作空间成员 空间管理员有权限添加RAM子账号为工作空间成员，并在相应的工作空间为子账号授权相应的角色。每个...
快速入门
本文为您介绍如何通过阿里云E-MapReduce（简称EMR）控制台，快速创建EMR Studio集群并开展交互式开发和工作流调度工作。背景信息 如果您想了解更多Zeppelin、Jupyter和Airflow的信息，请参见以下内容：Zeppelin概述 管理JupyterHub 定期...
配置基础属性
您可以在调度配置对话框查看调度节点的名称、ID、类型，并配置责任人、描述等基本信息。...说明 空间管理员可修改，且仅支持选择当前DataWorks工作空间中的成员为责任人。描述 调度节点的描述。通常用于呈现节点业务、用途等信息。
功能特性
工作空间管理员可以加入成员至工作空间，并赋予工作角色，以实现多角色协同工作。管理工作空间 调度资源组管理 调度资源组用于任务的调度运行。如果默认调度资源组不能满足您的需求，您可以根据业务场景需求购买合适规格的付费调度资源组。...
流程管理
流程管理提供可视化的任务编排，您可以使用Crontab创建定时调度工作流，并通过API触发。创建工作流 您可以创建工作流调度任务。说明 目前工作流调度仅支持Cron表达式。登录 EDAS控制台。在左侧导航栏单击 任务调度。在顶部菜单栏选择地域。...
创建指标质量规则
权限说明 超级管理员、质量管理员和指标负责人支持为质量规则配置调度、告警等。质量负责人、普通用户需要额外具备逻辑表字段的读取权限，如需申请，请参见 申请、续期和交还表权限。校验规则说明 指标参与质量规则校验时，如果触发了质量...
调度任务
创建手动调度任务 操作步骤：选择工作空间>配置管理>数据接入管理>数据导入>调度任务。单击右上角 新建调度任务。在弹窗中填写任务名称，选择要调度导入的数据表，支持多选、全选。调度频次选择 手动调度。单击 保存，完成调度任务创建。...
创建指标质量规则
权限说明 超级管理员、质量管理员和指标负责人支持为质量规则配置调度、告警等。质量负责人、普通用户需要额外具备逻辑表字段的读取权限，如需申请，请参见 申请、续期和交还表权限。校验规则说明 指标参与质量规则校验时，如果触发了质量...
工作流调度简介
在事件驱动的计算模型中，事件源是事件的生产者，工作流是事件的处理者，而工作流调度提供了一种集中、统一的方式来管理不同的事件源。在事件源中，当事件发生时，如果满足工作流调度定义的规则，事件源会自动调用工作流调度关联的工作流。...
工作流调度
使用说明 工作流中的Job没有独立调度时间，跟随工作流的时间开始调度。工作流调度至少要有2个Job，且有依赖关系。如果只有一个Job，请直接使用任务管理。工作流支持跨应用编排，可以将不同应用下的任务进行编排。使用限制 当前只有Java任务...
如何重刷数据
说明 任务和工作流都支持重刷数据（只支持天级别的调度周期）。如果您之前执行的某个调度任务的数据出现偏差或遗漏，您可以通过重新设置执行参数并执行某个调度任务属性、获取数据。登录 分布式任务调度平台。在 任务管理 页面，单击目标...
通用参考：按量付费转包年包月
独享数据集成资源组：绑定归属工作空间 独享调度资源组：绑定归属工作空间 独享数据服务资源组：绑定归属工作空间。修改资源组：资源组配置完成后，您需要为目标任务切换新购买的资源组。修改任务调度及运行资源组 切换任务执行时使用的...
独享调度资源组
在任务高并发执行且无法错峰运行的情况下，需要专有的计算资源来保障任务定时被调度运行时，建议您选择使用DataWorks的独享调度资源组。本文为您概要介绍独享调度资源组。适用场景 对任务时效性要求高，避免公共资源组资源争抢导致任务延时...
如何重刷数据
说明 任务和工作流都支持重刷数据（只支持天级别的调度周期）。如果您之前执行的某个调度任务的数据出现偏差或遗漏，您可以通过重新设置执行参数并执行某个调度任务属性、获取数据。登录 分布式任务调度平台。在 任务管理 页面，单击目标...
功能特性
支持任务调度的管理和监控 可设置任务的调度策略，包括定时调度、触发条件调度等，保证准时执行任务。支持任务之间的依赖关系配置 可以设置任务的前置依赖和后置依赖，确保任务按照正确的顺序执行。支持任务参数的灵活配置 用户可以根据...
创建实时元表规则
权限说明 超级管理员、质量管理员和实时元表负责人支持为质量规则配置调度、告警等。质量负责人、普通用户需要额外具备实时元表的同步读取权限，如需申请实时元表权限，详情请参见 申请、续期和交还表权限。质量规则试跑和运行区别 试跑和...
创建实时元表规则
权限说明 超级管理员、质量管理员和实时元表负责人支持为质量规则配置调度、告警等。质量负责人、普通用户需要额外具备实时元表的同步读取权限，如需申请实时元表权限，详情请参见 申请、续期和交还表权限。质量规则试跑和运行区别 试跑和...
- 产品推荐
- 这些文档可能帮助您