API概览
分布式任务调度SchedulerX2.0提供以下API接口。API列表 API 描述 CreateAppGroup 调用CreateAppGroup创建应用分组。CreateJob 调用CreateJob创建任务。GetJobInfo 调用GetJobInfo获取指定Jobid任务详情，通常用来更新任务。UpdateJob 调用...
配置实时模板运行参数
Dataphin支持在实时模板中配置运行参数信息，基于当前实时模板创建的实时任务将继承所配置运行参数。本文为您介绍如何配置实时模板运行参数。操作步骤 请参见 数据开发入口，进入数据 开发 页面。在数据 开发 页面，按照下图操作指引，选择...
中间件产品总览
提供高可用消息云服务 任务调度 提供分布式任务调度框架 提供自动化任务调度服务 分布式事务 金融级分布式事务中间件 支持跨数据库、跨服务以及混合分布式事务 数据访问代理 通过 MySQL 协议与 RDS\OceanBase 通信 通过触发 DDL 任务管理...
信号量
更正文档 概述 信号量是多任务系统中实现任务间同步，并且协调多任务对共享资源访问的一种互斥机制。信号量允许有多个使用者，所以采用计数值来表示可用的资源数，当请求一个信号量时，该计数值减1，若此时计数值大于等于0，表示当前有可用...
计费规则
本文主要介绍任务调度的计费规则。计费规则 任务调度 组件的计费维度为 调度次数，按月累计调度次数阶梯计费。计费单位为 元/万次。计费规则如下：说明 金融云的单价为公共云单价的 2.5 倍。关于金融云区别于公共云的特性，请参见 金融云...
手动任务快速入门
本文以SHELL任务类型为...常见问题 报错“The bucket you access does not belong to you”问题 相关文档 更多任务类型的详细信息，请参见 任务类型。手动任务相关的操作，请参见 管理手动任务。如需新购调度资源组，请参见 管理调度资源组。
配置实时模板运行参数
Dataphin支持在实时模板中配置运行参数信息，基于当前实时模板创建的实时任务将继承所配置运行参数。本文为您介绍如何配置实时模板运行参数。操作步骤 请参见 数据开发入口，进入数据 开发 页面。在数据 开发 页面，按照下图操作指引，选择...
可视化MapReduce模型
操作步骤 任务配置 登录 分布式任务调度平台，在左侧导航栏，单击 任务管理。在 任务管理 页面，单击 创建任务。在 创建任务 面板，执行模式 下拉列表选择 可视化MapReduce。在 高级配置 区域配置相关信息。其他配置项，请参见 任务管理...
调试实时任务
调试任务操作入口 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，选择所需要调试的任务并进入 任务的 调试配置 对话框。当前 仅支持单种模式调试，选择模式后采样对应模式表数据进行调试。实时模式调试：采样对应的实时物理表...
开放平台：能力全面开放
开放事件（OpenEvent）通过OpenEvent可以允许您订阅DataWorks中的系统事件，实时获取并响应事件变化，例如订阅表变更事件实现对核心表的实时监控，订阅任务变更事件实现自定义实时任务监控大屏。关于开放事件功能，具体请参见 开放事件。...
查看费用账单
操作步骤 登录 分布式任务调度平台。在顶部菜单栏选择 费用>用户中心。在左侧导航栏，单击 账单管理>账单详情。根据需要单击相应的页签，然后查看消费情况。账单流水 页签：展示所选账期内的订单列表，您可以根据订单号精确搜索。明细账单 ...
接入问题
无可用机器（no worker available）问题现象：无可用机器，系统提示no worker available。可能原因：可能为配置错误。解决方案：登录Worker查看SchedulerX的日志，日志路径为/${user.home}/logs/schedulerx/worker.log。如果是admin账号...
Quick BI中Ticket报表嵌入方案嵌入组件的方法
概述 Quick BI中Ticket报表嵌入方案嵌入组件的方法。详细信息 不支持同时嵌入多个组件，一个组件对应一个URL，需要嵌入多个组件的情况，可以将多个URL写入同一个HTML。仪表板的拼接格式为 https://<Quick BI域名>/<预览报表URL>?pageId=...
消息路由
启动、停止路由任务 在 消息路由 页面，单击目标任务操作列的 启动 或 停止，即可启动或停止该任务。任务启动后，该任务的状态会切换至运行中。任务停止后，该任务的状态会切换至已停止。删除路由任务 说明 仅支持删除已停止的消息路由任务...
EDAS 3.0助力佐朋数科快速实现上云
分布式任务调度：支持编排定时任务、工作流任务、跑批操作和分布式任务调度。解决方案 阿里云的EDAS 3.0是一站式企业级分布式应用服务，通过接入EDAS 3.0即可获得应用生命周期的管理能力，支持各种发布方式，可以利用应用的监控来快速定位...
数据集成概述
全增量同步任务简介 实际业务场景下，数据同步通常不能通过一个或多个简单离线同步或者实时同步任务完成，而是由多个 离线同步、实时同步 和 数据处理 等任务组合完成，这就会导致数据同步场景下的配置复杂度非常高。为了解决上述问题，...
任务中心
任务中心主要是对离线、在线模型自动化调度运行进行任务式管理，每次任务调度时，都将按照模型设置好的参数和数据自动进行运行，通过任务状态监控单次任务的健康情况。在线服务 在线服务模块展示并管理用户添加的服务，已创建的服务支持...
One Time
One Time即一次性任务调度，配置完成后任务将在设置的时间点执行一次，执行完成后调度平台会自动清理任务，您无需在客户端执行删除任务的操作。一次性任务调度适用于订单超时未支付、自动关闭定时日历提醒等场景。本文介绍如何通过API创建...
配置Fusioninsight Flink实时模式资源
Fusioninsight Flink流批一体任务实时模式的资源配置支持配置任务的生产环境和开发的资源队列、引擎版本信息。本文为您介绍如何配置流批一体任务实时模式的资源配置。操作步骤 请参见 实时模式配置入口，进入实时模式配置页面。在实时模式...
智能媒体生产的审计事件
智能媒体生产已与操作审计服务集成，您可以在操作审计中查询用户操作智能媒体生产产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了用户...
云网管的审计事件
云网管已与操作审计服务集成，您可以在操作审计中查询用户操作云网管产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了用户通过OpenAPI或...
配置开源Flink实时模式资源
开源Flink流批一体任务实时模式的资源配置支持配置任务的生产环境和开发的资源队列、引擎版本以及任务的并行读度、Task Manager数量、Job Manager Momory和Task Manager Momory。本文为您介绍如何配置流批一体任务实时模式的资源配置。操作...
Shape
InlineShapes ActiveDocument.InlineShapes 获取文档中的所有嵌入式图形对象。重要 JS-SDK V1.1.10及以上版本支持此功能。语法 表达式.ActiveDocument.InlineShapes 表达式：文档类型应用对象 示例 async function example(){ await ...
实时同步任务运维
Worker列表是指实时任务启动的实例，非分布式任务只有一个Worker，分布式任务根据并发数会有多个Worker。Task列表是指一个Worker内部的线程任务，分为Reader类型和Writer类型，根据配置的并发数会有1个到多个的Reader任务和1个到多个的...
查看及管理实时计算任务列表
在Dataphin的实时计算任务列表为您展示了实时任务的基本信息及相关管理操作选项，方便您查看创建的实时任务并进行管理。本文为您介绍实时计算任务列表支持的管理功能。实时 计算任务列表入口 在Dataphin首页，单击顶部菜单栏 研发。默认...
查看及管理实时计算任务列表
在Dataphin的实时计算任务列表为您展示了实时任务的基本信息及相关管理操作选项，方便您查看创建的实时任务并进行管理。本文为您介绍实时计算任务列表支持的管理功能。实时 计算任务列表入口 在Dataphin首页，单击顶部菜单栏 研发。默认...
操作审计日志说明
操作审计（ActionTrail）会记录您的云账户资源操作，提供操作记录查询，并可以将审计事件保存到您指定的日志服务 Logstore 或者 OSS 存储空间。利用 ActionTrail 保存的所有操作记录，您可以实现安全分析、资源变更追踪以及合规性审计。...
执行列表
登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏单击 执行列表。在 执行列表 页面的 所属命名空间 列表选择具体的命名空间，然后单击 任务实例列表 或 流程实例列表 页签。默认显示 全部 执行记录。可以对执行记录进行筛选和...
HTTP任务签名认证
为确保HTTP任务的服务接收方能安全地处理分布式任务调度平台SchedulerX发起的调度请求，调度端会在HTTP请求头中默认采用SHA1-RSA签名算法生成schedulerx-signature字段签名串，用于服务端做认证处理。本文介绍如何进行HTTP任务签名认证。...
OpenEvent概述
例如，在数据治理的数据质量模块，给某个表启用了表行数大于0的规则，页面上用户可以对某次校验结果进行反馈，当用户执行了反馈操作，系统会把用户反馈的内容（校验规则ID、反馈内容等）发送给订阅端。数据质量校验完成事件 描述：在数据...
配置DTS位点检查节点
DTS位点检查节点用于确认目标DTS任务同步的数据是否包含某个时间点之前的所有数据。数仓开发任务流中添加并配置DTS位点检查节点，可以预先检查DTS任务的执行情况，用以决定后续任务流节点是否继续执行。本文介绍配置DTS位点检查节点的方法...
如何重刷数据
在 任务管理 页面，单击目标任务 操作 列下的 图标，然后单击 重刷任务。在 重刷任务 面板，设置 起止日期 和 数据时间，单击 确定。起止日期：指定重刷的日期区间。数据时间：指定重刷日期区间内的重刷时间。示例重刷配置如下：当前时间为...
计费常见问题
本文梳理了常见的云拨测计费问题，帮助您更准确的理解计费规则。如何停止计费？若您因业务调整不再使用云拨测，您可以通过禁用拨测任务的方式关闭计费。禁用单个任务 登录 ARMS控制台。在左侧导航栏中选择 云拨测>定时拨测。在目标任务右侧...
四川农信
完成云平台 PaaS 层建设，构建分布式系统上下游生态，实现分布式云原生架构体系 实现分布式云原生架构体系，需要从技术规范、基础设施、生产力工具、组织流程等各个方面进行持续革新：建立一个面向分布式架构的开发平台和运行平台，结合...
新增实时任务
数据同步支持实时同步任务的新建，并支持一键启动多个上云任务，实现全量任务自动建表。本文以同步Kafka数据源到DataHub目标端为例，介绍如何新增实时任务。前提条件 已存在对应数据源，具体操作，请参见 新建数据源。已完成源端数据和目标...
新增实时任务
数据同步支持实时同步任务的新建，并支持一键启动多个上云任务，实现全量任务自动建表。本文以同步Kafka数据源到DataHub目标端为例，介绍如何新增实时任务。前提条件 已存在对应数据源，具体操作，请参见 新建数据源。已完成源端数据和目标...
执行概述
带风险提醒的执行：当执行到模板中定义的不可恢复性操作任务时（如删除、释放、停止类操作等），执行会切换为 等待中 状态，直到您对该任务执行完成了的审批操作其才会进行下一步。单步执行：类似于调试（Debug）功能。当您需要详细地了解...
计费概述
本文介绍分布式任务调度SchedulerX的各计费项及其计费规则。基本概念 任务类型：调度任务的类型。包含单机任务和非单机任务（广播、分片、并行和网络任务等）。任务调度总量：通过SchedulerX配置并启用的分布式任务调度总规模，单位为CU...
计费说明-半托管
本文为您介绍Dataphin半托管版实例及增值功能包的定价和计费项折算逻辑，不包含所依赖云资源的计费信息说明。背景信息 为了迎合灵活多变的市场需求并适应时代发展，Dataphin推出半托管模式，支持通过界面一键下单的方式购买Dataphin产品和...
- 产品推荐
- 这些文档可能帮助您