如何重刷数据
登录 分布式任务调度平台。在 任务管理 页面，单击目标任务 操作 列下的 更多，然后单击 重刷任务。在 重刷任务 面板，设置 起止日期 和 数据时间，单击 确定。起止日期：指定重刷的日期区间。数据时间：指定重刷日期区间内的重刷时间。...
如何重刷数据
登录 分布式任务调度平台。在 任务管理 页面，单击目标任务 操作 列下的 更多，然后单击 重刷任务。在 重刷任务 面板，设置 起止日期 和 数据时间，单击 确定。起止日期：指定重刷的日期区间。数据时间：指定重刷日期区间内的重刷时间。...
如何重刷数据
登录 分布式任务调度平台。在 任务管理 页面，单击目标任务 操作 列下的 更多，然后单击 重刷任务。在 重刷任务 面板，设置 起止日期 和 数据时间，单击 确定。起止日期：指定重刷的日期区间。数据时间：指定重刷日期区间内的重刷时间。...
如何重刷数据
登录 分布式任务调度平台。在 任务管理 页面，单击目标任务 操作 列下的 更多，然后单击 重刷任务。在 重刷任务 面板，设置 起止日期 和 数据时间，单击 确定。起止日期：指定重刷的日期区间。数据时间：指定重刷日期区间内的重刷时间。...
任务管理
登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏，选择 任务管理。在 任务管理 页面，选择目标命名空间，单击 创建任务。在 基本配置 配置向导页，配置调度任务的相关信息，然后单击 下一步。基本配置参数说明如下：配置名称...
如何重刷数据
重刷调度任务 如果您的业务发生变更，如数据库增加一个字段或者上一个月数据有错误，需要把过去一段时间的任务重新执行一遍，可以重刷调度任务数据。说明 任务和工作流都支持重刷数据（只支持天级别的调度周期）。如果您之前执行的某个调度...
如何重刷数据
重刷调度任务 如果您的业务发生变更，如数据库增加一个字段或者上一个月数据有错误，需要把过去一段时间的任务重新执行一遍，可以重刷调度任务数据。说明 任务和工作流都支持重刷数据（只支持天级别的调度周期）。如果您之前执行的某个调度...
任务管理
登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏，选择 任务管理。在 任务管理 页面，选择目标命名空间，单击 创建任务。在 基本配置 配置向导页，配置调度任务的相关信息，然后单击 下一步。基本配置参数说明如下：配置名称...
任务管理
在左侧导航栏，单击 任务调度。在顶部菜单栏选择地域。在左侧导航栏，选择 任务管理。在 任务管理 页面，选择目标命名空间，单击 创建任务。在 基本配置 配置向导页，配置调度任务的相关信息，然后单击 下一步。基本配置参数说明如下：配置...
查看并管理定时调度补数据任务
定时调度补数据任务是指任务将按照配置的定时调度时间生成并运行补数据实例，进行历史数据的回刷。本文将为您介绍如何查看并管理定时调度类型的补数据任务。定时调度补数据任务入口 请参见 运维中心入口，进入 运维 中心。按照下图操作指引...
查看并管理定时调度补数据任务
定时调度补数据任务是指任务将按照配置的定时调度时间生成并运行补数据实例，进行历史数据的回刷。本文将为您介绍如何查看并管理定时调度类型的补数据任务。定时调度补数据任务入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 ...
DataWorks按量计费概述
例如在DataWorks进行任务开发、定时任务调度、数据同步任务调度、大规模工作流监控、数据质量监控、数据服务API调用等操作。重要 当实例欠费后有停机风险，系统会提醒或通知您，请及时续费，避免对您的服务造成影响。公共调度资源组、公共...
计费逻辑说明
资源费用明细：数据集成 任务调度 在DataWorks进行数据开发、定时任务调度时会占用一定的调度资源，DataWorks将根据运行成功的任务实例数量计费。您可选择包年包月的独享调度资源组，或按量付费的公共调度资源组运行任务。资源费用明细：...
DataWorks资源组概述
资源组介绍 DataWorks包括独享资源组、公共资源组，各资源组根据任务调度、数据集成、数据服务等不同的使用场景，细分为不同类型的资源组，包括：独享调度资源组、独享数据集成资源组、独享数据服务资源组、公共调度资源组、公共数据服务...
通用参考：按量付费转包年包月
开通DataWorks后，默认享有DataWorks按量付费的基础版相关功能服务，您可使用该类服务执行任务。同时，DataWorks支持包年包月的标准版、专业版、企业版及...修改任务调度及运行资源组 切换任务配置时的默认资源组 修改数据服务API调用资源组
补数据任务概述
Dataphin补数据任务可以对历史数据进行补数，将数据写入至对应时间分区。代码中若使用调度参数，则该参数将根据补数据时选择的业务日期自动替换为具体值，结合业务代码将对应时间数据写入对应分区。帮助您对数据中缺失、错误、重复或不完整...
补数据任务概述
Dataphin补数据任务可以对历史数据进行补数，将数据写入至对应时间分区。代码中若使用调度参数，则该参数将根据补数据时选择的业务日期自动替换为具体值，结合业务代码将对应时间数据写入对应分区。帮助您对数据中缺失、错误、重复或不完整...
为什么会空跑
周月调度任务补数据空跑解决方法：您可以按下图观察一下当天周期实例的定时时间和业务时间，如果任务为月调度任务定时每月1号调度，那补数据需要选择业务时间为月末，周任务同理。场景二：实时生成的过期实例 当使用 发布后及时生成实例 ...
开通DataWorks服务
开通DataWorks服务后，在使用DataWorks的各项服务时，不同产品服务的功能模块（例如，任务开发、定时任务调度、数据同步任务调度、大规模工作流监控、数据质量监控、数据服务API调用）会根据使用量和占用的资源量进行按量计费。详情请参见 ...
Kafka增量数据同步至MaxCompute
生产环境不存在待同步的MaxCompute表，同步任务提交发布后，数据同步任务调度运行时将会由于无法找到待同步表而导致同步任务运行失败。开发环境和生产环境的表结构不一致，同步任务提交发布后，同步任务实际调度运行时的列对应关系，可能与...
Kafka增量数据同步至MaxCompute
生产环境不存在待同步的MaxCompute表，同步任务提交发布后，数据同步任务调度运行时将会由于无法找到待同步表而导致同步任务运行失败。开发环境和生产环境的表结构不一致，同步任务提交发布后，同步任务实际调度运行时的列对应关系，可能与...
OSS数据离线同步至MaxCompute
生产环境不存在待同步的MaxCompute表，同步任务提交发布后，数据同步任务调度运行时将会由于无法找到待同步表而导致同步任务运行失败。开发环境和生产环境的表结构不一致，同步任务提交发布后，同步任务实际调度运行时的列对应关系，可能与...
OSS数据离线同步至MaxCompute
生产环境不存在待同步的MaxCompute表，同步任务提交发布后，数据同步任务调度运行时将会由于无法找到待同步表而导致同步任务运行失败。开发环境和生产环境的表结构不一致，同步任务提交发布后，同步任务实际调度运行时的列对应关系，可能与...
Dataphin补数据任务空跑调度了是什么原因
补数据选择的是业务日期，而调度周期配置的是调度日期，如果补数据时选择的业务日期是20220930，那么对应的调度日期就是20221001，而调度周期是月调度，并没有包含每个月的1日，所以补数据选择20220930时任务是空跑运行的。解决方案 在调度...
通用参考：切换资源组
若要设置任务默认调度资源组及数据集成资源组，可在数据开发 设置>调度设置 面板操作。详情请参见 调度设置。注意事项 您可通过切换资源组切换调度任务所使用的资源组，根据周期任务新生成的实例会运行在切换后的资源组上，但该操作默认对...
什么是数据传输服务DTS
数据传输服务DTS（Data Transmission Service）是阿里云提供的实时数据流服务，支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，助您构建...
MaxCompute数据离线同步至ClickHouse
生产环境不存在待同步的MaxCompute表，同步任务提交发布后，数据同步任务调度运行时将会由于无法找到待同步表而导致同步任务运行失败。开发环境和生产环境的表结构不一致，同步任务提交发布后，同步任务实际调度运行时的列对应关系，可能与...
功能更新动态（2023年）
配置逻辑表上游依赖 配置离线管道调度依赖 配置离线任务调度依赖 基础运维 支持小时/分钟周期调度任务 未完成 告警配置。实时实例启动优化：支持实时实例停止时选择保留当前状态停止或无状态停止。支持实时任务或实时实例启动时选择无状态...
文档更新动态（2023年）
更新说明 配置逻辑表上游依赖 配置离线管道调度依赖 配置离线任务调度依赖 运维中心-任务运维/实例运维 支持小时/分钟周期调度任务 未完成 告警配置。实时实例启动优化：支持实时实例停止时选择保留当前状态停止或无状态停止。支持实时任务...
通过运维中心管理任务流与任务流实例
任务流执行状态排行 进入任务编排运维中心 后，您可在任务流排行区域查看 任务流运行失败次数、调度延迟时间、执行时间 三个方面的排行榜，帮助您了解任务流的执行情况、优化任务流的性能。控制任务流中执行的SQL数量 使用监控与保障功能，...
新功能发布记录
一键建仓 02月 功能名称 变更类型 功能描述 相关文档 数据分析 新增 支持从RDS MySQL一键创建AnalyticDB MySQL 3.0数据仓库，您可以在数据仓库中进行报表开发、周期任务调度、数据可视化等操作。一键建仓 数据归档 新增 支持定时将RDS ...
MaxCompute表数据
说明 最后查看时间：统计的为表的最后访问时间，其访问包括手动执行命令访问该表数据和任务调度场景下访问该表数据。此数据仅供参考，不能百分之百精确反映该数据的真实访问时间。此数据为离线统计，有T+1的延迟。明细信息 用于查看表的 ...
数据质量规则配置流程
启动：在数据质量规则关联产出表数据的调度任务执行时，便会触发质量规则校验。停止：在数据质量规则关联产出表数据的调度任务执行时，不会触发质量规则校验。设为强/弱规则：用于修改规则的强弱属性，规则强/弱将影响规则是否报警与阻塞...
步骤三：设置任务调度策略并发布
本文介绍设置任务调度策略的操作流程。前提条件 已编写SQL语句。具体操作，请参见 步骤二：编写SQL分析语句。使用说明 修改已发布的SQL分析任务时，如果修改输出字段的名称和类型，修改前生成的存储表数据将被调度产出的新数据覆盖。如果...
数据总览
本文为您介绍如何进入数据总览页面，查看当前地域阿里云主账号下所有的引擎资源情况。操作步骤 进入数据地图页面。登录 DataWorks控制台，切换至目标地域...热门表 根据数据地图表详情页访问PV，为您展示表访问量的排行榜。为实时统计的数据。
在工作空间创建数据源或注册集群
仅MaxCompute、Hologres、AnalyticDB for PostgreSQL、AnalyticDB for MySQL3.0、ClickHouse数据源可用于数据开发，若您需基于该类数据源进行数据开发、任务调度、数据分析等操作，则数据源创建完成后还需绑定至数据开发（DataStudio）。...
沙箱执行
任务调度引擎在启动任务时，会将任务运行在内置的安全沙箱内，保障任务和服务的安全性。安全沙箱提供以下能力：限制网络请求：禁止用户任务请求敏感服务，如Dataphin内部服务等。限制文件读取：禁止用户任务读写敏感文件，如/etc/hosts等...
调度依赖配置指引
基于表血缘选择调度依赖方式的步骤如下：确认表的血缘关系 为保障任务调度产出的表数据符合预期，您需明确上下游表当天产出的业务数据，确保下游表当天获取的数据为上游表当天的产出数据。若为小时、分钟周期调度任务，则需明确每个小时、...
查看异常统计
② 离线实例异常排行榜 支持查看失败次数和失败次数占比的排行榜，帮助您及时运行异常任务。单击 查看注释，查看运行失败次数、运行失败次数占比等指标的解释。单击 下载CSV，下载更多统计数据，以便进一步分析数据异常原因。报警排行 在 ...
查看异常统计
② 离线实例异常排行榜 支持查看失败次数和失败次数占比的排行榜，帮助您及时运行异常任务。单击 查看注释，查看运行失败次数、运行失败次数占比等指标的解释。单击 下载CSV，下载更多统计数据，以便进一步分析数据异常原因。报警排行 在 ...
- 产品推荐
- 这些文档可能帮助您