查看并管理运行记录
运行记录为您保存近15天的即席查询、运行计算任务、逻辑数据表预览、派生指标冒烟测试、资产数据预览、OpenAPI数据查询的记录。本文为您介绍如何查看运行记录。查看运行记录 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，...
查看并管理脚本实例
脚本实例列表页面展示当前实例对象、运行状态、调度周期、业务日期、定时运行时间、开始运行时间、结束运行时间、运行时长、优先级、运维负责人、相关基线实例、资源组及支持的操作。字段 描述 实例对象 运行一个周期任务得到一个周期实例...
查看并管理手动实例
手动实例是手动任务运行后生成的实例数据。系统支持对手动实例进行运维管理，包括查看运行日志、查看手动任务、查看节点代码等。手动实例入口 请参见 运维中心入口，进入 运维 中心。在 运维 中心页面，单击左侧导航栏 手动实例，进入手动...
运行历史
运行历史面板为您展示最近三天您在数据开发界面运行过的所有任务记录，单击相应的任务，即可查看运行日志。说明 运行历史 界面只展示当前账号在数据开发（DataStudio）最近三天的运行记录。如您需查看调度任务每日运行情况，请前往 运维...
基本概念
任务流版本形态如下：编辑态版本：当前可编辑的版本，每次单击试运行（手动触发）都会保存一个编辑态版本，且每次运行都只会基于最新的、且可编辑的版本运行。发布态版本：任务流发布后会产生一个版本，每次定时触发都会运行当前最新的发布...
调试代码片段：快捷运行
DataWorks的快捷运行功能，帮助您在节点编辑页面，快速运行选中的代码片段。您可以通过该功能测试代码片段编写是否正确。本文为您介绍如何快捷运行目标代码。前提条件 已创建ODPS SQL或EMR Hive节点，并编写任务代码。创建ODPS SQL节点，...
查看并管理已提交实例
已提交实例是对周期任务发起立即运行补数据操作或待提交实例生成的可运行实例。您可以对已提交实例执行重跑、终止、置为成功继续调度、暂停或恢复等操作。本文为您介绍如何查看并管理已提交实例。已提交实例 入口 在Dataphin首页，单击顶部...
归并节点
本文为您介绍归并节点的概念，以及如何新建归并节点、定义归并逻辑，并通过实践案例为您展示归并节点的调度配置和运行详情。背景信息 归并节点是DataStudio中提供的逻辑控制系列节点中的一类，可以对上游节点的运行状态进行归并，用于解决...
查看并管理已提交实例
已提交实例是对周期任务发起立即运行补数据操作或待提交实例生成的可运行实例。您可以对已提交实例执行重跑、终止、置为成功继续调度、暂停或恢复等操作。本文为您介绍如何查看并管理已提交实例。已提交实例 入口 在Dataphin首页，单击顶部...
任务调试流程
任务代码开发完成后，您可根据需要，通过运行、带参运行、快捷运行等功能调试完整代码或代码片段的正确性，并在调试完成后查看运行结果。本文为您介绍任务调试的相关内容。前提条件 已完成任务开发，详情请参见 数据开发概述。背景信息 您...
智能诊断
全链路诊断 DataWorks根据任务运行的必要条件，将依次检查上游任务的运行状态、当前任务设置的定时时间、调度资源的使用情况、当前任务的执行情况：上游依赖 智能诊断的 上游依赖 页面，为您展示当前任务的上游任务运行情况，如果上游任务...
查看并管理已生成实例
已生成实例是对周期任务发起立即运行补数据操作或待生成实例生成的可运行实例。您可以对已生成实例执行重跑、终止、置为成功继续调度、暂停或恢复等操作。本文为您介绍如何查看并管理已生成实例。已生成 实例入口 请参见 运维中心入口，...
查看并管理已生成实例
已生成实例是对周期任务发起立即运行补数据操作或待生成实例生成的可运行实例。您可以对已生成实例执行重跑、终止、置为成功继续调度、暂停或恢复等操作。本文为您介绍如何查看并管理已生成实例。已生成 实例入口 请参见 运维中心入口，...
任务未运行
序号 状态类型 状态标识 运行流程图 1 运行成功状态 2 未运行状态 3 运行失败状态 4 正在运行状态 5 等待状态 6 暂停/冻结状态 紫色（冻结）：说明该实例被冻结了，任务将不会运行，并且阻塞下游，可以单击 展开详情>操作日志，在操作记录...
运维中心概述
异常统计情况，包括运行详情、运行趋势、运行失败实例数排行、运行失败实例对应任务数排行、失败报警实例数排行、延时报警实例数排行、运行状态统计、运行时长统计、失败次数统计、延时时长统计和报警排行。帮助您从全局视角管控实例的运行...
管理工作流
工作流运行状态 状态 说明 蓝色 运行中 绿色 运行成功 红色 运行失败 紫色 等待中 工作流节点运行状态 状态 说明 蓝色 运行中 绿色 运行成功 红色 运行失败 黄色 重试中 紫色 等待中 相关文档 任务编排相关概念，详情 请参见 基本概念。...
引擎运维
您可以使用DataWorks的引擎运维功能，查看各个E-MapReduce作业的详细信息，及时查找并清理运行有误的作业，避免该类作业阻塞下游任务，影响实例任务的正常运行。使用限制 DataWorks目前仅支持对E-MapReduce计算引擎进行运维，并且您需要...
查看周期实例
周期实例是周期任务达到启用调度所配置的周期性运行时间时，被自动调度的实例快照。您可以通过列表及DAG图的方式，快速查看实例的详细信息并执行相关操作。相关概念 正常任务：即真实执行代码逻辑的任务，不包括空跑（调度属性为空跑的任务...
新建补数据任务
暂停调度任务对应实例 配置暂停调度的任务生成的补数据实例的运行状态：暂停运行（可能会阻断补数据进程）：即暂停调度的任务生成的补数据实例均暂停运行，会阻断下游实例正常运行。说明 适用于当前任务及其下游任务均不需要运行的场景。...
运维中心概述
异常统计情况，包括运行详情、运行趋势、运行失败实例数排行、运行失败实例对应任务数排行、失败报警实例数排行、延时报警实例数排行、运行状态统计、运行时长统计、失败次数统计、延时时长统计和报警排行。帮助您从全局视角管控实例的运行...
任务运行诊断
序号 状态类型 状态标识 运行流程图 1 运行成功状态 2 未运行状态 3 运行失败状态 4 正在运行状态 5 等待状态 6 暂停/冻结状态 说明 若上游一直处于运行中的状态，您可以参考以下解决方案。非离线同步任务一直处于运行中的状态，如果需要...
新建补数据任务
暂停调度任务对应实例 配置暂停调度的任务生成的补数据实例的运行状态：暂停运行（可能会阻断补数据进程）：即暂停调度的任务生成的补数据实例均暂停运行，会阻断下游实例正常运行。说明 适用于当前任务及其下游任务均不需要运行的场景。...
周期任务补数据
周期任务开发完成并提交发布后，任务会按照调度配置定时运行，如果您希望在指定时间段运行周期任务或回刷历史一段时间区间的数据，可以使用补数据功能。节点使用的调度参数会根据补数据选择的业务时间自动替换成对应的值。本文为您介绍如何...
周期任务补数据
周期任务开发完成并提交发布后，任务会按照调度配置定时运行，如果您希望在指定时间段运行周期任务或回刷历史一段时间区间的数据，可以使用补数据功能。节点使用的调度参数会根据补数据选择的业务时间自动替换成对应的值。本文为您介绍如何...
升级安全沙箱运行时
您可以通过容器服务Kubernetes版ACK（Container Service for Kubernetes）控制台，可视化地升级您节点上的安全沙箱运行时。本文介绍安全沙箱运行时的升级原理、注意事项以及如何升级安全沙箱运行时。使用限制 仅当您的集群为安全容器集群时...
运维中心概述
运维中心功能模块 当您在DataStudio中完成节点开发，并提交和发布至生产环境后，即可在运维中心对任务进行运维操作，包括周期调度任务的自动调度与手动运行、任务运行详情查看、任务运行状态监控、任务运行使用的资源监控与自动运维；...
周期实例通用运维概述
周期实例是周期任务按照调度配置自动定时运行生成的实例。周期任务每调度一次，便生成一个实例。同时，可以对已生成的实例进行运维管理，例如查看运行状态、重跑和查看节点代码等操作。本文将介绍周期实例的通用功能。周期实例 生成时间及...
运行并管理手动任务
手动业务流程发布至生产环境后您可以在该页面手动触发任务运行。支持您通过列表或DAG图方式，快速查看任务的详细信息并执行相关操作。说明 手动任务提交至调度系统后，不会自动运行，只有手动触发才会运行。详情请参见：创建手动任务。目前...
周期实例通用运维概述
周期实例是周期任务按照调度配置自动定时运行生成的实例。周期任务每调度一次，便生成一个实例。同时，可以对已生成的实例进行运维管理，例如查看运行状态、重跑和查看节点代码等操作。本文将介绍周期实例的通用功能。周期实例 生成时间及...
查看运维大屏
运维大屏为您展示工作空间的运维稳定性评估、重点关注的运维指标、调度资源使用及周期任务运行概况，以及数据集成同步任务的运行详情，助力您从宏观角度快速了解空间任务的整体概况，及时发现并处理异常任务，提升运维效率。使用说明 运维...
API 概览
流水线控制 API 名称 描述 运行流水线 运行流水线 终止运行流水线 可以取消运行流水线 删除流水线成员 可以删除流水线成员 更新流水线成员 可以更新流水线成员 增加流水线成员 可以增加流水线成员 使用流水线模板创建流水线 使用流水线模板...
快速入门
策略及其说明如下：完成运行中的任务：任务流中其他正在运行的节点任务将会保持运行直到结束，其他的节点任务不会被运行，正在运行的任务流运行结束后，任务流将会被标记为运行失败。立即停止所有任务：在错误发生后，立即停止运行所有任务...
运行计数
本文为您介绍运行计数组件。功能说明 运行计数组件用于统计组件自运行开始到目前为止的总运行次数。计算逻辑原理 每执行一次运行计数组件运行次数加1。参数说明 OU T端 口-输出参数 参数名 参数描述 输出数据类型 运行次数 输出组件的运行...
逻辑表运行配置
您可根据业务场景为维度逻辑表配置任务级的运行超时时间和任务运行失败时的重跑策略，杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。本文将为您介绍如何配置逻辑表运行设置。操作步骤 请参见 数据开发入口，...
逻辑表运行配置
您可根据业务场景为维度逻辑表配置任务级的运行超时时间和任务运行失败时的重跑策略，杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。本文将为您介绍如何配置逻辑表运行设置。操作步骤 在Dataphin首页，单击...
运行设置
为了节省调度资源，在确保不存在资源与状态冲突的前提下，您可以设置基于离线代码模板创建的模板任务是否共享运行调度资源。本文为您介绍如何开启全局共享资源开关。背景信息 为了避免不同任务运行之间产生资源或状态的冲突（如修改全局...
执行补数据并查看补数据实例（新版）
注意事项 实例运行相关 当补一个区间的数据时，若启动补数据的第一天存在一个运行失败的实例，则当天的补数据实例均会被置为失败状态，第二天的实例也不会启动运行。仅当第一天的全部实例均运行成功，第二天的实例才会启动运行。小时或分钟...
查看异常统计
异常统计为您展示全局或已选项目下运行异常任务的统计信息，包括运行出错和运行总时间过长两个视角，便于您及时获取任务运行的状况，以判断资源的消耗及影响，从而作出预算准备、资源扩容或规格升级的决策。本文为您介绍运维中心的异常统计...
查看异常统计
异常统计为您展示全局或已选项目下运行异常任务的统计信息，包括运行出错和运行总时间过长两个视角，便于您及时获取任务运行的状况，以判断资源的消耗及影响，从而作出预算准备、资源扩容或规格升级的决策。本文为您介绍运维中心的异常统计...
计算任务运行配置
您可根据业务场景为离线计算任务配置任务级的运行超时时间和任务运行失败时的重跑策略，杜绝因计算任务长时间资源占用造成资源浪费的同时提高计算任务运行的可靠性。本文将为您介绍如何配置离线计算任务的运行配置。操作步骤 请参见 离线...
- 产品推荐
- 这些文档可能帮助您