调度依赖配置指引

任务实际运行时间除了取决于任务本身的定时时间(即任务在调度场景下的预期执行时间)外,还取决于上游任务的完成时间(即下游任务实际执行时间还取决于上游任务的定时时间)。若上游任务未完成运行,即便下游任务的定时时间早于上游任务,...

新建开发环境场景并运行

当仅需要运行场景中的部分节点时,按住Shift+鼠标框选需要运行的节点,即可运行已选择的节点,节省运行时间。如果您需要查看之前日期的运行结果,可以通过补数据功能实现,具体操作,请参见 新建补数据计划。如果场景运行失败,您可将鼠标...

监控指标常见问题

解决方法:通过以下示例SQL查询出运行时间较长的Query,如果是因为 idle in trancation 导致运行时间较长,可以客户端关闭事务或者设置合理的空闲事务超时时间,详情请参见 修改空闲Query超时时间。查看运行时间较长的query SELECT current...

补数据实例运维概述

周期性定时运行补数据任务:将在定时运行时间的 前一天23点 生成待生成实例,到达定时运行时间时将生成补数据实例并调度运行。手动运行补数据任务:将立即生成补数据实例并调度运行。补数据实例入口 在Dataphin首页,单击顶部菜单栏 研发。...

补数据实例运维概述

周期性定时运行补数据任务:将在定时运行时间的 前一天23点 生成待生成实例,到达定时运行时间时将生成补数据实例并调度运行。手动运行补数据任务:将立即生成补数据实例并调度运行。补数据实例入口 在Dataphin首页,单击顶部菜单栏 研发。...

必读:复杂依赖场景调度配置原则与示例

序号 描述 相关文档 1 DataWorks支持多种调度类型(即分钟、小时、天、周、月、年),当上下游调度类型不一致时,DataWorks根据任务定时运行时间的就近原则设置调度依赖。说明 小时任务依赖小时任务,当天的周期数一致时,不符合该原则,即...

其他问题

任务执行是按照业务连线的先后顺序执行,即当前一节点运行结束,后一节点才能运行,所以当前一节点运行时间过长,运行结束时间大于后一节点计划执行时间点,这样后一节点就会出现实际运行时间可能和计划的时间不一致。当两个节点的调度周期...

变量

例如当前任务流ID、任务流的运行时间等。说明 除系统变量外,其他变量统称为自定义变量,自定义变量名不可重复定义,若自定义变量和系统变量重名,则自定义变量的值会覆盖系统变量的值,即自定义变量的优先级更高。时间变量 任务流变量...

找不到任务实例如何处理

说明 如果节点的 生成实例方式 配置为 发布后即时生成,您还可以再检查一下任务定时运行时间与提交发布的时间间隔是否超过十分钟,如果没有的话,则需要重新提交发布,确保定时运行时间在提交发布时间的十分钟之后,否则生成的实例为过期...

查看并管理待提交实例

定时运行时间:定时运行时间支持筛选今天、今天及以后,或某一时间段的待提交实例。② 筛选区 单击筛选 按钮即可展开筛选区,筛选区选项包括:调度周期:可以根据实例的调度周期类型进行筛选。支持 日、周、月,可多选。提交人:可以根据...

查看并管理待生成实例

定时运行时间:定时运行时间支持筛选今天、今天及以后,或某一时间段的待生成实例。② 筛选区 单击筛选 按钮即可展开筛选区,筛选区选项包括:调度周期:可以根据实例的调度周期类型进行筛选。支持 日、周、月,可多选。提交人:可以根据...

查看并管理脚本实例

脚本实例列表页面展示当前实例对象、运行状态、调度周期、业务日期、定时运行时间、开始运行时间、结束运行时间、运行时长、优先级、运维负责人、相关基线实例、资源组及支持的操作。字段 描述 实例对象 运行一个周期任务得到一个周期实例...

Dataphin逻辑表任务运行时间超长

两个物化节点中一个是7月3号运行结束的,另外一个是7月5号运行结束的,因为我们运行时长是该逻辑表实例的开始运行时间与结束运行时间之间的统计,所以这里运行时长统计50多小时。由于依赖上游的逻辑表任务在7月3号运行出现异常导致该当前...

调度依赖场景规则与示例

本文图示说明 图示 含义 上游周期实例 下游周期实例 同周期依赖 跨周期依赖 小时任务依赖小时任务 依赖规则 下游小时任务依赖上游定时运行时间>=自己定时运行时间最近一个实例。场景1:上游下游任务同周期依赖,起调时间相同。上游小时任务...

调度依赖场景规则与示例

本文图示说明 图示 含义 上游周期实例 下游周期实例 同周期依赖 跨周期依赖 小时任务依赖小时任务 依赖规则 下游小时任务依赖上游定时运行时间>=自己定时运行时间最近一个实例。场景1:上游下游任务同周期依赖,起调时间相同。上游小时任务...

查看并管理脚本实例

脚本实例列表页面展示当前实例对象、运行状态、调度周期、业务日期、定时运行时间、开始运行时间、结束运行时间、运行时长、优先级、运维负责人、相关基线实例、资源组及支持的操作。字段 描述 实例对象 运行一个周期任务得到一个周期实例...

建立性能基准

测试项 测试值 数据同步时间 无 占用存储大小 无 查询执行时间 无 查询费用预估 无 记录数据同步时间 在您执行数据同步任务后,可以在 运维中心>周期实例 页面右键查看用户任务运行时间,如下图所示。记录占用存储大小 登录 DataWorks控制...

建立性能基准

测试项 测试值 数据同步时间 无 占用存储大小 无 查询执行时间 无 查询费用预估 无 记录数据同步时间 在您执行数据同步任务后,可以在 运维中心>周期实例 页面右键查看用户任务运行时间,如下图所示。记录占用存储大小 登录 DataWorks控制...

蓝牙设备属性表

0x012D uint32 runTime 秒-设备本次运行时间 累计运行时间 0x012E uint32 totalRunningTime 秒-设备累计运行时间 剩余时间 0x012F uint32 lefttime 秒-预计可使用时间 0x0130 uint32 predictTime 秒-充电剩余时间 0x0131 uint16 ...

查看并管理明细及汇总表实例

查看周期明细及汇总表列表 周期明细及汇总表任务生成实例后,为您展示当前实例对象的名称、运行状态、调度周期、业务日期、定时运行时间、开始运行时间、结束运行时间、运行时长、优先级、运维负责人、相关基线实例、资源组及支持的操作。...

查看并管理明细及汇总表实例

查看周期明细及汇总表列表 周期明细及汇总表任务生成实例后,为您展示当前实例对象的名称、运行状态、调度周期、业务日期、定时运行时间、开始运行时间、结束运行时间、运行时长、优先级、运维负责人、相关基线实例、资源组及支持的操作。...

配置任务流依赖检查节点

运行时间:若选择运行时间,则开始、结束时间是基于任务流运行时间进行偏移。业务时间:若选择业务时间,则开始、结束时间是基于业务时间bizdate(默认为运行时间的前一天)进行偏移。单击 试运行。如果执行日志的最后一行出现 status ...

查看并管理基线实例

③ 历史平均运行时间及 实例运行 状态 扭转 时间区间:历史平均运行时间:为您展示当前实例节点的历史平均运行时间,可作为本次运行时长是否异常的参考项。将通过 浅绿色 长条()为您标识时间区间。您可将鼠标指针移动至标识处查看 近期...

查看并管理基线实例

③ 历史平均运行时间及 实例运行 状态 扭转 时间区间:历史平均运行时间:为您展示当前实例节点的历史平均运行时间,可作为本次运行时长是否异常的参考项。将通过 浅绿色 长条()为您标识时间区间。您可将鼠标指针移动至标识处查看 近期...

步骤七:运维补数据

运行时间 选择 立即运行。业务日期 选择 按区间,区间使用 默认配置。并发运行组数 默认为 1 组。补数据顺序 选择 业务日期正序。暂停调度任务对应实例 选择 正常运行。空跑调度任务对应实例 选择 正常运行。单击 确定。查看补数据实例的...

步骤七:运维补数据

运行时间 选择 立即运行。业务日期 选择 按区间,区间使用 默认配置。并发运行组数 默认为 1 组。补数据顺序 选择 业务日期正序。暂停调度任务对应实例 选择 正常运行。空跑调度任务对应实例 选择 正常运行。单击 确定。查看补数据实例的...

查看并管理已提交实例

单击补数据实例 定时运行时间、结束运行时间、运行时长 栏的 图标,支持按照 定时运行时间、结束运行时间、运行时长 进行 升序 或 降序 排序。脚本任务、明细及汇总表任务补数据实例支持的操作与对应的周期实例支持的操作相同。更多信息,...

计时统计

功能说明 计时统计组件用于统计组件从运行开始到当前的总运行时间。计算逻辑原理 根据计时单位来返回运行开始到当前的时间,当前时间-运行开始时间。参数说明 OUT端口-输出参数 参数名 参数描述 输出数据类型 累积时间 组件从运行开始到...

查看并管理已提交实例

单击补数据实例 定时运行时间、结束运行时间、运行时长 栏的 图标,支持按照 定时运行时间、结束运行时间、运行时长 进行 升序 或 降序 排序。脚本任务、明细及汇总表任务补数据实例支持的操作与对应的周期实例支持的操作相同。更多信息,...

性能测试工具-Shell

cd AHBench./fast_test 完整测试集 测试数据量20亿,整体运行时间大约25小时(视被测HBase系统可能有变化),至少需要总存储空间2 TB。cd AHBench./full_test 若要重复进行该测试,可以通过跳过数据导入阶段(上一次测试已成功运行),减少...

周期实例通用运维概述

开始运行时间:可根据周期实例的开始运行时间进行筛选。支持选择 最近一小时、今天、昨天 或 具体到某一天或某一业务时间区间(精确到秒)。定时时间:可根据周期实例的定时运行时间进行筛选。支持选择 0~6点、6~12点、12~18点 或 某...

周期实例通用运维概述

开始运行时间:可根据周期实例的开始运行时间进行筛选。支持选择 最近一小时、今天、昨天 或 具体到某一天或某一业务时间区间(精确到秒)。定时时间:可根据周期实例的定时运行时间进行筛选。支持选择 0~6点、6~12点、12~18点 或 某...

查看并管理手动实例

查看手动实例列表 手动实例列表页面展示当前业务类型的实例对象、运行状态、业务日期、开始运行时间、结束运行时间、运行时长、优先级、负责人、调度资源组及支持的操作。字段 描述 实例对象 运行一次手动任务得到一个手动实例对象。包含...

周期任务补数据

日/周/月调度任务只有定时运行时间在选中小时区间内才会运行:即下游任务受小时区间影响,只有定时运行时间在选中小时区间内才运行。后续步骤 补数据操作提交后,您可以对补数据实例进行运维管理,例如查看运行日志、查看节点代码、终止...

周期任务补数据

日/周/月调度任务只有定时运行时间在选中小时区间内才会运行:即下游任务受小时区间影响,只有定时运行时间在选中小时区间内才运行。后续步骤 补数据操作提交后,您可以对补数据实例进行运维管理,例如查看运行日志、查看节点代码、终止...

智能诊断

说明 在数据开发模块中定义任务的调度属性时,需要设置任务在调度环境中的预期运行时间,但任务实际运行时间可能由于上游任务运行失败等问题导致任务实际执行时间晚于任务定时时间。检查调度资源使用情况:您可以查看资源的使用情况及任务...

查看并管理手动实例

查看手动实例列表 手动实例列表页面展示当前业务类型的实例对象、运行状态、业务日期、开始运行时间、结束运行时间、运行时长、优先级、负责人、调度资源组及支持的操作。字段 描述 实例对象 运行一次手动任务得到一个手动实例对象。包含...

新建补数据任务

日/周/月调度任务只有定时运行时间在选中小时区间内才会运行:即下游任务受小时区间影响,只有定时运行时间在选中小时区间内才运行。单击 确定,完成补数据任务的创建。后续步骤 完成补数据任务创建后,您可以根据任务的调度类型对补数据...

新建补数据任务

日/周/月调度任务只有定时运行时间在选中小时区间内才会运行:即下游任务受小时区间影响,只有定时运行时间在选中小时区间内才运行。单击 确定,完成补数据任务的创建。后续步骤 完成补数据任务创建后,您可以根据任务的调度类型对补数据...

任务管理

隐私计算任务列表入口 在...运行:在 请设置运行账期 对话框输入运行时间,单击 确定。运行详情请参见隐私计算运行实例。复制任务:帮助您快捷创建任务。删除:任务删除后不可撤销,请谨慎操作。锁定:任务锁定后,将无法进行编辑和删除。
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 MongoDB 版 云监控 数据传输服务 函数计算(旧版) 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用