实时计算任务运行与管理
结束运行：任务的结束运行时间。运行时长：任务的运行时长，单位为秒。任务类型：任务的类型。说明 DataWorks当前仅支持对EMR Spark Streaming及EMR Streaming SQL类型的节点提交的任务进行运维。引擎类型：任务所使用的引擎类型。...
Dataphin逻辑表任务运行时间超长
两个物化节点中一个是7月3号运行结束的，另外一个是7月5号运行结束的，因为我们运行时长是该逻辑表实例的开始运行时间与结束运行时间之间的统计，所以这里运行时长统计50多小时。由于依赖上游的逻辑表任务在7月3号运行出现异常导致该当前...
查看并管理脚本实例
说明 单击结束运行时间的 图标，支持按照结束运行时间进行升序或降序排序。对于逻辑表节点，为实例对象最晚结束运行的内部物化节点对应的时间。运行时长 实例开始运行到结束运行时的总时长。说明 单击运行时长的 图标，支持按照运行时长...
查看并管理脚本实例
说明 单击结束运行时间的 图标，支持按照结束运行时间进行升序或降序排序。对于逻辑表节点，为实例对象最晚结束运行的内部物化节点对应的时间。运行时长 实例开始运行到结束运行时的总时长。说明 单击运行时长的 图标，支持按照运行时长...
查看并管理手动实例
查看手动实例列表 手动实例列表页面展示当前业务类型的实例对象、运行状态、业务日期、开始运行时间、结束运行时间、运行时长、优先级、负责人、调度资源组及支持的操作。字段 描述 实例对象 运行一次手动任务得到一个手动实例对象。包含...
查看数据同步项目的详情
结束中：表示数据同步项目正在被结束运行。结束中的数据同步项目不能进行任何操作。已结束：表示数据同步项目已经成功结束运行。您可以对处于 未启动、运行中、已暂停 和 失败 状态的项目进行修改项目名称操作，详情请参见 修改数据同步...
查看并管理手动实例
查看手动实例列表 手动实例列表页面展示当前业务类型的实例对象、运行状态、业务日期、开始运行时间、结束运行时间、运行时长、优先级、负责人、调度资源组及支持的操作。字段 描述 实例对象 运行一次手动任务得到一个手动实例对象。包含...
查看并管理明细及汇总表实例
说明 单击结束运行时间的 图标，支持按照结束运行时间进行升序或降序排序。对于逻辑表节点，为实例对象最晚结束运行的内部物化节点对应的时间。运行时长 实例开始到结束时的时间间距时长。说明 单击运行时长的 图标，支持按照运行时长进行...
查看并管理明细及汇总表实例
说明 单击结束运行时间的 图标，支持按照结束运行时间进行升序或降序排序。对于逻辑表节点，为实例对象最晚结束运行的内部物化节点对应的时间。运行时长 实例开始到结束时的时间间距时长。说明 单击运行时长的 图标，支持按照运行时长进行...
UpdateRemind
UNFINISHED（未完成）：表示从实例运行的起始时间点开始监控，到指定的目标时间点任务仍未结束运行，则系统发送报警。ERROR（出错）：表示从实例运行的起始时间点开始监控，当任务运行出错时，系统发送报警。CYCLE_UNFINISHED（周期未完成...
ListPipelineRunNodeStatus-获取工作流任务节点状态
2021-01-21T17:12:35.232Z FinishedAt string 节点的结束运行时间。按照ISO8601标准表示，使用UTC+0时间。格式为：yyyy-MM-ddTHH:mmZ。2021-01-21T17:12:40.232Z RuntimeInfo string 节点运行时信息，格式为转义后的Map，用户可以自定义...
规则管理
场景示例：场景一：任务的定时调度时间为1点，设置的未完成时间为2点，则1点时该任务开始运行，在2点时任务仍未结束运行，则发送报警。场景二：设置任务每天0:00~23:59每小时调度一次，当该任务未完成时间设置为12点时，则该规则每天都会...
查看并管理已提交实例
单击补数据实例 定时运行时间、结束运行时间、运行时长 栏的 图标，支持按照 定时运行时间、结束运行时间、运行时长 进行 升序 或 降序 排序。脚本任务、明细及汇总表任务补数据实例支持的操作与对应的周期实例支持的操作相同。更多信息，...
查看并管理已提交实例
单击补数据实例 定时运行时间、结束运行时间、运行时长 栏的 图标，支持按照 定时运行时间、结束运行时间、运行时长 进行 升序 或 降序 排序。脚本任务、明细及汇总表任务补数据实例支持的操作与对应的周期实例支持的操作相同。更多信息，...
引擎运维
您可以查看E-MapReduce作业的基本信息，包括作业ID、作业状态、开始运行时间、结束运行时间、所属DataWorks实例及实例ID等。说明 不同E-MapReduce作业所属的DataWorks实例名称可能相同，但如果不同E-MapReduce作业的运行 开始时间 不同时，...
PHP运行环境支持使用第三方扩展吗？
支持。详细信息，请参见 PHP运行环境 和 PHP运行环境动态加载卸载内置扩展。
PHP运行环境内置的Tablestore PHP SDK使用有问题...
由于内置Protobuf扩展和Tablestore依赖的PHP实现的Protobuf有冲突，导致PHP运行环境内置的Tablestore PHP SDK使用有问题。解决方法，请参见 PHP运行环境动态加载卸载内置扩展。同时，PHP运行环境动态加载卸载内置扩展，建议您通过环境变量...
PHP运行环境内置的Tablestore PHP SDK使用有问题...
由于内置Protobuf扩展和Tablestore依赖的PHP实现的Protobuf有冲突，导致PHP运行环境内置的Tablestore PHP SDK使用有问题。解决方法，请参见 PHP运行环境动态加载卸载内置扩展。同时，PHP运行环境动态加载卸载内置扩展，建议您通过环境变量...
实时同步任务运维
FailOver：为避免FailOver导致频繁启动任务占用系统资源，您可配置指定时间段内FailOver出现次数超过指定次数时，任务自动结束运行。如果您不配置Failover次数，将根据5分钟内，Failover次数超过100来自动结束任务。任务运行状态监控 为...
PHP运行环境如何增加或删除内置扩展？
函数计算的PHP运行环境中自带一些常见的内置扩展，同时支持自定义增加或删除内置扩展。本文介绍如何增加或删除PHP运行环境的内置扩展。本文以不引入protobuf内置扩展为例，介绍如何删除PHP运行环境的内置扩展。关于函数计算PHP运行环境目前...
Dataphin中为什么会出现下游节点任务运行结束时间比其...
问题描述 Dataphin中为什么会出现下游节点任务运行结束时间比其上游节点运行时间早？比如以下问题：上游节点是逻辑表dim_org，解析之后，生成两个物化表，分别于2021-11-19 03:11:16、2021-11-19 03:44:29分运行结束。下游节点是代码任务，...
作业运维（新版）
结束运行时间 Instance运行结束时间。总运行时长 作业从提交时间到结束时间总时长。最新状态 作业当前最新状态。CPU使用占比快照 作业在观测时刻的CPU使用占比（CPU使用量/(预留CPU保障+弹性预留CPU)）。按量计费作业无此信息，采集不到...
查看数据迁移项目的详情
结束中：表示数据迁移项目正在被结束运行。结束中的数据迁移项目不能进行任何操作。已结束：表示数据迁移项目已经成功结束运行。您可以对处于 未启动、运行中、已暂停 和 失败 状态的项目进行修改项目名称操作，详情请参见 修改数据迁移...
使用WebIDE打包函数第三方依赖
PHP PHP运行时与Python运行时、Node.js运行时安装第三方依赖包原理相同，不同的是，PHP运行时构建层的特定目录为/opt/php。更多信息，请参见 各运行时支持添加的特定目录。Custom Runtime 如果您使用自定义运行时，且使用的语言为Python、...
使用WebIDE打包函数第三方依赖
PHP PHP运行时与Python运行时、Node.js运行时安装第三方依赖包原理相同，不同的是，PHP运行时构建层的特定目录为/opt/php。更多信息，请参见 各运行时支持添加的特定目录。Custom Runtime 如果您使用自定义运行时，且使用的语言为Python、...
Quick BI加速日志运行中的耗时时间如何理解
概述 本文描述了Quick BI加速日志运行中的耗时时间如何理解。详细信息 状态为运行中时，该耗时时间为上次运行结束所耗费的时间。适用于 Quick BI 公共云专业版
环境说明
PHP运行时 函数计算 目前支持的PHP运行环境如下：PHP版本 操作系统 架构 PHP 7.2 Linux x86_64 PHP内置库 函数计算的PHP运行环境中自带了一些常用库（Package）供您直接使用，目前包含的内置库如下所示。Package 版本 内置库介绍 oss v2.4....
打印函数日志
不同运行时记录日志 关于不同编程语言日志打印相关内容，请参见以下文档：Node.js运行环境记录日志 Python运行环境记录日志 PHP运行环境记录日志 Java运行环境记录日志 C#运行环境记录日志 Golang运行环境记录日志 Custom Runtime日志格式
环境说明
PHP运行时 函数计算 目前支持的PHP运行环境如下：PHP版本 操作系统 架构 PHP 7.2 Linux x86_64 PHP内置库 函数计算的PHP运行环境中自带了一些常用库（Package）供您直接使用，目前包含的内置库如下所示。Package 版本 内置库介绍 oss v2.4....
打印函数日志
不同运行时记录日志 关于不同编程语言日志打印相关内容，请参见以下文档：Node.js运行环境记录日志 Python运行环境记录日志 PHP运行环境记录日志 Java运行环境记录日志 C#运行环境记录日志 Golang运行环境记录日志 Custom Runtime日志格式
其他问题
任务执行是按照业务连线的先后顺序执行，即当前一节点运行结束，后一节点才能运行，所以当前一节点运行时间过长，运行结束时间大于后一节点计划执行时间点，这样后一节点就会出现实际运行时间可能和计划的时间不一致。当两个节点的调度周期...
流水线的运行
待到日常环境测试阶段运行结束后，空闲下来，开始再次运行，此时是接续持续集成阶段第三次运行的版本继续运行，而不是接续持续集成阶段第二次运行的版本继续运行。亦支持在前一阶段运行完成时，若后一阶段正在运行，强制中止后一阶段当前...
如何配置php.ini文件？
文件是PHP的配置文件，它包含了PHP运行环境的各种设置选项和参数。当您需要自定义或调整环境信息时，可以通过修改 php.ini来实现。在 函数计算 中，使用不同方式创建函数时，配置 php.ini文件的方法不同。如果您使用容器镜像的方式创建函数...
如何配置php.ini文件？
文件是PHP的配置文件，它包含了PHP运行环境的各种设置选项和参数。当您需要自定义或调整环境信息时，可以通过修改 php.ini来实现。在 函数计算 中，使用不同方式创建函数时，配置 php.ini文件的方法不同。如果您使用容器镜像的方式创建函数...
场景2：依赖上一周期的结果时，如何配置调度依赖
跨周期依赖的典型场景 实时场景一：场景描述：天任务依赖小时任务，但不想等24个小时任务实例运行结束才运行天任务，希望天任务能够在定时时间12:00时运行。解决方案：上游小时任务配置为 依赖上一周期>本节点，设置下游天任务的定时调度...
任务运行状态
具体含义 wait 等待运行 任务中间态，表示任务正等待执行 running 正在运行 任务中间态，表示任务正运行中 termination 终止运行 任务终态，表示机器人执行过程中，客户端手动停止任务或控制台手动清除任务队列 completion 运行结束 ...
使用Logview查看作业运行信息
Task 信息 在Logview页面中，下半部分为该Instance对应的task信息，包括任务名称、类型、状态、运行结果（Result）、详细信息（Detail）、开始时间、结束时间、总运行时间（Latency）、进度。其中，Latency指运行总共消耗的时间，与其他...
UpdateAppGroup-更新应用分组
testSchedulerx.defaultGroup MaxConcurrency integer 否 最大同时运行实例数量，默认值为1，即上次触发没有运行结束，即使到了运行时刻也不会进行下次触发。1 Namespace string 是 命名空间ID，在控制台的 命名空间页面中获取。adcfc35d-e...
查看作业列表
本文为您介绍如何查看您集群下的作业信息。前提条件 已在E-MapReduce控制台创建on ACK的集群，详情请参见 快速入门。操作步骤 进入作业详情页面。登录 EMR on ACK控制台。...运行中时是Spark的UI链接，运行结束是Historyserver的UI链接。
可以查看流水线列表
gmtCreate long 创建时间 pipelineId long 流水线id lastInstId long 最后一次运行实例id status string 最后一次运行状态 startTime long 最后一次运行开始时间 endTime long 最后一次运行结束时间 ErrorCode String“”错误码 Success ...
- 产品推荐
- 这些文档可能帮助您