备份Oracle

为避免灾难、硬件故障、数据丢失、损坏...后续步骤 恢复Oracle 相关文档 注册Oracle(ECS)注册Oracle(本地)如果您想了解备份数据库备份的优势、工作原理、操作流程、使用限制等,请参见 功能概览(ECS数据库)和 功能概览(本地数据库)。

依赖关系

原理说明:天任务依赖小时任务昨天所有小时实例,天任务需要跨周期依赖小时任务。实时场景:当天任务需要依赖小时任务当天所有实例。依赖关系设置:下游天任务配置:跨周期依赖小时任务,即在 调度配置,时间属性 区域,选择 依赖上一周期>...

确认表血缘

确认表血缘 同空间下确认上游表血缘 节点周期写入某张表某个分区的数据,大部分场景都是采用调度参数来动态实现,您可参考 调度参数,了解调度参数的替换原理。若您需要依赖同工作空间某节点,则可检查其调度参数的配置情况。开发环境确认...

设置健康检查

选择使用自定义运行时创建方式创建应用,或选择使用容器镜像创建方式创建应用且选择您自己的容器镜像作为应用运行环境时,您的自定义运行环境可能会出现不稳定的情况,导致应用实例工作异常。针对上述情况,Serverless 应用引擎 SAE...

离线批量预测

离线预测工作流部署周期性调度 离线预测工作流测试通过后,您可以将预测工作流提交到DataWorks进行周期性调度,详情请参见 使用DataWorks离线调度Designer工作流。对于工作空间是DataWorks 标准模式 的用户来说,开发环境和生产环境的...

输入和输出

工作流 的各种状态(State)之间需要传递数据,每个状态(State)将接受前一状态的输入(Input),并返回输出(Output)并将此输出传递给下一个状态(State)。本文介绍输入和输出的基础知识。流程和状态 流程(Flow)的多个状态(State...

数据开发

调度依赖配置:配置调度依赖的目的是为了保障上游表产出完成才会触发下游读取数据,而当前节点上游的数据是静态的,不需要等待产出,所以本节点的上游依赖可配置为工作空间根节点,即周期依赖的上游节点配置为"使用工作空间根节点",其他...

软件定时器

tick计数发生在每次时钟中断处理的过程,时钟中断是定时产生的,系统在默认情况下为1ms触发一次,即一个tick代表1ms,用户可根据应用需要调整该时间。软件定时器是用来在指定时间或者触发一次或多次某个功能函数的调用。这种由定时器来执行...

包年包月

计费周期 包年包月工作空间的计费周期是按照您购买的时长(以UTC+8时间为准),一个计费周期的起点为开通或续费工作空间的时间(精确到秒),终点为到期日次日的零点(00:00:00)。到期后资源变化 包年包月工作空间到期后的不同时间段对您...

基本概念

本文为您介绍DataWorks中,工作空间、业务流程、解决方案、组件、任务、实例、业务日期、定时时间、提交、脚本开发、资源、函数和输出名称等基本概念。工作空间 工作空间 是DataWorks管理任务、成员,分配角色和权限的基本单元。工作空间...

内网监控

准备工作 内网监控的原理如下图所示。首先需要您在主机上安装云监控插件,然后通过控制台创建监控任务,选择已安装插件的主机作为探测源,并配置需要探测的目标URL或端口。创建监控任务成功后,作为探测源的主机会通过云监控插件每分钟发送...

查看运维大屏

运维大屏为您展示工作空间的运维稳定性评估、重点关注的运维指标、调度资源使用及周期任务运行概况,以及数据集成同步任务的运行详情,助力您从宏观角度快速了解空间任务的整体概况,及时发现并处理异常任务,提升运维效率。使用说明 运维...

高级管理FAQ

什么时候应该开启生命周期管理功能?当文件系统中包含每月访问频率或每季度访问频率低于2次的文件时,可以开启通用型NAS生命周期管理功能,符合生命周期管理策略的文件将自动转储至低频存储或归档存储,采用低频存储计费方式,从而降低存储...

使用DataWorks离线调度Designer工作

PAI Designer支持与DataWorks互通,实现PAI Designer工作流的周期性调度。本文为您介绍如何使用DataWorks实现PAI Designer工作流的离线调度。前提条件 已创建业务流程,具体操作,详情请参见 创建业务流程。重要 创建业务流程时选择的工作...

基本信息管理

工作项状态主要用于工作项的周期管理,支持在项目模板及项目中引用。3.项目角色管理 项目管理过程中涉及到哪些角色主要在企业设置中进行信息维护。支持角色的新增、基本信息编辑、权限编辑、删除。权限介绍请参见 项目权限说明。​ ​ ​

配置同周期调度依赖

依赖某节点同周期指本节点本周期运行,依赖上游节点当前周期的数据产出情况(即任务执行情况),待上游当前周期实例执行成功后,本节点才会运行。通常,若当前任务需依赖上游任务同周期产出的表数据时,可为当前任务设置依赖该上游任务的同...

管理资源配额

单击调度策略后的 按钮,修改调度策略,关于各个调度策略的原理介绍,请参见 调度策略。说明 仅华北6(乌兰察布)地域支持配置调度策略。查看资源概览,包括CPU、内存和GPU的资源使用量/总量。查看资源节点:在资源节点列表中,查看已关联...

调度依赖配置指引

DataWorks的调度依赖是指周期调度节点间的上下游依赖关系。通过节点的依赖关系有序调度运行上下游节点,即当上游节点运行成功后,下游节点才会启动运行,保障适时的产出有效业务数据。本文为您介绍调度依赖的配置指引,避免因调度依赖配置...

数据集成

DataWorks数据集成支持复杂网络环境下的数据同步,您可在数据开发(DataStudio)界面直接 创建离线同步节点,用于离线(批量)数据周期性同步;实时同步任务运维,用于单表或整库增量数据实时同步。本文为您介绍数据同步的相关内容。背景...

场景:夏令时切换对调度任务运行的影响

若您的工作空间所在地域施行夏令时,您可通过本文了解DataWorks对于进入和退出夏令时的相关处理策略。背景信息 DataWorks可保障在进入和退出夏令时当天,任务能够正确运行。以美国西部时间的小时任务为例,施行夏令时的地域,进入和退出...

创建并使用PAI Designer

DataWorks为您提供PAI Designer节点,方便您通过该算法节点载入Designer工作流,通过调度配置实现Designer工作流的周期性任务调度。前提条件 授权DataWorks可访问人工智能平台PAI。您可进入 授权界面 进行一键授权,权限策略详情请参见 ...

创建业务流程

DataWorks的 业务流程 开发结构满足根据业务视角来组织数据开发任务的需求,也提供了 周期业务流程 和 手动业务流程 两种,以满足需要周期性调度和无需周期性调度手动触发运行的场景。本文为您介绍如何创建、设计、提交和查看业务流程,...

监控指标说明

只有在GPU内存带宽受限的工作负载(DCGM_FI_PROF_DRAM_ACTIVE)情况下,更高的占用率表示更有效的GPU使用率。DCGM_FI_PROF_PIPE_TENSOR_ACTIVE Gauge%表示Tensor(HMMA/IMMA)Pipe处于Active状态的周期分数。该值表示一个时间间隔内的平均...

初始化

准备工作:下载并安装 支付宝开放平台开发助手,支付宝开放平台开发助手 用于在本地生成密钥或者证书。您也可以选择使用 阿里云KMS 生成和保存小程序应用的RSA密钥,具体操作请参见 使用阿里云KMS保护应用私钥。授权初始化需要在阿里云控制...

DataWorks On Hologres使用说明

Hologres可通过DataWorks提供的可视化方式配置任务工作流、周期性调度执行任务及元数据管理,保障数据生产及管理的高效稳定。本文为您介绍在DataWorks上开发Hologres任务的基本流程、费用说明、环境准备、权限控制等内容。前提条件 已开通...

Persistent Buffer Pool

原理介绍 PolarDB PostgreSQL版 将Shared Buffer Pool的部分内存变为Pod级生命周期的Persisted Buffer Pool。根据对性能的影响性,PolarDB PostgreSQL版 主要将Buffer Pool和Buffer Descriptor两部分放入了PBP中,其他依旧是Instance级生命...

DataWorks On MaxCompute使用说明

MaxCompute可通过DataWorks提供的可视化方式配置任务工作流、周期性调度执行任务及元数据管理,保障数据生产及管理的高效稳定。本文为您介绍在DataWorks上开发MaxCompute任务的基本流程、费用说明、环境准备、权限控制等内容。前提条件 已...

Persistent Buffer Pool

原理介绍 PolarDB PostgreSQL版(兼容Oracle)将Shared Buffer Pool的部分内存变为Pod级生命周期的Persisted Buffer Pool。根据对性能的影响性,PolarDB PostgreSQL版(兼容Oracle)主要将Buffer Pool和Buffer Descriptor两部分放入了PBP中...

导出开源引擎任务

导出DolphinScheduler任务 原理介绍 DataWorks导出工具通过调用DolphinScheduler的批量导出工作流来定义API信息,获取DolphinScheduler工作流定义的JSON配置,生成一个Zip格式的文件。后续可在 迁移助手>任务上云 的 调度引擎作业导入 页面...

一键MaxCompute数据同步节点

详细原理请参见 postgres_fdw。配置目标表信息。用于新建存放MaxCompute数据的Hologres内部表。参数 描述 目标schema Hologres内部表所属的 Schema。目标表名 Hologres内部表名称。当创建内部表时,若表名称已存在,不同类型的表处理策略...

DataWorks On CDP/CDH使用说明

DataWorks支持基于CDH(Cloudera's Distribution Including Apache Hadoop,以下简称CDH)和CDP(Cloudera Data Platform,以下简称CDP)集群创建Hive、MR、Presto和Impala等节点,实现CDP/CDH任务工作流的配置、定时调度和元数据管理等...

运营操作指南V1.7

排期周期:可选中排期内周期。排期时间段:最多十个时间段,可选每天的执行时间段。排期冲突策略:优先级相同,相当于原排期中插入本排期的内容。优先级高于,相当于原排期冲突部分被本排期的替代。优先级低于,相当于原排期冲突部分,仍旧...

配置FeatureStore项目

功能原理 阿里云特征平台 FeatureStore 为您提供数据源能力,可分别对接离线存储和在线存储产品,便于统一读写并管理离线、在线特征数据。您可以将离线特征表、在线特征表注册至 FeatureStore 的特征视图中,通过特征视图来汇总、映射离线...

加速上云服务

通常,服务交付周期需要30个工作日;如遇特殊情况,阿里云会与您进行协商。4.资源查勘 阿里云将向多个运营商发出查勘单,并将通过合适的运营商完成资源交付。如遇异常情况,运营商无法完成实施,阿里云会进行全额退款。5.施工交付 阿里云会...

任务调度属性配置概述

若任务需要周期性调度运行,您需定义该任务的调度相关属性,包括调度周期、调度依赖、调度参数等。本文为您介绍调度配置的相关内容。前提条件 已创建节点。DataWorks基于节点进行任务开发,不同类型的引擎任务在DataWorks上被封装为不同...

周期任务基本运维操作

您可以在 运维中心>周期任务 列表查看指定工作空间下的周期任务,并对任务进行运维操作,包括自动调度和手动运行周期任务、查看任务运行详情、暂停任务、下线任务等。本文为您介绍周期任务的运维操作详情。使用说明 仅生产环境运维中心支持...

Designer概述

Designer 支持工作空间内的工作流协作共享,同时支持将运行成功的工作流 部署至DataWorks做周期性调度 或者发布为 自定义模板。在Designer工作流中开发测试完成的模型支持注册至模型管理,一键部署模型服务或打包成复合模型进行部署,详情...

时间属性配置说明

使用说明 调度任务的时间属性配置,仅定义任务预期执行时间,其实际是否执行与实际执行时间受多方因素影响,包括但不限于以下场景:调度开关控制 仅当DataWorks工作空间开启 启用调度周期 开关后,工作空间中的任务才可以根据其配置自动...

规则管理

DataWorks每天在24:00前生成次日需要运行的周期实例,当工作空间的实例数量与历史均值相比发生一定幅度的波动时,您将收到该报警。独享调度资源组、独享数据集成资源组 资源组利用率 当 利用率 大于某个数值并持续指定时长时,触发该报警。...

查看节假日

系统预置了节假日信息,相应假期不算在工作时间或项目周期内。您可以在交付中心查看系统预置的节假日信息,方便管理项目的交付周期。操作步骤 登录云市场 交付中心。在左侧导航栏,选择>节假日设置。在节假日列表中,您可以查看系统预置的...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
容器服务 Kubernetes 版 ACK 智能接入网关 容器镜像服务 API 网关 智能视觉生产 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用