ALIYUN:DEVOPS:PipelineRun

当您取值为true时,在流水线完成之前不会创建资源。false(默认值):异步等待管道执行的结果。说明 当流水线配置了暂停策略时,不要将此选项设置为true,因为发布需要手动干预,并且不合适同步。Timeout Integer 否 否 流水线执行的最大...

标签资源权限管理

支持筛选项包括:资源类型:支持离线标签、离线服务任务、事件、实时标签、群组筛选。所属项目:可以根据资源所在的项目进行筛选。资源负责人:可以根据周期任务的运维负责人进行筛选。所属应用:可以根据资源所在的应用进行筛选。② 批量...

离线同步任务运维

为确保任务运行无误,当您在DataStudio中完成任务开发,并发布至生产环境后,您可以进入运维中心管理离线同步任务、监控任务运行状态、修改同步资源组和查看任务运行日志等。本文列举离线同步任务的常见运维操作。前提条件 已完成离线同步...

管理环境

例如,某环境对应分支下代码仓库中的资源描述文件中,描述了某函数对应的内存大小为1024 MB,此时开发者直接修改该函数配置,将其内存修改为2048 MB,而没有更新代码仓库中的资源描述文件,此时触发环境流水线部署,会导致该函数的内存由...

管理环境

例如,某环境对应分支下代码仓库中的资源描述文件中,描述了某函数对应的内存大小为1024 MB,此时开发者直接修改该函数配置,将其内存修改为2048 MB,而没有更新代码仓库中的资源描述文件,此时触发环境流水线部署,会导致该函数的内存由...

创建资源

资源夹是资源目录内的组织单元,通常用于指代企业的分公司、业务线或产品项目。Root资源夹位于资源目录的顶层,没有父资源夹,您可以在Root资源夹下嵌套创建子资源夹,资源夹中放置成员,最终形成树形的资源组织关系。使用限制 关于创建...

新建调度任务

已发布的离线模型支持配置自动化调度任务。本文主要介绍新建调度任务。前提条件 已新建离线模型且模型已发布,具体操作,请参见 新建离线模型。已创建云计算资源作为数据源,具体操作,请参见 新建计算资源。操作步骤 登录 数据资源平台...

资源组说明

资源组网络拓扑 系统资源组部署在数据资源平台VPC,需要使用公网地址连接用户云资源(部分云资源支持VPC打通),即云资源注册时需要填写公网地址,云资源白名单需要添加数据资源平台的公网出口IP。独享资源组部署在数据资源平台VPC,通过...

离线模式依赖文件配置

若您的实时任务的离线模式运行需要依赖外部资源文件,例如文本文件、Python文件、Jar文件等,您可以在Dataphin上传对应资源文件后,将所上传的资源文件添加到任务的依赖文件,使任务能够正常运行。本文将为您介绍如何配置任务离线模式的...

离线模式依赖文件配置

若您的实时任务的离线模式运行需要依赖外部资源文件,例如文本文件、Python文件、Jar文件等,您可以在Dataphin上传对应资源文件后,将所上传的资源文件添加到任务的依赖文件,使任务能够正常运行。本文将为您介绍如何配置任务离线模式的...

新建脚本算子

新建离线脚本算子 登录 数据资源平台控制台。在页面左上角单击 图标,选择 探索。在顶部菜单栏,单击 图标,选择目标工作组,单击 算子中心。在左侧导航栏,选择 算子管理>脚本算子。添加算子目录。在目录栏选中目录,单击 图标,在目录...

运行设置

为了节省调度资源,在确保不存在资源与状态冲突的前提下,您可以设置基于离线代码模板创建的模板任务是否共享运行调度资源。本文为您介绍如何开启全局共享资源开关。背景信息 为了避免不同任务运行之间产生资源或状态的冲突(如修改全局...

公共节点

资源类型 节点类型 描述 离线类型 MaxCompute SQL MaxCompute SQL节点采用类似SQL的语法,适用于海量数据(TB级)但实时性要求不高的分布式处理场景,具体操作,请参见 新建MaxCompute SQL类型的公共节点。MaxCompute MR MaxCompute MR节点...

基本概念

资源资源夹是资源目录内的组织单元,通常用于指代企业的分公司、业务线或产品项目。每个资源夹下可以放置成员,并允许嵌套子资源夹,最终形成树形的资源组织关系。成员 成员是通过资源目录创建出来的资源账号,该资源账号用于承载您在...

资源目录概述

资源资源夹是资源目录内的组织单元,通常用于指代企业的分公司、业务线或产品项目。每个资源夹下可以放置成员,并允许嵌套子资源夹,最终形成树形的资源组织关系。成员 成员是通过资源目录创建出来的资源账号,该资源账号用于承载您在...

ListResourceShareInvitations-查询收到的资源共享...

资源使用者调用ListResourceShareInvitations查询自己收到的资源共享邀请信息。接口说明 使用说明 本文将提供一个示例,查询当前账号在 cn-hangzhou 地域收到的资源共享邀请。返回结果显示,共收到 1 个邀请,且处于等待确认状态。调试 您...

概览

ROS CDK(Cloud Development Toolkit)是阿里云资源编排服务ROS提供的一套开源软件开发工具包,用于在代码中定义云资源并通过ROS进行部署。使用该工具,您无需再依赖繁琐的JSON或YAML模板语法,而是可以通过熟悉的编程语言完成资源的创建和...

新建微应用

操作步骤 登录 数据资源平台控制台。在页面左上角单击 图标,选择 探索。在顶部菜单栏,单击 图标,选择目标工作组,单击 任务中心。在左侧导航栏,选择 离线任务>微应用。在 微应用 页面右上角,单击 新建微应用。在 新建微应用 配置向导...

查看资源使用情况-全托管

Dataphin支持查询当前实例下资源用量使用情况,便于您可以根据资源使用情况及时调整资源规格配置。本文为您介绍如何查看Dataphin中资源用量使用情况。资源统计入口 单击右上方菜单栏头像,选择 资源统计。下载统计详情 您可以点击 下载统计...

视频专区

本文为您介绍资源编排的相关视频。主题 视频 相关文档 控制台功能介绍(资源资源资源栈...更新资源栈 创建资源栈组 资源栈组 实现跨账号资源的自动化部署及运维 资源栈组 资源迁移 资源迁移场景 使用模板示例部署应用 网站部署 软件安装

使用资源目录快速搭建企业的多账号资源结构

步骤二:创建资源资源夹是资源目录中的组织单元,通常用于指代企业的分公司、业务线或产品项目等。每个资源夹下可以放置成员,并允许嵌套子资源夹,最终形成树形的资源组织关系。操作步骤 登录 资源管理控制台。在左侧导航栏,选择 资源...

标记离线计算实例

对执行失败或异常的离线计算实例标记后,实例的状态会标记为成功,方便对实例进行筛选。本文主要介绍如何标记离线计算实例。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击 图标,选择目标...

任务实例运维

已添加云计算资源“data_odps_dev”,具体操作,请参见 新建云计算资源。已存在运行成功的离线计算实例。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击 图标,选择目标工作组,单击 运维监控...

新增离线数据同步任务

线数据同步任务支持的云计算资源类型为MySQL、Oracle、SQL Server、Hdfs、ftp、PostgreSQL、Hive、MaxCompute、AnalyticDB PostgreSQL、OSS。本文以同步MySQL数据源到MaxCompute目标端为例,介绍如何新增离线数据同步。前提条件 已存在...

运行MySQL to MaxCompute离线同步任务

线周期任务创建完成后,需对已新建的离线同步任务进行上线运行,本章节介绍如何运行MySQL to MaxCompute任务。前提条件 已新建工作组“信息中心(xxzx)”,具体操作,请参见 新建工作组。已在工作组中分别添加数据源类型为MaxCompute、RDS...

查看MySQL to MaxCompute离线同步任务监控

任务上线成功后,进入离线同步实例中,可查看实例运行状态、实例详情和重跑实例等,本章节介绍如何查看周期任务的运行情况。前提条件 已新建工作组“信息中心(xxzx)”,具体操作,请参见 新建工作组。已在工作组中分别添加数据源类型为...

查看离线同步实例详情

线同步实例是由离线数据同步时发起的任务实例,运维监控支持查看离线同步任务实例的详情,包括实例属性、运行日志。本文主要介绍查看离线同步实例的详情。前提条件 已上线离线同步任务,具体操作,请参见 上线离线数据同步任务。操作步骤...

上线离线数据同步任务

新增离线数据同步任务后,需对任务进行上线操作,同步任务上线后会按照创建同步任务中设置的调度周期执行。本文介绍如何上线离线数据同步任务。前提条件 已新增离线数据同步任务,具体操作,请参见 新增离线数据同步任务、批量新增离线数据...

查看离线数据同步任务监控

操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击 图标,选择目标工作组,单击 资产加工。在左侧导航栏,单击 图标,将鼠标悬停在 离线数据同步 上,单击 图标。在 离线数据同步 页面,单击目标...

查看离线计算任务详情

线计算任务是由智能标签、表加工、质量评估、数据加工等业务产生的任务,运维监控支持查看离线计算任务详情,包括任务信息、任务代码、实例列表。本文介绍如何查看离线计算任务详情。操作步骤 登录 数据资源平台控制台。在页面左上角,...

查看离线计算实例详情

线计算实例是由智能标签、表加工、质量评估、数据加工等业务产生的任务实例,运维监控支持查看离线计算任务实例的详情,包括实例信息、任务代码、实例日志。本文介绍查看离线计算实例详情。操作步骤 登录 数据资源平台控制台。在页面左上...

用户价值

通过标准化、精细化、规格化的智能数据生产流程,完成流水线式的数据生产作业,提升数据资源生产效率、消除数据供应品质差异。数据服务更便捷:能够赋予数据以业务价值,让各级用户能够直观的理解数据,并以此为基础向应用输出多样、便捷的...

设置离线节点的调度信息

如果需要在开发环境场景上线后定时调度该场景中离线计算节点,则需要在开发环境场景上线前配置场景中离线节点的调度信息,调度配置在生产环境中生效。本文介绍如何设置开发环境场景中离线节点的调度信息。前提条件 开发环境场景画布流程中...

新建补数据计划

如果离线计算任务运行失败,可通过重新调度对应时间周期的任务,补充节点数据。任务中心支持在任务流、节点任务和离线计算任务中补数据。本文以在任务流和离线计算任务中补数据为例,介绍如何新建补数据计划。在任务流中新建补数据计划 ...

新建Spark Batch类型的公共节点

Spark Batch节点是离线节点,运行于Spark类型的云计算资源之上,可通过输入SQL语句处理Spark类型的数据源。本文介绍如何新建Spark Batch类型的公共节点。前提条件 已创建Spark On Yarn或者Spark Cluster类型的云计算资源,具体信息,请参见...

上架离线模型

已发布成功的离线模型上架后,才能发布到资产市场中。本文主要介绍如何上架离线模型。前提条件 已新建离线模型且模型已发布。操作步骤 登录 数据资源平台控制台。在页面左上角单击 图标,选择 探索。在顶部菜单栏,单击 图标,选择目标工作...

什么是数据资源平台

阿里云数据资源平台是数据资产定义、加工、管理、服务的全流程平台,提供数据同步、数据查询、数据标准、数据建模、数据加工、质量评估、业务模型构建、资产管理、数据服务等功能,为智能数据应用持续稳定供给全量、标准、干净、智能的数据...

使用限制

限制分类 限制项 最大值 系统设置 工作组数量 1000 云计算资源数量(所有工作组中)1000 数据同步 离线任务数量 1000 实时同步任务数量 500 数据建模 数据建模-模型数量 10000 数据标准-数据元数量 10000 数据标准-指标数量 10000 质量评估...

新增脚本同步任务

高级配置 单击 展开高级配置,配置任务的资源规格、超时自动终止、速率,详情请参考 新增离线数据同步任务。在画布页面,输入任务脚本,单击保存图标。说明 输入脚本时,可参考画布页面右侧的脚本规范。在画布上方工具栏,单击 图标,可...

读数据表

适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 是 使用说明 选择计算资源 选择需要读取的数据源,支持的数据源类型参见 适用场景。选择输入表 选择需要读取的数据表。配置输出 配置需要输出到...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
资源编排 资源管理 视频点播 NAT网关 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用