自定义资源组
执行 kill-9 命令，结束 ps 获得的进程的运行。删除/home/admin/alisatasknode 目录。在新的空目录下执行 install.sh 命令。说明 请确保下载的为相应区域的 install.sh 文件。重启ECS后，如何使Agent自行恢复服务？重启ECS后，您可以通过...
概述
传统实现方式是在系统代码里指定任务的执行顺序，当业务发生变化时需要修改代码才可以正常工作，可维护性很差。使用任务编排功能，可以轻松的完成任务之间的依赖调整，大大提高了可维护性，并可以直观地看到任务的执行情况。
SQL
如下图配置create_table节点、insert_data节点的运行顺序，即先创建表然后插入数据。查询类SQL任务 以Hive数据源为例，演示如何创建一个查询类的SQL任务。该示例查询了上述示例中创建的hive_table表中的数据。SQL任务节点设置中，数据源...
Notebook概述
项目切换：在目录切换下拉框中，您可切换Notebook的运行项目（包括分析平台计算源）。说明 所选运行项目的计算引擎的AccessKey需要有查询的表所在项目的访问权限，否则将会导致查询失败。若您的分析平台没有绑定默认计算源，您可为分析平台...
Notebook概述
项目切换：在目录切换下拉框中，您可切换Notebook的运行项目（包括分析平台计算源）。说明 所选运行项目的计算引擎的AccessKey需要有查询的表所在项目的访问权限，否则将会导致查询失败。若您的分析平台没有绑定默认计算源，您可为分析平台...
基本概念
控制类动作 控制执行的顺序或执行方式等，如审批动作 ACS:Approve。嵌套类动作 目前只支持 ACS:Template，该动作允许引用其他模板（子模板Child Template）作为任务，支持自定义可以复用的子模板。包含引用其他子模板的模板叫做父模板...
SQL查询概述
项目切换：在编辑器菜单中可以切换SQL查询的运行项目（包括分析平台计算源）。说明 所选运行项目的计算引擎的AccessKey需要有查询的表所在项目的访问权限，否则将会导致查询失败。若您的分析平台没有绑定默认计算源，您可为分析平台绑定...
SQL查询概述
项目切换：在编辑器菜单中可以切换SQL查询的运行项目（包括分析平台计算源）。说明 所选运行项目的计算引擎的AccessKey需要有查询的表所在项目的访问权限，否则将会导致查询失败。若您的分析平台没有绑定默认计算源，您可为分析平台绑定...
查看数据迁移项目的详情
启动数据迁移项目后，您可以在数据迁移项目的详情页面查看相应项目的基本信息、项目执行的进度和状态等信息。进入详情页面 您可以在数据迁移项目的详情页面，查看计划的迁移环节、各个环节的进度和状态，帮助您了解数据库迁移的整体进度，...
数据同步流程
配置数据同步项目，并在通过预检查后启动项目的运行。详情请参见相应类型的数据同步项目文档。查看数据同步项目的状态。数据同步项目启动后，会根据选择的同步类型依次执行，详情请参见 查看数据同步项目的详情。（可选）结束数据同步项目...
数据迁移流程
配置数据迁移项目，并在通过预检查后启动项目的运行。详情请参见相应类型的数据迁移项目文档。查看数据迁移项目的状态。数据迁移项目启动后，会根据选择的迁移类型依次执行，详情请参见 查看数据迁移项目的详情。（可选）结束并释放数据...
认识MaxCompute Studio
您也可以通过SQL编辑器上的工具条最右侧的 项目选取器 进行更改，编辑器会根据SQL脚本关联的项目对SQL语句自动进行元数据（比如表结构等）的检查并汇报错误，提交运行时也会发送到关联的项目执行。更多详情请参见 编写SQL脚本。SQL代码智能...
窗口函数
row_number()→bigint 为每行数据返回一个唯一的顺序的行号，从1开始，根据行在窗口分区内的顺序。值函数 first_value(x)→[与输入类型相同]返回窗口内的第一个值。last_value(x)→[与输入类型相同]返回窗口内的最后一个值。nth_value(x,...
API概览
DescribeProjectStepMetric 查询项目步骤的指标 本接口用于查询数据迁移或数据同步项目的运行步骤的指标。DescribeProjectProgress 查询项目的进度 本接口用于查询数据迁移或数据同步项目的进度信息。DescribeProjectComponents 查询项目的...
并行计划
因为每个工作者只执行完成计划的并行部分，所以不可能简单地产生一个普通查询计划并使用多个工作者运行它。每个工作者都会产生输出结果集的一个完全拷贝，因而查询并不会比普通查询运行得更快甚至还会产生不正确的结果。相反，计划的并行...
Hive
结尾，按照从上到下的顺序执行。支持注释功能。支持并发执行多个段落。支持参数功能。支持图表展示SQL结果。示例 多行SQL 如下图所示，在一个段落里执行2句SQL语句（以分号间隔），第一句切换执行引擎，第二句运行Select语句。注释 以-开头...
功能特性
用户使用工具（如 SDK，命令行工具等）向 BatchCompute 提交作业，BatchCompute 使用用户指定的镜像（如：ubuntu）启动虚拟机（VM）,在虚拟机中运行用户程序,运行完成后释放虚拟机（VM）。BatchCompute 中使用 OSS 作为持久化存储。您可以...
示例项目使用说明
本文介绍的项目都是完整的可编译可运行的项目，包括MapReduce、Pig、Hive和Spark。示例项目 示例名称如下所示，详情代码示例请参见 集群运行。MapReduce WordCount：单词统计 Hive sample.hive：表的简单查询 Pig sample.pig：Pig处理OSS...
创建和管理网络ACL
调整规则顺序 网络ACL按照规则生效顺序执行规则，生效顺序的值越小，优先级越高。您可以为规则排序来指定规则执行的先后顺序。登录 专有网络管理控制台。在左侧导航栏，选择 访问控制>网络ACL。在顶部菜单栏，选择网络ACL的地域。在 网络...
Dataphin中关于SQL语句where条件中...条件时的执行顺序
概述 本文为您介绍当MaxCompute作为Dataphin的计算引擎时，SQL语句where条件中存在多条件时的执行顺序。详细信息 下面两条SQL语句有时执行的结果是不同的，有时需按照逻辑判断where中的条件顺序，MaxCompute where中的and子句是按照顺序去...
项目模板同步配置
在规模化项目管理场景中经常会将交付流程规范下发所有项目执行。目前在云效 Projex 中，支持通过模板统一下发，保证所有项目都按照规范进行交付。企业管理人员：保证规范可统一下发，且后续变更会同步至所有基于模板创建的项目；规范在项目...
QUALIFY
功能简介 一个典型的查询语句的执行顺序如下：FROM WHERE GROUP BY和Aggregation Function HAVING WINDOW QUALIFY DISTINCT ORDER BY LIMIT 通常在一个查询语句中QUALIFY语法的执行顺序在 WINDOW 函数之后，用于对窗函数处理后的数据进行...
管理运维中心
在 项目空间 页面，单击待操作项目所在行的 运行记录。单击上方的 概览 页签。展示当前项目下的作业数量、作业类型分布图和最近24小时作业状态分布情况。管理作业运行记录 使用阿里云账号登录 Databricks数据洞察控制台。在Databricks数据...
QUALIFY
功能简介 在一个查询语句中QUALIFY语法的执行顺序在 WINDOW 函数之后，用于对窗口函数处理后的数据进行筛选。通常，SELECT语句的子句按如下所示的顺序执行：FROM WHERE GROUP BY HAVING WINDOW QUALIFY DISTINCT ORDER BY LIMIT 注意事项 ...
老版项目协作升级细化说明
1.企业设置 项目角色及权限 角色 老版角色 新版角色 说明 企业拥有者 项目管理员 Projex应用级别的项目管理员 企业管理员 项目管理员 Projex应用级别的项目管理员 企业成员 项目成员 Projex应用级别的项目成员 企业自定义角色 项目自定义...
管道
访问规则<图片URL>@|<action2>URL通过@符号后面的处理参数（action1,action2）来实现即时云处理，如果有多任务（比如先做缩略，再加上水印）可以用管道来实现，执行顺序按管道指定顺序执行，目前最多支持四级管道。管道的分隔符是竖线（|）...
管道
如果有多任务，执行顺序按管道指定顺序执行，管道的分隔符是竖线（|）。以下规则表示先对文件做 action1 处理，然后再做 action2 处理，最后输出结果。同步处理管道访问规则：<文件URL>?x-oss-process=|。异步处理仅支持POST访问，管道访问...
任务视图
三、时间视图 可以形象地呈现项目的任务顺序与持续时间，显示每个活动的历时长短，并支持自由调度，你可以理解它为属于云效的任务版甘特图。切换任务展示方式为「时间视图」后，可以让所有团队成员直观地看到任务的进展情况，资源的利用率...
网络洞察仪
您可以将网络洞察仪作为业务单元的网络监测件，通过配置业务相关资源，网络洞察仪将为您分析业务单元流量的实时运行状况，帮助您及时感知业务网络异常，并提供网络质量评估和事件影响面分析。基本概念 术语 说明 网络洞察仪 由用户自定义的...
其他问题
任务执行是按照业务连线的先后顺序执行，即当前一节点运行结束，后一节点才能运行，所以当前一节点运行时间过长，运行结束时间大于后一节点计划执行时间点，这样后一节点就会出现实际运行时间可能和计划的时间不一致。当两个节点的调度周期...
StopProjectsByLabel-暂停指定标签下所有运行中的项目
本接口用于暂停指定标签下，所有处于运行中状态的数据迁移或数据同步项目。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权...
创建并配置数字人项目
当您完成虚拟数字人服务开通后，您需要进入虚拟数字人开放平台创建虚拟数字人项目，并且完成项目相关配置，然后您可以在控制台体验虚拟数字人，以及开始接入虚拟数字人项目。前提条件 请您完成虚拟数字人 开通服务。操作步骤 创建数字人...
批量操作数据迁移项目
批量跳过全量校验 数据传输支持处于已进入全量校验阶段，但全量校验还未执行成功的 运行中、已暂停、失败 状态的数据迁移项目进行 批量跳过全量校验 操作。在 迁移项目列表 页面，选择需要批量跳过全量校验的数据迁移项目。单击页面下方的 ...
查看异常统计
系统默认选中项目视角，为您展示具体某个项目下的运行概况，您可以选择查看不同项目的统计信息。如果您需要查看租户粒度下的全局异常数据统计概况，则单击 图标进行切换查看。实时实例页面展示当前时间的异常统计信息排行。离线实例页面...
查看异常统计
系统默认选中项目视角，为您展示具体某个项目下的运行概况，您可以选择查看不同项目的统计信息。如果您需要查看租户粒度下的全局异常数据统计概况，则单击 图标进行切换查看。实时实例页面展示当前时间的异常统计信息排行。离线实例页面...
迁移上云操作
在 迁移上云 配置向导的 网络信息配置 页面中填写源自建RocketMQ集群的网络信息，然后单击 配置网络信息。具体参数说明，请参见 源集群网络配置参数。等待后台配置，直到页面显示配置完成，然后单击 下一步。参数配置说明 表 1.源集群网络...
开发MapReduce
通过本地运行调试MapReduce 通过本地运行方式测试，查看MapReduce的运行结果是否符合预期。右键单击编写完成的Java脚本，选择 Run。在 Run/Debug Configurations 页面上选择此次运行的MaxCompute项目名称。单击 OK，开始运行。说明 本地...
对于外部项目的用户以及权限操作
切换为运行作业的项目。use;阿里云账号 格式为 ALIYUN$，您可以通过 MaxCompute客户端（odpscmd）执行 list users;命令查看用户信息。赋予执行作业的权限。grant CreateInstance on project<main_project_name>to user<阿里云账号>;阿里云...
在EMR集群运行TPC-DS Benchmark
阿里云E-MapReduce多次刷新TPC-DS官方最好成绩，并且是第一个通过认证的可运行TPC-DS 100 TB的大数据系统。本文介绍如何在EMR集群完整运行TPC-DS的99个SQL，并得到最佳的性能体验。背景信息 TPC-DS是全球最知名的数据管理系统评测基准标准...
计算资源使用
若作业特征匹配Quota规则，作业禁止调度到该Quota运行，会优先调度到所属项目的默认计算Quota运行，如果当前项目的默认计算Quota也是该Quota，那么会调度到当前Region下最早创建的Quota运行（包括按量计费Quota）。重要 排他模式规则和禁止...
- 产品推荐
- 这些文档可能帮助您