开发及提交SQL脚本
包括编写和运行SQL脚本。前提条件 已连接MaxCompute项目，详情请参见 管理项目连接。已创建MaxCompute Script Module，详情请参见 创建MaxCompute Script Module。创建SQL脚本文件 在 Project 区域下，右键单击 scripts，选择 New>...
认识MaxCompute Studio
您也可以通过SQL编辑器上的工具条最右侧的 项目选取器 进行更改，编辑器会根据SQL脚本关联的项目对SQL语句自动进行元数据（比如表结构等）的检查并汇报错误，提交运行时也会发送到关联的项目执行。更多详情请参见 编写SQL脚本。SQL代码智能...
ExecuteScript-执行SQL脚本
调用ExecuteScript执行SQL脚本。接口说明 目前仅支持开启安全托管的实例调用该 API。开启安全托管操作，请参见 安全托管。目前不支持 NoSQL 类型的数据库调用此 API。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰...
获取结构同步的执行SQL脚本
调用GetStructSyncExecSqlDetail获取结构同步的执行SQL脚本。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以...
HIVECLI
HIVECLI任务类型用于执行SQL脚本语句或者SQL任务文件。本文为您介绍创建HIVECLI类型任务时涉及的参数，并提供了HIVECLI任务的示例。参数说明 参数 说明 节点名称 任务的名称。一个工作流定义中的节点名称是唯一的。运行标志 正常（默认）：...
API概览
GetStructSyncExecSqlDetail 获取结构同步的执行SQL脚本 调用GetStructSyncExecSqlDetail获取结构同步的执行SQL脚本。SubmitStructSyncOrderApproval 提交结构同步工单至审批流程 调用SubmitStructSyncOrderApproval提交结构同步工单至审批...
基本概念
当脚本文件中的逻辑超出了安全配置的限制，引擎将拒绝执行 SQL 脚本文件，任务将会执行失败。表结构 表结构定义了数据表中指定的数据字段，以及每组数据字段的数据类型和字段描述。表结构模板 表结构模板是多个数据表共同遵循的表结构。...
数据管理的审计事件
ExecuteScript 执行SQL脚本。ExecuteStructSync 执行结构同步。GetApprovalDetail 获取工单审批详情。GetDatabase 获取具体库详情信息。GetDataCorrectBackupFiles 获取备份文件下载地址。GetDataCorrectOrderDetail 获取数据变更工单详情...
ListDBTaskSQLJobDetail-获取SQL任务的详情信息
1988*Logic boolean 是否为逻辑库，返回值如下：true：逻辑库 false：物理库 false Skip boolean 是否存在跳过执行 SQL 脚本的情况，返回值如下：true：存在 false：不存在 false SqlType string SQL 类型，例如，DELETE、UPDATE、ALTER_...
在远程服务器执行本地 Shell 脚本
若您想在远程服务器执行本地 Shell 脚本，使用传统方法需要先上传脚本，再登录远程服务器执行脚本，步骤繁多。使用 PelicanDT，可以通过一行 Java 代码实现此操作。前提条件 已安装 PelicanDT SDK。请参见 安装 PelicanDT SDK。已在 Linux ...
创建压测场景
Rollback：适用于JDBC回滚与撤销SQL脚本执行的情况。AutoCommit(false)：适用于JDBC自动提交模式为假的情况。说明 使用占位参数时，选择对应查询的Prepared类型。查询超时时间 施压端等待被压测端响应的时间限制，单位为秒。例如 5。占位...
使用Logview 2.0查看作业运行信息
SQL Script 该页签下显示当前Task的SQL运行脚本。History 该页签下显示了当前Task的运行历史记录。SubStatusHistory 在该页签下显示了当前SubTask的运行状态，具体含义如下。状态 说明 Waiting for scheduling 作业已提交，等待MaxCompute...
空库初始化
忽略：在执行过程中，遇到错误会跳过当前失败SQL脚本，继续往下执行，并执行完所有SQL脚本。单击 提交申请。系统将进行结构分析。说明 若数据结构在此过程中发生变更，请在工单中单击 重新分析。单击 提交审批，等待审批通过。单击 提交，...
SQL脚本
SQL脚本是自定义SQL组件，您可以通过SQL脚本编辑器编写SQL语句，并提交至MaxCompute执行。本文为您介绍SQL脚本的组件配置和使用场景。组件配置 Designer 仅支持通过可视化方式，配置SQL脚本组件的参数，组件参数配置如下所示。参数 描述 ...
配置Microsoft SQL Server输出组件
解析方案 包括 填写准备语句 和 填写完成语句：填写准备语句：导入前执行的SQL脚本。填写完成语句：导入后执行的SQL脚本。输入字段 根据上游的输入，为您展示输入字段。输出字段 为您展示输出字段。同时您可以管理字段，单击 字段管理：...
配置Microsoft SQL Server输出组件
解析方案 包括 填写准备语句 和 填写完成语句：填写准备语句：导入前执行的SQL脚本。填写完成语句：导入后执行的SQL脚本。输入字段 根据上游的输入，为您展示输入字段。输出字段 为您展示输出字段。同时您可以管理字段，单击 字段管理：...
结构同步
忽略：在执行过程中，即使遇到错误仍会跳过当前失败SQL脚本，继续往下执行，直至所有SQL脚本都执行完成。警告 忽略报错可能会导致跳过执行部分DDL语句，同步结果不符合预期，请谨慎选择。单击 提交申请。系统自动进行表结构分析。说明 若...
配置PostgreSQL输出组件
解析方案 包括 填写准备语句 和 填写完成语句：填写准备语句：导入前执行的SQL脚本。填写完成语句：导入后执行的SQL脚本。输入字段 根据上游的输入，为您展示输入字段。输出字段 为您展示输出字段。单击 字段管理：单击 图标，将 已选的...
SQL开发
支持SQL脚本的 重命名、复制、删除 功能 支持SQL脚本的 保存、运行、重新加载、格式化 以及 设置参数（相关参考：kvpair子句）功能 在新建好的SQL脚本内，可以进行SQL的编写、查询、测试；表明细信息：展示当前集群中的索引表名 Function：...
SQL开发
支持SQL脚本的 重命名、复制、删除 功能 支持SQL脚本的 保存、运行、重新加载、格式化 以及 设置参数（相关参考：kvpair子句）功能 在新建好的SQL脚本内，可以进行SQL的编写、查询、测试；表明细信息：展示当前集群中的索引表名 Function：...
表一致性修复
忽略：在执行过程中，即使遇到错误仍会跳过当前失败SQL脚本，继续往下执行，直至所有SQL脚本都执行完成。业务背景（备注）描述项目的业务背景信息，例如变更目的、预期目标等。单击 提交申请。系统自动进行表结构分析。单击 提交审批。待...
配置PostgreSQL输出组件
解析方案 包括 填写准备语句 和 填写完成语句：填写准备语句：导入前执行的SQL脚本。填写完成语句：导入后执行的SQL脚本。输入字段 根据上游的输入，为您展示输入字段。输出字段 为您展示输出字段。单击 字段管理：单击 图标，将 已选的...
Dataphin中SQL脚本任务在元数据库存放位置
概述 Dataphin中SQL脚本任务在元数据库存放位置。详细信息 SQL脚本存放在dataphin.od_node中。适用于 Dataphin
SQL Editor
③ 单击 运行，运行整个SQL脚本或批处理，即执行SQL编辑器窗口中从头至尾的所有SQL语句。选择SQL代码中的某一段，单击左侧的 图标，运行部分SQL查询。说明 选中代码行，才会显示该图标。④ 单击 保存，保存所有语句。⑤ 单击 格式化，会...
Dataphin如何使用MAX_COMPUTE_SQL脚本
概述 本文主要讲述了创建MAX_COMPUTE_SQL脚本的操作。详细信息 创建MAX_COMPUTE_SQL脚本，需要你在开发环境点数据处理，然后点计算任务的加号，选择MAX_COMPUTE_SQL。然后自定义名称，选择目录，单击确定创建脚本。然后在脚本中编写SQL语句...
SQL脚本模式
提交运行时，SQL脚本文件会被整体提交，并生成一个执行计划，保证只需排队一次、执行一次，让您能充分利用MaxCompute的资源，在提升工作效率的同时增强数据处理和分析工作流的灵活性与安全性。说明 脚本模式SQL无法使用 计量预估 完成费用...
Dataphin在SQL脚本中使用正则表达式判断字符是不是...
概述 本文主要描述了Dataphin在SQL脚本使用正则表达式判断字符是不是整数的方法。详细信息 可以在SQL脚本中使用正则表达式判断。SELECT '123' REGEXP '^([0-9]{1,})$';适用于 Dataphin v3.6.3
时间窗口SQL脚本
SQL脚本 如果打开了多日期循环执行，切记在需要循环的日期字段处，引用系统变量${pai.system.cycledate}。例如：select*from${t1} where dt=${pai.system.cycledate}，则在实际执行时，按照当前示例中的配置会并行启动3个任务：select*from...
影子表同步
忽略：在执行过程中，遇到错误会跳过当前失败SQL脚本，继续往下执行，并执行完所有SQL脚本。单击 提交申请。系统将进行结构分析。说明 若数据结构在此过程中发生变更，请在工单中单击 重新分析。单击 提交审批，等待审批通过。单击 提交，...
Dataphin在SQL脚本使用正则表达式判断字符是不是小数
概述 本文主要描述了Dataphin在SQL脚本使用正则表达式判断字符是不是小数的方法。详细信息 可以在SQL脚本中使用正则表达式判断。SELECT '123.6' REGEXP '^([0-9]{1,}[.][0-9]*)$';适用于 Dataphin v3.6.3
配置MySQL输出组件
数据导入前对数据库执行的SQL脚本。比如为了满足服务的持续可用性，当前步骤写数据执行前先创建目标表Target_A，执行写入到目标表Target_A，当前步骤写数据执行完成后，对数据库中持续提供服务的表Service_B重命名成Temp_C，然后将表Target...
配置MySQL输出组件
数据导入前对数据库执行的SQL脚本。比如为了满足服务的持续可用性，当前步骤写数据执行前先创建目标表Target_A，执行写入到目标表Target_A，当前步骤写数据执行完成后，对数据库中持续提供服务的表Service_B重命名成Temp_C，然后将表Target...
2021-03-16版本
注意事项 SQL编辑器中SQL脚本名称和作业名称变更 原VVP平台没有做开发和运维分离，即SQL脚本和上线作业间不存在关联关系，因此SQL脚本和上线作业的命名方式未做一致性要求。新版VVP支持开发和运维分离：SQL脚本名和线上作业名一一对应，原...
Dataphin在SQL脚本使用正则表达式判断字符是不是整数...
概述 本文主要描述了Dataphin在SQL脚本使用正则表达式判断字符是不是整数或小数的方法。详细信息 可以在SQL脚本中使用正则表达式判断。SELECT '100' REGEXP '^[0-9]{1,}+(\.[0-9]{1,})?';适用于 Dataphin v3.6.3
影子表同步
忽略错误继续执行：在执行过程中，跳过当前出错的 SQL 脚本继续执行，并执行完所有 SQL 脚本。描述 描述项目的业务背景信息，例如变更目的、预期目标等。指定上述信息后，单击面板右下角的 提交 按钮完成创建影子表同步任务。任务生成后会...
云数据库SQL Server版如何查看当前运行的SQL语句
执行以下SQL脚本，查看当前运行的SQL语句。SELECT[Spid]=session_id,[Database]=DB_NAME(sp.dbid),[User]=nt_username,[Status]=er.status,[Wait]=wait_type,[Individual Query]=SUBSTRING(qt.text,er.statement_start_offset/2,(CASE WHEN...
UDF（嵌入式）
本文为您介绍如何通过代码嵌入式UDF（Embedded UDF）将Java或Python代码嵌入SQL脚本。背景信息 您可以通过MaxCompute的代码嵌入式UDF解决以下代码实现过程繁琐，且不方便阅读和维护的问题：创建UDF并完成代码开发后，您还需要完成代码编译...
从CSV文件、TXT文件或SQL脚本导入数据到RDS
数据管理DMS提供数据导入功能，支持大批量数据快速导入至数据库，节省人力物力成本。您可以将CSV文件、TXT文件或SQL脚本的数据导入到RDS实例中。详情请参见 数据导入。
自定义SQL
说明 表名标识符使用${}方式在sql中使用，例如 Select date-日期,sales-销量 From${table} Where sales>=60 SQL脚本设置 编写具体的SQL脚本，示例如下：说明 脚本仅支持select语句，select语句的查询结果将自动写入一张临时表。请勿使用...
创建CDH Impala节点
在DataWorks中，CDH Impala节点可以编写并执行Impala SQL脚本。与CDH Hive相比，CDH Impala节点为您提供了更快速的查询性能。本文为您介绍如何创建与使用CDH Impala节点。使用限制 不支持 公共调度资源组 运行该类型任务。步骤一：创建CDH ...
- 产品推荐
- 这些文档可能帮助您