Dataphin执行脚本提示“not support sql count>=100 ...
问题描述 Dataphin执行脚本提示“not support sql count>=100 in one script”错误,日志情况如下：问题原因 Dataphin对一个SQL任务中的语句数量设计限制为100行（以分号为准）以下。解决方案 任务中的语句分为多个脚本进行处理。适用于 ...
ExecuteScript-执行SQL脚本
123 Script string 是 要执行的具体 SQL 脚本。包括 DQL、DDL 和 DML，其中 DDL 和 DML 是否允许依赖于实例的安全管控配置。select dt from report_daily Logic boolean 是 是否逻辑库。false Tid long 否 租户 ID。说明 取自系统右上角...
一键MaxCompute数据同步节点
当同步任务配置更新时，刷新SQL Script，即可生成新的SQL语句。使用SQL方式执行同步任务，详情请参见 使用SQL导入MaxCompute的数据至Hologres。任务调度配置。如果您需要周期性执行创建的节点任务，可以单击节点编辑页面右侧的 调度配置，...
开发及提交SQL脚本
在 New MaxCompute SQL Script 对话框，配置参数信息，单击 OK。Script Name：脚本名称。MaxCompute Project：目标MaxCompute项目。单击+即可新建一个MaxCompute项目连接，配置详情请参见 管理项目连接。在脚本编辑界面中编写SQL。SQL语法...
认识MaxCompute Studio
在 New MaxCompute SQL Script 对话框输入 Script Name，单击 OK。说明 创建MaxCompute SQL脚本时，Studio会提示您选择一个关联的MaxCompute项目，您也可以通过SQL编辑器上的工具条最右侧的 项目选取器 进行更改，编辑器会根据SQL脚本关联...
可视化管理内部表、外部表或视图
参数名称 说明 SQL DDL SCRIPT 如果您需要通过编写SQL脚本的方式创建表，手动在 SQL DDL SCRIPT 区域编写SQL脚本即可，无需配置其他参数。建表语法请参见 创建表。方式二：通过配置表参数的方式创建表。需要配置的参数信息如下。参数名称 ...
Streaming SQL作业配置
INSERT INTO${hdfsTableName} SELECT col1,col2 FROM${slsTableName} WHERE${condition} 说明 此类型的作业是通过 streaming-sql-f {sql_script} 提交的。sql_script 中保存着作业编辑器中填写的SQL语句。配置依赖库和失败策略。单击右上方...
Presto SQL作业配置
presto<options>-f {SQL_SCRIPT} 说明 其中 SQL_SCRIPT 中保存着作业编辑器中填写的SQL语句。单击 确定。编辑作业内容。在 作业内容 中，填写提交该作业需要提供的命令行参数。示例如下。SELECT*from table1;单击 保存，作业内容编辑完成。...
创建MaxCompute Script Module
MaxCompute支持脚本模式SQL（Script Mode SQL）。使用脚本模式时，一个多语句的SQL脚本文件将被作为一个整体进行编译、提交并生成一个执行计划，保证只需排队、执行一次，保障充分利用资源。使用MaxCompute Studio开发SQL程序时即使用了...
Dataphin同样的SQL脚本在开发环境执行正常，在生产...
问题描述 Dataphin同样的SQL脚本在开发环境执行正常，在生产环境执行报错"Sql AST Parser Exception:OsBizException:Not Support:sql count>=100 in one script。问题原因 开发环境中除了建表语句或者事务这种等特殊场景，其他SQL语句以...
开发ODPS Script任务
背景信息 MaxCompute当前的SQL引擎支持脚本模式SQL（Script Mode SQL），在脚本模式下编译脚本时，一个多语句的SQL脚本文件将被作为一个整体进行编译，无需对单个语句进行编译，适合用于改写需要层层嵌套子查询的单个语句，或因为脚本复杂...
开发ODPS Script任务
背景信息 MaxCompute当前的SQL引擎支持脚本模式SQL（Script Mode SQL），在脚本模式下编译脚本时，一个多语句的SQL脚本文件将被作为一个整体进行编译，无需对单个语句进行编译，适合用于改写需要层层嵌套子查询的单个语句，或因为脚本复杂...
配置代码模板
引擎类型 节点类型 默认模板 MaxCompute ODPS Script ODPS SQL ODPS MR PyODPS 2 PyODPS 3 EMR EMR MR EMR Shell EMR Presto EMR Spark Streaming EMR Trino EMR Hive EMR Spark EMR Spark SQL EMR Impala CDH CDH Hive CDH Spark CDH MR ...
SQL脚本模式
当您面对大数据集的ETL任务、自动化定期任务、复杂查询编排等场景时，可以使用MaxCompute当前SQL引擎支持的脚本模式（Script Mode SQL）。在脚本模式下，一个多语句的SQL脚本文件将被作为一个整体进行编译，无需对单个语句进行编译；提交...
内置的安全审计规则
数据库审计规则按照以下攻击场景进行分类：异常操作 应用账号风险操作 运维人员风险操作 数据库探测 数据泄露 拖库攻击 数据库外联 大流量返回 漏洞攻击 缓冲区溢出 存储过程滥用 拒绝服务漏洞 隐通道攻击 SQL注入 SQL注入尝试利用 疑似SQL...
配置MaxCompute Studio
选中 Show sql cost confirm dialog when script submitted，提交脚本时显示SQL成本确认对话框。选中 Pin sql execution result tab by default，默认情况下锁定SQL执行结果选项卡。Ignore local compile error when submit script（可选）...
赋值节点
注意事项 部分节点可通过节点上下文中的赋值参数，达到与赋值节点相同的目的（例如，EMR Hive、EMR Spark SQL、ODPS Script、Hologres SQL、AnalyticDB for PostgreSQL和MySql节点），赋值参数的使用与赋值节点一致，添加赋值参数的操作，...
FLINK
程序类型 支持 JAVA、SCALA、PYTHON、SQL 和 CUSTOM_SCRIPT 语言。说明 选择的类型不同，展示的参数也不同，具体以控制台为准。主函数的Class Flink程序的入口Main Class的全路径。主程序包 执行Flink程序的JAR包。通过 资源中心 上传，...
概述
在MaxCompute Studio上开发SQL脚本流程如下：创建MaxCompute Script Module。编写SQL脚本并提交至MaxCompute服务端。详情请参见 开发及提交SQL脚本。编辑器设置 MaxCompute Studio不仅提供语法高亮、智能提醒、错误提示，还支持如下功能：...
创建并管理MaxCompute节点
开发ODPS Spark任务 ODPS Script 开发MaxCompute的SQL脚本类的任务。开发ODPS Script任务 ODPS MR 开发MaxCompute的MapReduce任务。开发ODPS MR任务 开发MaxCompute任务：能力增强 除上述通用的MaxCompute任务开发能力外，DataWorks还为您...
Dataphin的sql代码任务中的SQL语句数有什么限制
Not Support:sql count>=100 in a script 问题原因 Dataphin对sql代码的语句数量有限制 解决方案 目前Dataphin的sql代码任务语句数量限制在100条以内（以分号分隔）。之所以在开发环境可以执行超过100条的sql代码，是因为在开发环境手动...
使用SSMS和BCP迁移SQL Server数据库
除了DTS，您也可以使用其他工具迁移数据库，本文以本地SQL Server数据库到阿里云云数据库SQL Server 2012的数据全量迁移为例，介绍了如何通过使用SQL Server Management Studio（SSMS）和大容量复制程序实用工具（BCP）来迁移SQL Server...
DDL脚本
在 DDL Script编辑器 页面中，对象过滤 用于过滤需要生成SQL语句的表，类型过滤 用于设置需要生成SQL脚本的表、字段、主外键和分区等选项。单击 产生脚本，即可生成DDL脚本。您可以在DDL脚本预览界面可以将生成的DDL导出为.sql文件，也可以...
引用SQL组件
SQL组件是一种带有多个输入参数和输出参数的SQL代码模板。使用SQL代码处理数据表时，通过过滤、连接和聚合数据源表，获取结果表。您可通过创建数据开发（DataStudio）的SQL组件节点使用组件，基于组件快速新建数据处理节点，提高开发效率。...
引用SQL组件
SQL组件是一种带有多个输入参数和输出参数的SQL代码模板。使用SQL代码处理数据表时，通过过滤、连接和聚合数据源表，获取结果表。您可通过创建数据开发（DataStudio）的SQL组件节点使用组件，基于组件快速新建数据处理节点，提高开发效率。...
SQL组件概述
组件是一种带有多个输入参数和输出参数的SQL代码过程模板，而SQL代码过程可通过引入一个或多个源数据表，并进行过滤、连接、聚合等操作，加工出业务所需的目标表，因此，您可通过组件快速加工出符合业务需求的目标表。本文为您介绍组件的...
SQL Review
功能介绍 SQL Review功能对选定区间与基准区间内的数据库实例进行workload分析，并且对数据库实例中运行的SQL进行深度分析，展示数据库实例的索引优化建议、SQL改写建议、TOP SQL、新增SQL、失败SQL、SQL特征分析、执行变化SQL、性能恶化...
polar_sql_mapping
当应用程序出现错误SQL，无法立即修改时，可以通过SQL映射功能，将错误的SQL映射为正确的SQL。SQL映射功能设置成功后，应用程序即使发送了错误的SQL，也会自动映射为正确的SQL。注意事项 SQL映射功能会将字符串匹配的SQL全部映射为指定的...
polar_sql_mapping
当应用程序出现错误SQL，无法立即修改时，可以通过SQL映射功能，将错误的SQL映射为正确的SQL。SQL映射功能设置成功后，应用程序即使发送了错误的SQL，也会自动映射为正确的SQL。注意事项 SQL映射功能会将字符串匹配的SQL全部映射为指定的...
polar_sql_mapping
当应用程序出现错误SQL，无法立即修改时，可以通过SQL映射功能，将错误的SQL映射为正确的SQL。SQL映射功能设置成功后，应用程序即使发送了错误的SQL，也会自动映射为正确的SQL。注意事项 SQL映射功能会将字符串匹配的SQL全部映射为指定的...
polar_sql_mapping
当应用程序出现错误SQL，无法立即修改时，可以通过SQL映射功能，将错误的SQL映射为正确的SQL。SQL映射功能设置成功后，应用程序即使发送了错误的SQL，也会自动映射为正确的SQL。注意事项 SQL映射功能会将字符串匹配的SQL全部映射为指定的...
SQL闪回
背景介绍 PolarDB-X 1.0 SQL闪回针对SQL误操作，提供行级数据的恢复能力。当您在 PolarDB-X 1.0 上执行误操作SQL（如INSERT、UPDATE或DELETE)后，使用SQL闪回，提供相关的误操作SQL信息，即可从BINLOG中找到匹配的事件，生成对应的恢复文件...
SQL闪回
回滚SQL与原始SQL 为了支持不同的业务场景，PolarDB-X SQL闪回提供生成回滚SQL与生成原始SQL两种恢复方式，您在生成恢复SQL文件前，需要根据使用场景，选择对应的恢复方式。下图给出了SQL闪回针对一条误操作，生成的回滚SQL与原始SQL示例。...
SQL 窗口规范
用户在 SQL 窗口中执行 SQL 语句时，ODC 会根据配置的 SQL 窗口规范检查 SQL 语句。本篇文档旨在介绍如何编辑和执行 SQL 窗口规范。原理介绍 执行流程 ODC 系统管理员按照 ODC 提供的配置模板启用 SQL 审核集成、设置访问外部 SQL 审核系统...
SQL窗口
本文为您介绍如何使用HoloWeb新建、编辑、删除、复制及重命名SQL查询。SQL窗口适用于做交互式的短查询，不适合用于大数据量的导入导出等离线作业场景，不支持执行超过60分钟的SQL。前提条件 存在已登录实例，请参见 登录实例。新建SQL查询 ...
TOP SQL
数据库自治服务DAS 为 RDS SQL Server 提供实时TOP SQL和历史TOP SQL查询功能，查看SQL语句级别的性能开销。前提条件 当前不支持 RDS SQL Server 2008 R2云盘版。操作步骤 登录 DAS控制台。在左侧导航栏中，单击 实例监控。找到目标实例，...
TOP SQL
自治服务提供实时TOP SQL 和历史TOP SQL 查询功能，挖掘出SQL语句级别的详细性能开销。前提条件 实例不能是RDS SQL Server 2008 R2云盘版。操作步骤 访问 RDS实例列表，在上方选择地域，然后单击目标实例ID。在左侧导航栏中，选择 自治服务...
SQL Pattern
背景信息 SQL Pattern是依托于全量且实时的SQL而产生的功能，通过对SQL进行分类诊断和分析，聚合相似SQL为一类SQL，有效提升智能诊断的效率。同时，SQL Pattern的聚合结果能作为数据库优化的有效依据。针对导致实例压力过大的Bad SQL，用户...
SQL洞察
SQL洞察是一种可视化的分析工具和技术，用于深入了解SQL查询的行为和性能特点，可以帮助数据库管理员和开发者了解SQL查询的具体执行情况，如查询的耗时、资源占用等详细信息。通过SQL洞察功能，可以实时监控SQL的运行状态，并基于这些数据...
SQL审计（数据库审计）
您可以通过RDS SQL Server的SQL审计功能查看SQL明细、定期审计SQL。开通SQL审计功能后，实例性能不会受到影响。注意事项 开启SQL审计功能之前的记录无法查看到。开通SQL审计功能后，实例性能不会受到影响。SQL审计的保存时间为30天。SQL...
- 产品推荐
- 这些文档可能帮助您