“ERROR CommonRdbmsReader$Task-error occurred when...
问题描述 在Dataphin的 从SQL Server往MaxCompute管道集成任务，设置的两边表结构完全相同，也没有什么筛选条件，但是报错：ERROR CommonRdbmsReader$Task-error occurred when reading.com.microsoft.sqlserver.jdbc.SQLServerException: ...
Java SDK常见问题
使用SQLTask执行SQL查询时，如果查询结果条数大于限制的10000条，该如何获取所有数据？SQLTask中，按照如下方法返回结果集的数据量是否有限制？如果有限制，最大返回结果集大小是多少？SQLTask查询数据和DownloadSession在使用及功能上，有...
与标准SQL的主要区别及解决方法
解决方案请参见 使用SQLTask执行SQL查询时，如果查询结果条数大于限制的10000条，该如何获取所有数据？MAPJOIN JOIN不支持笛卡尔积。JOIN必须要用ON关键字设置关联条件。如果有一些小表要作为广播表，需要使用MAPJOIN HINT。ORDER BY ORDER...
使用Logview 2.0查看作业运行信息
例如，简单的MapReduce通常会产生两个Fuxi Task，一个是Map一个是Reduce，两个Fuxi Task的名称分别为M1和R2，当SQL比较复杂时，可能会产生多个Fuxi Task。您可以在执行界面上看到每个Fuxi Task的名称。例如M1，表示一个Map Task；R4_3_9的3...
大量数据导出方案
概述 您可以通过以下方法导出SQL的运行结果：如果数据比较少，请使用 SQL Task 得到全部的查询结果。如果需要导出某个表或者分区，请使用 Tunnel 直接导出查询结果。如果SQL比较复杂，请使用Tunnel和SQL相互配合导出查询结果。DataWorks ...
Dataphin即席查询执行删除表字段的SQL任务报错：...
问题描述 Dataphin即席查询执行删除表字段的SQL任务报错：“Process:com.aliyun.odps.OdpsException: Catalog Service Failed,ErrorCode:152,Error Message:ODPS-0110061:Failed to run ddltask-Schema evolution DDLs is not enabled in ...
Java SDK介绍
SQLTask SQLTask是用于运行、处理SQL任务的接口。您可以通过运行接口直接运行SQL。运行接口返回Instance实例，通过Instance获取SQL的运行状态及运行结果。代码示例如下。import java.util.List;import com.aliyun.odps.Instance;import ...
获取任务执行进度示例
一个MaxCompute Task可以由一个或多个Fuxi Job组成，如果SQL比较复杂，MaxCompute将自动向Fuxi提交多个Fuxi Job。一个Fuxi Job由任意多个Stage构成。Stage由任意多个Worker构成。Stage内的Worker有相同的数据处理逻辑。示例 打印Stage执行...
在SQL语句中设置Flag示例
本文为您介绍如何使用MaxCompute Java SDK设置SQL的Flag。背景信息 使用DataWorks或MaxCompute客户端提交SQL时，通常需要设置SQL的Flag。...Instance i=SQLTask.run(odps,odps.getDefaultProject(),sql,hints,null);i.waitForSuccess();
作业优先级
task.setName("adhoc_sql_task_1");task.setQuery("select count(*)from aa;5为作业优先级。Instance instance=odps.instances().create(task,5);LogView logView=new LogView(odps);打印Logview，用于查看Instance执行状态，非必须。...
Dataphin创建外部表报错："You are not authorized to...
95)at com.aliyun.odps.sqltask.task.DDLTask.handleInternal(DDLTask.java:49)at com.aliyun.odps.sqltask.task.SqlTaskBase.handle(SqlTaskBase.java:68)at com.aliyun.odps.sqltask.SqlTaskDriver.execute(SqlTaskDriver.java:134)at ...
PRESTO指标
SQLTaskManager InputPositions presto_SQLTaskManager_InputPositions_OneMinute_Count 每分钟SQLTask输入数据行数。SQLTaskManager OutputDataSize presto_SQLTaskManager_OutputDataSize_OneMinute_Count 每分钟SQLTask输出数据量。...
SQL脚本模式
当您面对大数据集的ETL任务、自动化定期任务、复杂查询编排等场景时，可以使用MaxCompute当前SQL引擎支持的脚本模式（Script Mode SQL）。在脚本模式下，一个多语句的SQL脚本文件将被作为一个整体进行编译，无需对单个语句进行编译；提交...
简单下载示例
通过使用 SQLTask.getResultSet()静态方法实现数据下载 Odps odps=OdpsUtils.newDefaultOdps();初始化Odps对象。Instance i=SQLTask.run(odps,"select*from wc_in;i.waitForSuccess();根据instance对象，获取结果迭代器。ResultSet rs=...
SQL Review
功能介绍 SQL Review功能对选定区间与基准区间内的数据库实例进行workload分析，并且对数据库实例中运行的SQL进行深度分析，展示数据库实例的索引优化建议、SQL改写建议、TOP SQL、新增SQL、失败SQL、SQL特征分析、执行变化SQL、性能恶化...
内置的安全审计规则
数据库审计规则按照以下攻击场景进行分类：异常操作 应用账号风险操作 运维人员风险操作 数据库探测 数据泄露 拖库攻击 数据库外联 大流量返回 漏洞攻击 缓冲区溢出 存储过程滥用 拒绝服务漏洞 隐通道攻击 SQL注入 SQL注入尝试利用 疑似SQL...
polar_sql_mapping
SQL映射功能设置成功后，应用程序即使发送了错误的SQL，也会自动映射为正确的SQL。注意事项 SQL映射功能会将字符串匹配的SQL全部映射为指定的SQL，请谨慎使用。前提条件 确保所在数据库已创建 polar_sql_mapping 插件,新创建的数据库默认已...
polar_sql_mapping
SQL映射功能设置成功后，应用程序即使发送了错误的SQL，也会自动映射为正确的SQL。注意事项 SQL映射功能会将字符串匹配的SQL全部映射为指定的SQL，请谨慎使用。前提条件 确保所在数据库已创建 polar_sql_mapping 插件,新创建的数据库默认已...
polar_sql_mapping
SQL映射功能设置成功后，应用程序即使发送了错误的SQL，也会自动映射为正确的SQL。注意事项 SQL映射功能会将字符串匹配的SQL全部映射为指定的SQL，请谨慎使用。前提条件 确保所在数据库已创建 polar_sql_mapping 插件,新创建的数据库默认已...
polar_sql_mapping
SQL映射功能设置成功后，应用程序即使发送了错误的SQL，也会自动映射为正确的SQL。注意事项 SQL映射功能会将字符串匹配的SQL全部映射为指定的SQL，请谨慎使用。前提条件 确保所在数据库已创建 polar_sql_mapping 插件,新创建的数据库默认已...
SQL闪回
背景介绍 PolarDB-X 1.0 SQL闪回针对SQL误操作，提供行级数据的恢复能力。当您在 PolarDB-X 1.0 上执行误操作SQL（如INSERT、UPDATE或DELETE)后，使用SQL闪回，提供相关的误操作SQL信息，即可从BINLOG中找到匹配的事件，生成对应的恢复文件...
SQL闪回
SQL闪回任务完成后，会显示该任务的相关信息。您可以单击下载按钮下载对应的恢复文件，进行数据恢复。恢复文件默认保存7天，请尽快下载。定位误操作SQL 在控制台上选择 诊断与优化>SQL审计与分析。说明 如果您未开启SQL审计，请参见 开启...
SQL 窗口规范
用户在 SQL 窗口中执行 SQL 语句时，ODC 会根据配置的 SQL 窗口规范检查 SQL 语句。本篇文档旨在介绍如何编辑和执行 SQL 窗口规范。原理介绍 执行流程 ODC 系统管理员按照 ODC 提供的配置模板启用 SQL 审核集成、设置访问外部 SQL 审核系统...
SQL窗口
本文为您介绍如何使用HoloWeb新建、编辑、删除、复制及重命名SQL查询。SQL窗口适用于做交互式的短查询，不适合用于大数据量的导入导出等离线作业场景，不支持执行超过60分钟的SQL。前提条件 存在已登录实例，请参见 登录实例。新建SQL查询 ...
TOP SQL
数据库自治服务DAS 为 RDS SQL Server 提供实时TOP SQL和历史TOP SQL查询功能，查看SQL语句级别的性能开销。前提条件 当前不支持 RDS SQL Server 2008 R2云盘版。操作步骤 登录 DAS控制台。在左侧导航栏中，单击 实例监控。找到目标实例，...
TOP SQL
自治服务提供实时TOP SQL 和历史TOP SQL 查询功能，挖掘出SQL语句级别的详细性能开销。前提条件 实例不能是RDS SQL Server 2008 R2云盘版。操作步骤 访问 RDS实例列表，在上方选择地域，然后单击目标实例ID。在左侧导航栏中，选择 自治服务...
SQL Pattern
背景信息 SQL Pattern是依托于全量且实时的SQL而产生的功能，通过对SQL进行分类诊断和分析，聚合相似SQL为一类SQL，有效提升智能诊断的效率。同时，SQL Pattern的聚合结果能作为数据库优化的有效依据。针对导致实例压力过大的Bad SQL，用户...
SQL洞察
SQL洞察是一种可视化的分析工具和技术，用于深入了解SQL查询的行为和性能特点，可以帮助数据库管理员和开发者了解SQL查询的具体执行情况，如查询的耗时、资源占用等详细信息。通过SQL洞察功能，可以实时监控SQL的运行状态，并基于这些数据...
SQL审计（数据库审计）
您可以通过RDS SQL Server的SQL审计功能查看SQL明细、定期审计SQL。开通SQL审计功能后，实例性能不会受到影响。注意事项 开启SQL审计功能之前的记录无法查看到。开通SQL审计功能后，实例性能不会受到影响。SQL审计的保存时间为30天。SQL...
慢 SQL 监控
数据访问代理中，慢 SQL 监控 是通过 阿里云日志服务 SLS 收集数据访问代理实例的 SQL 执行日志，将日志存储到用户空间中，在收集到 SQL 数据后，以图表的方式展示出收集到的 SQL 详情。其中，慢 SQL 是指执行耗时大于等于 500ms 的 SQL。...
SQL模板
功能概述 当机器人无法正确地将用户自然语言转化为SQL语句，可通过新建SQL模板来手动编写有关用户问句对应的SQL语句，进行自然语言到SQL语句的人工干预，优化问答效果。功能入口 进入智能对话机器人空间产品界面后，选择 表格管理>SQL模板...
SQL洞察和审计
数据库自治服务DAS为RDS SQL Server提供SQL洞察和审计功能，在全量请求和安全审计的基础上，融合了搜索、SQL洞察等功能，帮助您更好地获取SQL语句的具体信息、性能问题排查等。支持的数据库和地域 数据库 地域 RDS SQL Server高可用系列、...
SQL洞察
SQL洞察功能可对SQL进行健康情况诊断和性能问题排查。本文介绍了SQL洞察的操作步骤。前提条件 实例已开启DAS专业版，详情请参见 DAS专业版。背景信息 开启SQL洞察功能可以记录所有DQL、DML和DDL操作信息，这些信息通过数据库内核输出，对...
SQL审核
数据管理DMS 的SQL审核功能，支持对上传的SQL语句进行审核并提供优化建议，避免无索引或不规范的SQL语句，降低SQL注入风险。前提条件 数据库类型如下：RDS MySQL、PolarDB MySQL版、AnalyticDB MySQL版、其他来源MySQL。RDS MariaDB。...
查看 SQL 详情
SQL 执行耗时：您可通过下拉选择 总数据库耗时、数据库耗时、响应时间 等选项进行查看。同时可以通过 SQL ID 进行筛选查看指定 SQL 的信息。总执行次数：单击 总执行次数 后的下拉列表，选择您想要查看的数据。同时可以通过 SQL ID 进行...
查看 SQL 详情
SQL 执行耗时：您可通过下拉选择 总数据库耗时、数据库耗时、响应时间 等选项进行查看。同时可以通过 SQL ID 进行筛选查看指定 SQL 的信息。总执行次数：单击 总执行次数 后的下拉箭头，选择您想要查看的数据。同时可以通过 SQL ID 进行...
SQL开发
使用方法 进入 OpenSearch控制台，在左上角切换到 OpenSearch-召回引擎版，在实例管理页面对应的列表中找到所属实例，点击操作栏中的 管理：在 功能扩展>SQL开发 进行SQL开发：在 召回引擎版-SQL开发 页签下有3个列表分组，分别是 SQL实例...
使用说明
其他操作 如果不再需要跟踪通过 dbms_sql.add_trace 存储过程添加的SQL语句，您可以通过 dbms_sql.delete_trace 存储过程根据具体的SQL语句来删除模板化的SQL语句，或通过 dbms_sql.delete_trace_by_sqlid 存储过程根据SQL ID来删除模板化...
SQL审计（数据库审计）
新增了 全量SQL分析、SQL洞察-对比查看 和 SQL洞察-来源分析 等功能，您可以在打开 SQL审计 页面时跳出的对话框中查看两者的功能对比以及计费差异，并根据自身需求开通对应的功能：开启SQL洞察和审计 开启SQL洞察和审计后，原SQL审计功能将...
SQL 诊断概述
诊断页面的 SQL 页签为您提供 TopSQL、SlowSQL、可疑 SQL的分析诊断功能。SQL 诊断 在诊断页面 SQL 页签下可分别查看 TopSQL、SlowSQL 和可疑 SQL 的基本信息。SQL 诊断类型的概念如下：TopSQL：在选定的时间范围内，整体响应时间最长的 ...
- 产品推荐
- 这些文档可能帮助您