其它操作
本文为您介绍使用MaxCompute SQL开发过程中会使用的其它常用命令。计量预估 基于一条SQL作业的输入数据量大小、UDF个数以及SQL复杂等级估算作业执行费用。需要注意的是，如果UDF涉及分区裁剪，由于无法确定最终会扫描多少个分区，该场景下...
概述
PolarDB MySQL版 内置了一系列存储过程，您可以使用这些存储过程获取SQL语句中未被索引覆盖的列名，同时可以获取创建列存索引的DDL语句。本文介绍了 PolarDB MySQL版 内置的存储过程以及如何使用存储过程辅助创建列存索引。简介 PolarDB ...
PL 编译和调试
PL 调试 在 SQL 开发窗口的左侧导航栏>存储过程列表中，选择调试存储过程 PROC_VARCHAR2，进入调试模式。设置参数值后，单击 确定。重要 OceanBase V4.0.0 及之后的版本，调试前需要获取调试权限。示例：GRANT DEBUG CONNECT SESSION TO ...
dbms_sql.delete_trace_by_sqlid
您可以使用 dbms_sql.delete_trace 存储过程根据具体的SQL语句来删除不需要SQL Trace跟踪的模板化SQL语句。也可以使用 dbms_sql.delete_trace_by_sqlid 存储过程根据SQL ID来删除不需要SQL Trace跟踪的模板化SQL语句。语法 dbms_sql.delete...
检查SQL语句中的表是否已创建列索引
存储过程 dbms_imci.check_columnar_index()可以解析输入的SQL语句，并得到SQL语句中使用的所有列，并检查这些列是否被列索引覆盖。如果SQL语句中使用了未被列索引覆盖的列，调用该存储过程后会返回这些列所在的库名、表名以及列名。如果...
存储过程
存储过程的特性 AnalyticDB PostgreSQL 7.0版 的内核版本升级至PostgreSQL 12，可以较好地支持存储过程能力。通过合理地使用存储过程，您可以在业务开发中可以获得以下收益：存储过程整合了一些列SQL，并分隔不同业务的SQL。这种特性使得...
新建存储过程
概述 存储过程是一条或多条语句的集合，对数据库进行一系列复杂操作时，存储过程可以在数据库内将这类复杂操作封装成一个代码块，以便重复使用，从而减少数据库开发人员的工作量。存储过程旨在完成特定功能的 SQL 语句集，经编译创建并保存...
通过MyBatis使用
背景信息 MyBatis是一个Java数据持久层框架，支持自定义SQL、存储过程以及高级映射。使用MyBatis能免除JDBC代码以及设置参数和获取结果集的工作。更多信息，请参见 MyBatis官网文档。注意事项 目前支持使用SQL查询功能的地域有华东1（杭州...
dbms_sql.delete_trace
当 loose_sql_trace_type 参数设置为DEMAND时，您可以使用 dbms_sql.delete_trace 存储过程来删除不需要SQL Trace跟踪的SQL语句。语法 dbms_sql.delete_trace('<schema>','<query>')说明 执行该存储过程后，SQL语句中的常量会被自动模板化...
存储过程
功能介绍 存储过程（Stored Procedure）是一组为了完成特定功能的SQL语句集，您可以通过指定存储过程的名字并给定参数（如果该存储过程带有参数）来调用执行它。原理 存储过程会被持久化到Meta center中，按需加载到计算节点中执行，SQL...
验证数据压缩能力
存储过程旨在完成特定功能的 SQL 语句集，经编译创建并保存在数据库中，用户可以通过指定存储过程名并指定所需参数来调用执行，利用存储过程可以加速 SQL 语句的执行。更多内容参见 新建存储过程。在存储程序中可以使用系统变量和用户定义...
SQL 限制
GTS 事务目前支持 INSERT、UPDATE、DELETE 三类 DML 语法的部分功能，这些类型都是已经经过 GTS 产品组的严格验证。SQL 的支持范围还在不断扩大，...使用限制 不支持 SQL 嵌套 不支持多表复杂 SQL 不支持存储过程、触发器 不支持批量更新 SQL
使用说明
其他操作 如果不再需要跟踪通过 dbms_sql.add_trace 存储过程添加的SQL语句，您可以通过 dbms_sql.delete_trace 存储过程根据具体的SQL语句来删除模板化的SQL语句，或通过 dbms_sql.delete_trace_by_sqlid 存储过程根据SQL ID来删除模板化...
查看集群日报与分析
Hive使用量分析 在Hive使用分析中，您可以获取以下图表：Hive库存储量使用量分布图 Hive用户总存储量分布 Hive表文件大小分布比例 Hive表热冷数据分布 Hive表存储格式分布 Hive详细信息 在Hive信息中会展示Hive库和Hive表的详细信息。...
dbms_sql.flush_trace
存储过程 dbms_sql.flush_trace 用于清理 information_schema.sql_sharing 系统表中的所有SQL Trace统计信息和跟踪记录。语法 dbms_sql.flush_trace()示例 清理 information_schema.sql_sharing 系统表中的所有SQL Trace统计信息和跟踪记录...
HIVECLI
使用资源中心中的Hive SQL文件 该示例演示了如何使用资源中心中的Hive SQL文件来执行任务。在本例中，先在 资源中心 中定义了 sql 类型的文件（例如，hive.sql），然后在 程序类型 下拉列表中选择 选择资源中心文件，在 资源 下拉列表中...
DBMS_SQL
表 1.DBMS_SQL函数/存储过程 函数/存储过程 类型 返回类型 说明 BIND_VARIABLE(c,name,value[,out_value_size])存储过程 N/A 将值绑定到变量。BIND_VARIABLE_CHAR(c,name,value[,out_value_size])存储过程 N/A 将CHAR值绑定到变量。BIND_...
通过EMR运行基于OSS-HDFS服务的TPC-DS Benchmark
推荐使用Hive SQL ANALYZE命令获取Hive表统计信息，可以加快后续SQL的查询速度。此步骤在SF=3时，耗时为20min~30min。hive-f./hive-testbench-hdp3/ddl-tpcds/bin_partitioned/analyze.sql \-hiveconf hive.execution.engine=tez \-...
在EMR集群运行TPC-DS Benchmark
推荐使用Hive SQL ANALYZE命令获取Hive表统计信息，可以加快后续SQL的查询速度。此步骤在SF=3时，耗时为20min~30min。hive-f./hive-testbench-hdp3/ddl-tpcds/bin_partitioned/analyze.sql \-hiveconf hive.execution.engine=tez \-...
SQL其他常见问题
本文为您介绍在MaxCompute中执行SQL时，与数据类型、SQL限制等相关的常见问题。问题类别 常见问题 数据类型 MaxCompute的时间类型字段是否可以不带时分秒？在执行MaxCompute SQL过程中，对DOUBLE类型的数据进行等值比较，为什么结果不符合...
Hive数据导入
云原生数据仓库AnalyticDB MySQL版 湖仓版（3.0）支持通过Hive数据迁移将Hive数据迁移至OSS。本文介绍如何添加Hive数据源，新建Hive迁移链路并启动任务，以及数据迁移后如何进行数据分析和管理数据迁移任务。功能介绍 AnalyticDB MySQL版 ...
Hive SQL作业配置
本文介绍如何配置Hive SQL类型的作业。前提条件 已创建好项目，详情请参见 项目管理。操作步骤 进入数据开发的项目列表页面。通过阿里云账号登录 阿里云E-MapReduce控制台。在顶部菜单栏处，根据实际情况选择地域 和资源组。单击上方的 ...
dbms_sql.add_trace
当 loose_sql_trace_type 参数设置为DEMAND时，您可以使用 dbms_sql.add_trace 存储过程来指定SQL Trace功能跟踪的SQL语句。语法 dbms_sql.add_trace('<schema>','<query>')说明 执行该存储过程后，SQL语句中的常量会被自动模板化，匹配该...
功能发布记录（2023年）
支持基于Hive SQL与Spark SQL的事前问题检查预防。2023.08.24 华北2（北京政务云）华东2（上海金融云）华东2（上海）华东1（杭州）华北2（北京）华南1（深圳）西南1（成都）中国（香港）新加坡 美国（硅谷）德国（法兰克福）印度尼西亚...
公共节点
Hive Hive节点通过类SQL语句协助读写、管理存储在分布式存储系统上的大数据集的数据仓库，完成海量日志数据的分析和开发工作，具体操作，请参见 新建Hive类型的公共节点。Hologres Hologres节点运行于Hologres云计算资源之上，您可使用标准...
功能特性
查看Spark应用信息 Spark应用性能诊断 存储引擎 功能集 功能 功能描述 参考文档 AnalyticDB for MySQL仓存储 玄武分析型存储 玄武分析存储引擎支持行列混存的存储格式，提供了高可靠、高可用、高性能、低成本的企业级数据存储能力，是...
使用限制
不支持 Hive DB Lock manager API 不支持 Hive Db Transaction Manager API 不支持 Hive Constraint：如Primary key/Foreign key 不支持Hive SQL Standards Based Authorization 旧版Hive权限，开源社区已不再发展，建议使用数据湖构建数据...
SQL查询介绍
通过控制台使用SQL查询 通过命令行工具使用SQL查询 使用SDK 通过JDBC使用SQL查询 JDBC连接表格存储 通过Hibernate使用 通过MyBatis使用 使用Go语言驱动 计费说明 SQL本身不会有额外的费用，但是使用SQL查询数据过程中涉及到的表扫描、索引...
概述
本章介绍存储过程语言（SPL）。SPL 是一种高效的过程式编程语言，用于为 PolarDB PostgreSQL版（兼容Oracle）编写自定义存储过程、函数、触发器和包。SPL提供如下特性：完整的过程编程功能，以补充 SQL 语言。一种通用语言，用于为 PolarDB...
文档修订记录
您可在DataWorks上进行CDH相关的Hive、Spark、MR、Presto、Impala等任务的开发和周期性调度。创建CDH Hive节点 创建CDH Spark节点 创建CDH MR节点 创建CDH Presto节点 创建CDH Impala节点 2024.2.6 更新功能 数据保护伞 数据保护伞新版系统...
Flink_SQL任务开发方式
开发过程中所用到的输入表、输出表、维表可以通过创建元表方式来进行创建和管理，以支持您通过引用元表的方式来创建其他数据表。这种方式可以使您一次建表，可多次引用。您无需重复编写DDL语句，无需进行繁杂的输入、输出、维表映射，从而...
通过Spark Distribution SQL Engine开发Spark SQL作业
当您需要实时分析数据或通过JDBC协议开发Spark SQL作业时，可以通过 AnalyticDB for MySQL 的Spark Distribution SQL Engine开发Spark SQL作业。通过Spark Distribution SQL Engine可以更方便地利用SQL分析、处理和查询数据，提升SQL执行...
Tez
背景信息 Tez主要使用在Apache Hive中，作为Hive的一种运行时引擎，可以优化Hive SQL的查询引擎。与Hive On MR（MapReduce）相比，Hive On Tez具有更好的查询性能和稳定性。Hive基于MapReduce提交任务和基于Tez提交任务流程图如下所示：Tez...
功能特性
时序分析存储 SQL查询 数据映射 使用过程时请确保SQL中和数据表中字段数据类型相匹配。SQL数据类型映射 DDL 表格存储支持的DDL操作，包括创建表的映射关系、创建多元索引的映射关系、更新映射表属性列、删除映射关系和查询表的描述信息的...
功能与优势
开发生产隔离：开发调试过程不影响生产作业和数据。运维管理 监控告警 丰富的指标监控和维度聚合，便于排查作业延迟、数据倾斜、反压等问题。大幅提高系统稳定性，减少运维工作量，降低调优的难度。精细化资源管理，大幅度降低成本。提供...
Paimon与Hive集成
hive 执行以下Hive SQL，查询刚刚写入的数据。select*from test_db.test_tbl;添加并查询外表。Hive也可以将指定路径下的Paimon表添加为外表并查询。CREATE EXTERNAL TABLE test_ext_tbl STORED BY 'org.apache.paimon.hive....
Flink Table Store与Hive集成
hive 执行以下Hive SQL，查询刚刚写入的数据。select*from test_db.test_tbl;添加并查询外表。Hive也可以将指定路径下的Flink Table Store表添加为外表并查询。CREATE EXTERNAL TABLE test_ext_tbl STORED BY 'org.apache.flink.table....
Trino概述
支持丰富的数据源：Hive Cassandra Kafka MongoDB MySQL PostgreSQL SQL Server Redis Redshift 本地文件 支持高级数据结构，具体如下：数组和Map数据 JSON数据 GIS数据 颜色数据 功能扩展能力强，提供了多种扩展机制：扩展数据连接器 ...
配置同步任务
数据库类型 数据源 关系型数据库 MySQL、Oracle、Microsoft SQL Server、PostgreSQL、AnalyticDB for PostgreSQL 开源大数据数仓存储 Hive、TDH Inceptor 说明 HBase作为数据源或者目标数据源，支持的版本为HBase V1.1.x、HBase V0.94.x。...
SQL组件概述
组件是一种带有多个输入参数和输出参数的SQL代码过程模板，而SQL代码过程可通过引入一个或多个源数据表，并进行过滤、连接、聚合等操作，加工出业务所需的目标表，因此，您可通过组件快速加工出符合业务需求的目标表。本文为您介绍组件的...
- 产品推荐
- 这些文档可能帮助您