增强E-R
数据管理DMS 的增强E-R功能基于DMS自研的统一Catalog的元数据采集引擎、列算子血缘解析引擎（解析字段间关联、依赖和影响关系的引擎）和数据资产知识图谱构建等核心能力，可清晰地展现您名下某个数据库内资产之间的关联关系。本文介绍了...
自然语言到SQL语言转义（基于大语言模型的NL2SQL）
为了让不熟悉SQL语言的用户能方便地从数据库中取数分析，PolarDB for AI推出自研的基于大语言模型的自然语言到数据库查询语言转义（Large Language Model based Nature Language to SQL，简称LLM-based NL2SQL）解决方案，PolarDB for AI会...
PolarDB MySQL版同步至AnalyticDB MySQL 3.0
支持的操作请参见 支持同步的SQL操作。如需设置WHERE条件过滤数据，请在 已选择对象 中右击待同步的表，在弹出的对话框中设置过滤条件。设置方法请参见 设置过滤条件。单击 下一步高级配置，进行高级配置。配置 说明 设置告警 是否设置告警...
一键诊断
AnalyticDB for MySQL 推出 一键诊断 功能，可针对指定时间段的集群运行状况发起诊断，结合监控数据、日志数据以及库表状态等信息进行联合分析，从集群的资源水位、负载变化、查询SQL、算子、存储等多方面评估集群的健康状况，帮助您提高...
SQL变更
SQL变更作为变更SQL执行的入口，需要极高的安全性。在工单提交、审批时，通过一系列的安全规则进行校验，只有满足规则校验的SQL，才能正常执行。前提条件 用户角色为 管理员、DBA 或 安全管理员。背景信息 数据管理DMS的安全规则具备非常...
SQL错误码（ODPS-01CCCCX）
本文为您介绍SQL错误码列表、触发条件及处理方法。该类型错误的错误码编码格式如下。ODPS-01CCCCX:通用描述-上下文相关说明 SQL错误包含META（CCCC段为1000~1999）、PROCESSOR（CCCC段为2000~2999）、PARSER（CCCC段为3000~3999）和PLANNER...
SQL增强操作
本文为您介绍Dataphin支持的SQL增强操作。功能 是否支持 EXPLAIN 是
RDS MySQL同步至AnalyticDB MySQL 3.0
支持的操作请参见 支持同步的SQL操作。如需设置WHERE条件过滤数据，请在 已选择对象 中右击待同步的表，在弹出的对话框中设置过滤条件。设置方法请参见 设置过滤条件。单击 下一步高级配置，进行高级配置。数据校验配置 若您需要配置数据...
SETPROJECT
创建MaxCompute项目空间后，您需要进入项目空间才可以执行后续开发、分析、运维等一系列操作。工具平台 本文中的命令您可以在 MaxCompute客户端、云命令行（odpscmd）或 DataWorks的ODPS SQL节点 中执行。注意事项 项目空间非工作空间。...
访问CDC数据
云原生多模数据库 Lindorm 计算引擎提供Lindorm CDC（Change Data Capture）数据源，您可以通过该数据源使用Spark SQL查询Lindorm实例其他引擎变更的数据。前提条件 Lindorm实例已开通LTS（Lindorm Tunnel Service）服务，具体请参见 购买...
查询报错问题
用户使用的是普通表，且写入大量数据后未执行optimize操作，此时执行SQL会随着插入数据多而变得越来越慢。这是因为分析型数据库MySQL版的实时数据增量部分默认未建索引，因此执行查询时会频繁访问磁盘。为保证查询速度，建议当用户执行过...
普通数据变更
您可以在DMS中通过SQL窗口直接输入SQL语法或通过数据变更工单提交数据变更。同时，您可以自定义安全规则，实现对不同环境库定义不同的数据变更执行配置。本文将通过以下4个例子向您介绍典型场景下的安全规则设定与对应提交数据变更的方式。...
从RDS同步至MaxCompute
关于before_flag和after_flag的补充说明 对于不同的操作类型，增量日志中的 before_flag 和 after_flag 定义如下：INSERT 当操作类型为INSERT时，所有列的值为新插入的记录值，即为更新后的值，所以before_flag取值为N，after_flag取值为Y...
新功能发布记录
同时，提供多种更加简单高效的非关系型 API 接口，充分发挥 NoSQL 和 SQL 共处的新架构优势，满足用户不同场景下数据的多样性需求。目前仅支持 32C 和 64C 两种规格。产品系列 购买实例 备实例解耦 支持将备实例解耦为一个和现有主集群无关...
从RDS同步至MaxCompute
关于before_flag和after_flag的补充说明 对于不同的操作类型，增量日志中的 before_flag 和 after_flag 定义如下：INSERT 当操作类型为INSERT时，所有列的值为新插入的记录值，即为更新后的值，所以before_flag取值为N，after_flag取值为Y...
配置管理
数据管理DMS开放了系统层面的配置，管理员角色可通过对这些配置进行更改，来实现更灵活的管理需求。本文档介绍配置管理的方法。前提条件 系统角色为管理员。查看系统角色的具体步骤，请参见 查看我的系统角色。操作步骤 登录 数据管理DMS 5...
导出至OSS
前提条件 在 对象存储 OSS中创建存储 AnalyticDB MySQL版 数据的目录：开通OSS服务。说明 OSS与 AnalyticDB MySQL版 数仓版（3.0）集群所属地域相同。控制台创建存储空间。在OSS中新建目录。例如，在OSS中新建目录 adb_data/，从 ...
2021年
2021-03-16 全部地域 字符串函数 MaxCompute SQL支持UPDATE/DELETE/MERGE INTO语法（公测）UPDATE/DELETE是MaxCompute新支持的在行级别操作表或者分区数据的语句。相比之前订正表或者分区中的少量数据，也需要读取全量数据，关联生成新数据...
PolarDB MySQL版迁移至Elasticsearch
其他限制 如果源库中待迁移的表需要执行增加列的操作，您只需先在ElasticSearch实例中修改对应表的mapping，然后在源数据库中执行相应的DDL操作，最后暂停并启动迁移任务。全量数据迁移时DTS会占用源和目标库一定读写资源，可能会导致数据...
INSERT
对于定义为 GENERATED ALWAYS 的标识列，插入显式值（DEFAULT 除外）而不指定 OVERRIDING SYSTEM VALUE 或 OVERRIDING USER VALUE 是错误的。（对于定义为 GENERATED BY DEFAULT 的标识列，OVERRIDING SYSTEM VALUE 是正常行为，并指定其不...
SQL作业开发
本文为您介绍Flink全托管SQL作业开发的操作步骤。使用说明 在编写SQL作业代码时，您可以使用内置的丰富连接器，也可以使用自定义函数、自定义连接器等功能。相关的使用场景和使用方法详情如下：支持的连接器 密钥管理 管理自定义连接器 ...
RDS SQL Server空间不足问题
数据空间的回收通常有如下几种方式：归档数据 删除数据库中不常用的数据（例如早期的历史数据），或者根据需要迁移到其他数据库实例中，或者以其他形式归档保存，通过直接减少数据量来降低已使用数据空间大小。这种方式是控制数据空间增长...
V5.1.x系列实例版本说明
修复数字类型的列错传了一个含有非常大的科学计数法数据的子字符串导致内存溢出的问题。修复了唯一序列相关的几个问题。修复了含有GROUP BY函数的子查询报错的问题。修复VARBINARY类型的列在系统编码是GBK的情况下，取数据的结果会和数据库...
表批读写
Delta Lake将执行以下操作：如果只指定表名和位置，例如：SQL%sql CREATE TABLE events USING DELTA LOCATION '/mnt/delta/events' Hive Metastore中的表会自动继承现有数据的Schema，分区和表属性。此功能可用于将数据“导入”到元存储中...
PolarDB-X 2.0同步至DataHub
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将 PolarDB-X 2.0 同步至 阿里云流式数据服务DataHub，实现增量数据的实时同步。前提条件 已开通 DataHub，并且已创建用作接收同步数据的Project。具体操作请参见 快速入门...
导入与导出
本文介绍AnalyticDB MySQL中导入导出的常见问题及解决方法。说明 当常见问题场景中未明确产品系列时，表明该问题仅适用于 AnalyticDB MySQL 数仓版（3.0）。常见问题概览 如何停止异步导入导出任务？如何使用SQL查看当前库里RUNNING的导入...
RDS MySQL同步至DataHub
阿里云流式数据服务DataHub是流式数据（Streaming Data）的处理平台，提供对流式数据的发布、订阅和分发功能，让您可以轻松构建基于流式数据的分析和应用。通过数据传输服务DTS（Data Transmission Service），您可以将 RDS MySQL 同步至 ...
企业版和标准版功能对比
支持 支持 弹性并行查询（ePQ）弹性并行查询（Elastic Parallel Query，ePQ）目前支持单机并行和多机并行两种并行引擎，单机并行引擎等效于原有的并行查询，多机并行引擎支持集群内跨节点的自适应弹性调度。支持 支持 SQL引擎查询优化 ...
COPY
对于 COPY FROM，文件中的每个字段将按顺序插入到指定列中。COPY FROM 命令的列列表中没有指定的表列则会采纳其默认值。带一个文件名的 COPY 指示 PolarDB服务器直接从一个文件读取或者写入到一个文件。该文件必须是 PolarDB用户（运行...
写入与查询
本文介绍 AnalyticDB MySQL 中写入与查询的常见问题及解决方法。说明 当常见问题场景中未明确产品系列时，表明该问题仅适用于 AnalyticDB MySQL 数仓版（3.0）。常见问题概览 湖仓版（3.0）集群是否支持通过JDBC方式查询Hudi表的数据？湖仓...
错误码表（2.0版）
相关操作未找到目标数据库，请检查数据库连接是否正确包含目标数据库信息，或者操作是否指定目标数据库。18026 Table group should be created first.建分区表时指定的表组不存在，需先建表组。18027 相关命名的详细错误信息。数据库对象...
Google Cloud SQL for MySQL数据库迁移到阿里云
本文介绍Google Cloud SQL for MySQL数据库迁移到阿里云的步骤及注意事项。前提条件 源端及目标端 要求 相关参考 源端 Google Cloud SQL for MySQL数据库实例 已开通公网访问，并获取外网连接地址及端口。已创建高权限账号。Google Cloud ...
通过DTS导入数据
DTS支持迁移全量数据及增量数据，您可以通过DTS迁移MySQL数据库（例如自建MySQL、RDS MySQL和PolarDB MySQL）同步或迁移至 云数据库 SelectDB 版，并在 云数据库 SelectDB 版 上完成亚秒级响应海量数据查询、万级高并发点查询以及高吞吐...
PostgreSQL数据源
对于新增流水型数据，PostgreSQL Reader在where条件后跟上一阶段最大自增ID即可。对于业务上无字段区分新增、修改数据的情况，PostgreSQL Reader无法进行增量数据同步，只能同步全量数据。SQL安全性 PostgreSQL Reader提供 querySql 语句...
列存索引如何实现高效数据过滤
列存索引中TopK算子的实现 一文中介绍了PolarDB IMCI如何利用统计信息在运行时进行剪枝，以提高TopK算法的查询性能。本文将进一步全面介绍PolarDB IMCI的查询剪枝（pruning or data skipping）技术。背景与作用 在HTAP场景中，PolarDB IMCI...
基本概念
K 宽表引擎 负责宽表与对象数据的管理和服务，具有全局二级索引、多维检索、动态列、TTL等能力，适用于元数据、订单、账单、画像、社交、feed流、日志等场景，兼容SQL、HBase、Cassandra（CQL）、S3等标准接口。更多信息，请参见 宽表引擎...
从自建MySQL迁移至RDS MySQL实例
支持的操作请参见 支持增量迁移的SQL操作。单击 下一步高级配置，进行高级配置。数据校验配置 若您需要使用数据校验功能，配置方法请参见 配置数据校验。高级配置 配置 说明 选择调度该任务的专属集群 DTS默认将任务调度到共享集群上，您...
2023年
TimeTravel 2023-06-26 新增SQL处理优化 新说明 为了方便用户操作Transactional Table 2.0，MaxCompute计算引擎对SQL全套的数据查询DQL语法和数据操作DML语法进行了支持，并且SQL引擎内核模块包括Compiler、Optimizer、Runtime等都做了专门...
列存索引常见问题
当原表上包含列存索引时，表数据重建的同时也需要重建列存索引的数据，而列存索引数据重建的过程需要写入Redo log，通常列存索引会覆盖比较多的列，从而列存索引数据重建Redo log与原表数据大小成正比。相比没有列存索引的表重建过程中会...
PolarDB-X 2.0同步至MaxCompute
支持的操作请参见 支持同步的SQL操作。如需设置WHERE条件过滤数据，请在 已选择对象 中右击待同步的表，在弹出的对话框中设置过滤条件。设置方法请参见 通过SQL条件过滤任务数据。单击 下一步高级配置，进行高级配置。配置 说明 选择调度该...
- 产品推荐
- 这些文档可能帮助您