管理表结构版本
当您在 数据管理DMS 中对数据库进行表结构变更后，DMS将会保存最新的表结构...表结构对比 将表结构同步至其他表结构或与其他表结构进行对比，更多信息，请参见 结构同步。结构恢复 将表结构同步至空的数据库中，更多信息，请参见 空库初始化。
结构设计元数据不一致的解决办法
本文介绍如何解决结构设计中表结构与变更基准库中表结构不一致问题。解决方法 请在目标表关联的所有工单状态为 设计中 的工单（工单状态为 已发布 或 已关闭 不需要处理）中移除该表。具体操作如下：登录 数据管理DMS 5.0。在顶部菜单栏中...
CREATE TABLE LIKE
如果您需要快速创建一个与原表结构一致的新表时，可以使用CREATE TABLE LIKE完成表结构的复制和新表的创建。引擎与版本 CREATE TABLE LIKE语法仅适用于宽表引擎。宽表引擎需为2.4.2.1及以上版本。如何查看和升级当前版本，请参见 宽表引擎...
数据导入性能优化
解决方法：重新设计表结构后再导入数据，详情请参见 表结构设计。通过JDBC使用程序导入数据调优 客户端优化 应用端攒批，多条批量导入 在通过JDBC使用程序导入数据过程中，为减少网络和链路上的开销，建议攒批导入。无特殊要求，请避免单条...
数据导入性能优化
解决方法：重新设计表结构后再导入数据，详情请参见 表结构设计。通过JDBC使用程序导入数据调优 客户端优化 应用端攒批，多条批量导入 在通过JDBC使用程序导入数据过程中，为减少网络和链路上的开销，建议攒批导入。无特殊要求，请避免单条...
导入与导出
解决方法：在AnalyticDB MySQL中重新创建与MaxCompute表结构、列名一致的外表，再重新查询数据。原因3：MaxCompute对应的分区不存在。解决方法：修改查询数据语句中指定的MaxCompute分区，再重新查询数据。原因4：MaxCompute小文件过多。...
PolarDB-X 1.0在DMS控制台上无法显示修改后的表结构
问题描述 使用阿里云云原生分布式数据库PolarDB-X 1.0过程中，通过其他客户端修改表结构后，在DMS控制台上无法显示修改后的表结构。解决方案 DMS会从影子库系统表中获取 PolarDB-X 1.0 的表结构。在处理异常DDL过程中，由于种种原因可能会...
PolarDB MySQL版8.0.2版本发布日志
修复了当已创建DLM策略的表的表结构发生变更后，DLM策略仍能生效的问题。修复在分区表上执行 INSERT INTO ON DUPLICATE VALUE 命令时报错 Can't find record on的问题。修复在含有自增列的分区表上执行 TRUNCATE PARTITION 命令时小概率...
如何对JSON类型进行高效分析
PolarDB 列存索引（In Memory Column Index，IMCI）功能推出了完备的虚拟列与列式JSON功能等，可以快速处理大数据和多种数据类型（包括结构化数据与半结构化数据等），并提供高效的数据分析、查询与流计算能力，适用于数据分析、数据仓库与...
开发运维建议
表 表结构中字段定义的数据类型建议与应用程序中的定义保持一致，表之间字段校对规则一致，避免报错或无法使用索引的情况发生。对于存在定期历史数据删除需求的业务，建议数据表按时间分区，按时间月或年区分，删除时使用 DROP 或者 ...
AliSQL内核小版本发布记录
不建议升级到此版本，如遇到备份失败问题，请参见 RDS MySQL 8.0.31(20230630)版本备份失败问题处理。新特性 合并官方 8.0.31 变更。支持取消正在运行的Buffer Pool Online Resize。Statement Concurrency Control功能新增模板级别并发控制...
迁移HBase至Hologres
基于分布式文件系统Pangu/HDFS，存储能力与集群规模有关，支持线性扩展，单表最大容量3PB+；多种存储模式和多种压缩算法赋能存储。查询及分析能力 原生仅支持点查(GET)和扫描(SCAN)。点查每秒查询率（QPS，Queries per second）高，SCAN...
PolarDB PostgreSQL版：ePQ架构详解
PolarDB PostgreSQL版 实现了弹性跨机并行查询（ePQ）特性，能够帮助您解决原先的 PolarDB PostgreSQL版 在处理复杂的AP查询时会遇到的问题。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 11（内核小版本1.1.28及以上）...
PolarDB PostgreSQL版：ePQ架构详解
PolarDB PostgreSQL版（兼容Oracle）实现了弹性跨机并行查询（ePQ）特性，能够帮助您解决原先的 PolarDB PostgreSQL版（兼容Oracle）在处理复杂的AP查询时会遇到的问题。前提条件 支持的 PolarDB PostgreSQL版（兼容Oracle）的版本如下：...
PolarDB并行查询
在join的表集合中，寻找一个可以做逻辑分片的表做拆分，如果3个表都不足以拆分足够多的分片，那就选最多的表，比如这里选择了t2，它可能拆出12个分片，但仍然无法满足并行度16的要求，导致有4个worker读不到数据而idle。聚集操作先在worker...
使用须知
一个空的Region在内存中的数据结构大概2MB，用户可以评估下单个RegionServer承载的总Region数目，有用户发生过在低配置节点上，建大量加盐表直接把集群内存耗光的问题。慎用扫全表、OR、Join和子查询 虽然Phoenix支持各种Join操作，但是...
资源角色
可查询实例下所有数据库中的数据（不包含敏感字段），提交各类数据方案与库表结构的工单。对应于审批节点中 动态计算 的DBA。实例Owner 每个实例可以设置3个实例Owner。云数据库资源默认主账号为实例Owner。非云数据库默认当前录入的云账号...
通过文件管理优化性能
举一个简单的例子，假设一张表包含10个表文件，对于表中的x列，它的取值为[1,10]，如果每个表文件的x列的分布均为[1,10]，则对于查询条件：where x，无法跳过任何一个表文件，因此，也无法实现性能提升，而如果每个表文件的min-max均为0，...
散点层（线性渐变）
本文介绍 散点层（线性渐变）的图表样式和各配置项的含义。图表样式 散点层（线性渐变）是3D地球的子组件，支持独立的样式和数据配置，包括散点的大小、颜色、类型以及经纬度等，能够以散点的形式表现地理位置上的点数据信息。配置面板 ...
组件参考：所有组件汇总
读数据表 该组件用于读取MaxCompute表数据，默认读取本项目的表数据。写数据表 该组件支持将上游数据写入MaxCompute中。数据预处理 随机采样 该组件按照给定的比例或者数目，对输入进行随机独立采样。加权采样 以加权方式生成采样数据。...
内存型
云原生内存数据库Tair 内存型（简称内存型）适合并发量大、读写热点多、高性能场景，内存型重点增强了多线程性能并集成多个自研扩展数据结构。购买方式 创建实例 主要优势 类别 说明 兼容性 100%兼容原生Redis，无需修改业务代码，提供 ...
内存型
数据结构模块集成 云Redis社区版与开源Redis相同，支持String、List、Hash、Set、Sorted Set、Stream等数据类型，能够满足大部分场景下的开发需求，但在一些复杂场景中，原生数据类型无法直接满足某些业务需求，只能使用通过调整应用数据、...
CREATE TABLE
通过复制表结构创建表 您可以通过复制表结构创建与源表具有相同结构的表。语法：CREATE TABLE[IF NOT EXISTS][db.]table_name2 ON CLUSTER cluster AS[db.]table_name1[ENGINE=engine_name];参数说明：参数 说明 db 数据库的名称，默认为...
数据方案概览
表一致性修复 用于对比不同表之间的表结构，找出差异并在目标表执行差异脚本，以保障不同表之间的表结构一致性 无锁结构变更 可以较好地规避因锁表以致于阻塞业务和数据库原生OnlineDDL带来的主备延迟问题。数据变更 普通数据变更 支持数据...
PolarDB PostgreSQL版架构介绍
PolarDB PostgreSQL版 是一款阿里云自主研发的企业级数据库产品，采用计算存储分离架构，兼容PostgreSQL与Oracle。PolarDB PostgreSQL版 的存储与计算能力均可横向扩展，具有高可靠、高可用、弹性扩展等企业级数据库特性。同时，PolarDB ...
PolarDB PostgreSQL版架构介绍
PolarDB PostgreSQL版（兼容Oracle）是一款阿里云自主研发的企业级数据库产品，采用计算存储分离架构，兼容PostgreSQL与Oracle。PolarDB PostgreSQL版（兼容Oracle）的存储与计算能力均可横向扩展，具有高可靠、高可用、弹性扩展等企业级...
CREATE TABLE AS
Hologres从V1.3.21版本开始，支持使用CREATE TABLE AS语句创建表，复制表结构的同时也可以选择复制数据。本文为您介绍在Hologres中CREATE TABLE AS的用法。背景信息 CREATE TABLE AS的功能为：创建一个与源表结构或者查询Query结果相同的新...
配置DTS数据迁移节点
DTS数据迁移节点可以实现跨库、全量、单表或整库的数据迁移，迁移的类型包括数据和结构。本文介绍配置DTS数据迁移节点的方法。背景信息 DTS数据迁移节点基于数据传输服务DTS，赋予任务流基于DTS进行...更多信息，请参见 查询与变更表结构。
如何处理DDL异常
常见问题 Q：为什么在DMS或其它客户端上无法显示修改后的表结构？A：为了兼容某些客户端从系统表（如COLUMNS或TABLES）中获取表结构的功能，PolarDB-X 1.0 在您的0分库RDS里建立了一个影子库，影子库名与 PolarDB-X 1.0 逻辑库名一致，存储...
使用ClickHouse-Local迁移上云
CREATE DATABASE db 创建目标表，且目标表的结构与MySQL表的结构一致。CREATE TABLE db.table.在安装ClickHouse-Local的主机机器上运行ClickHouse-Local。clickhouse local-query"INSERT INTO FUNCTION remoteSecure('HOSTNAME.clickhouse....
从RDS原生实时同步
操作 支持 备注 CREATE TABLE 否 用户需使用 表结构同步 功能迁移表结构，进而建立同步任务 DROP TABLE 否 忽略不处理 TRUNCATE TABLE 否 忽略不处理 RENAME TABLE 否 忽略不处理 OPTIMIZE TABLE 否 忽略不处理 ALTER TABLE ADD COLUMN 是 ...
可视化管理内部表、外部表或视图
选中 仅当不存在时创建 时，只要存在同名内部表或外部表，即使原表的结构与要创建的目标表结构不一致，均返回成功。但已存在的同名表的元数据信息不会被改动。注释 内部表或外部表的注释信息。生命周期 内部表或外部表的生命周期，单位为天...
功能特性
结构同步 空库初始化 支持将源数据库的表结构同步至空数据库中（数据库中不存在任何表），实现快速同步数据库表结构，适用部署多区域、多单元的数据库环境。空库初始化 表一致性修复 用于对比不同表之间的表结构，找出差异并在目标表执行...
常见错误码及排查方法
java.IOEException:java.lang.IllegalArgumentException:Valid type fail,Column:column_name,Type:type_number 可能原因：Binlog中的表结构与DTS本地的表结构不一致，导致Binlog解析失败。出现这种表结构不一致主要的原因是：该表结构变更...
数据建模诊断
分区字段合理性诊断可以帮助用户监控分区的变化，当分区不合理时及时提醒用户进行表结构的优化，保持或者提高实例的查询性能。分区字段不合理判定规则 如果表中有10%以上的分区记录条数不在合理区间则视为不合理，具体的判定规则见下表：...
自建HBase迁移至云原生数据仓库 AnalyticDB MySQL 版 ...
警告 选择为 忽略报错并继续执行，可能导致数据不一致，给业务带来风险，例如：表结构一致的情况下，在目标库遇到与源库主键的值相同的记录，则会保留目标库中的该条记录，即源库中的该条记录不会迁移至目标库中。表结构不一致的情况下，...
Teradata迁移至云原生数据仓库 AnalyticDB PostgreSQL...
警告 选择为 忽略报错并继续执行，可能导致数据不一致，给业务带来风险，例如：表结构一致的情况下，在目标库遇到与源库主键的值相同的记录，则会保留目标库中的该条记录，即源库中的该条记录不会迁移至目标库中。表结构不一致的情况下，...
数据集成侧同步任务能力说明
add_col、batch_add_col 为手动调整后的Hologres表与源端表结构的DIFF字段，此字段允许进行赋值操作。以下图配置为例：手动赋值：输入固定字符串 固定值写入，则此字符串将被写入到Hologres表中 add_col 字段中。选择变量：选择内置变量，...
公开数据集概述
查询表结构-开启Session级Schema语法。set odps.namespace.schema=true;查询dwd_github_events_odps表结构。如果想查询其他表，替换schema名称和表名即可。desc bigdata_public_dataset.github_events.dwd_github_events_odps;查询示例-...
数据归档
背景信息 ODC 支持定时将源数据库中的表数据归档至其它目标数据库中，以解决因线上数据增多影响查询性能与业务运作的问题。本文档旨在介绍如何通过提交数据归档工单实现归档数据。原理介绍 前提条件 归档的表中必须包含主键。注意事项 前置...
- 产品推荐
- 这些文档可能帮助您