组件与数据类型的兼容
不支持 不支持 PAI 支持除Decimal之外的其它数据类型 2.0新增的数据类型中仅支持INT 部分功能支持map数据类型 不支持 不支持 PyODPS 支持 DataFrame不支持2.0数据类型 其它功能都支持2.0数据类型 支持 DataFrame不支持2.0数据类型 其它功能...
ECU详解
ECU分类 分析型数据库MySQL版中有高性能和大存储两种类型的ECU。高性能：以字母C或者H开头的ECU为高性能实例，数据全部存储在SSD磁盘中。适用于对性能要求高、查询并发高的业务场景。大存储：以字母S开头的ECU为大存储实例，采用SSD/HDD...
ClickHouse数据源
支持的字段类型 支持阿里云ClickHouse以下常见的数据类型，阿里云ClickHouse的数据类型全集请参见 数据类型，开源ClickHouse官方数据类型集合中的其他类型暂不支持，开源ClickHouse数据类型全集请参见 ClickHouse Doc。数据类型 ClickHouse...
2.0数据类型版本
本文为您介绍MaxCompute 2.0数据类型版本的定义、使用场景、支持的数据类型以及与其它数据类型版本的差异。定义 项目空间选择数据类型版本为2.0数据类型版本时，项目空间的数据类型属性参数定义如下。setproject odps.sql.type.system.odps...
分流方案概述
OLTP与OLAP业务混合负载场景下行存和列存自动分流 如果您的业务中，OLAP类型与OLTP类型的请求是通过同一个应用程序访问数据库，此时可实现将两类业务的读请求按照扫描的行数进行自动分流，分别分流到列存节点或行存节点。说明 若要实现行存...
Cassandra数据类型
文本数据类型（Textual Data Types）CQL中提供了两种数据类型用于存放文本类型：text,varchar：UTF-8编码的字符串，这个在CQL中使用的比较普遍；ascii：ASCII字符串。时间和标识符数据类型（Time and Identity Data Types）timestamp：时间...
数据开发：开发者
说明 目前DataWorks的节点分为数据同步类型节点与计算类型节点两大类，实际开发过程中，您通常需要先通过离线同步任务将业务数据库中的数据同步至数仓中，再通过DataWorks计算节点对数仓中的表数据进行清洗加工。创建节点。您可通过如下两...
建表时创建列存索引的DDL语法
表 t2 的建表语句中，为全表创建了列存索引，即覆盖了表中的所有数据类型能够支持的列，即col1、col2、col3。CREATE TABLE LIKE 语法：若使用 CREATE TABLE LIKE 命令创建表，如果源表包含列存索引，则目标表也将包含相同的列存索引。...
设置列索引的排序键
imci_parallel_build_use_parallel_load 并行构建有序列存数据时是否并发读取数据文件。取值如下：ON（默认）：并行构建有序列存数据时并发读取数据文件。说明 并发读取数据文件时，不保证数据完全有序。OFF：并行构建有序列存数据时顺序...
动态增加或删除列存索引的DDL语法
您可以通过表的COMMENT来简化大宽表创建列存索引的方式，即默认为宽表在所有支持的数据类型的列上创建列存索引，同时可以只指定少量的无需有列存索引覆盖的列。说明 8.0.1.1.25版本及之后的版本，列存索引支持BLOB和TEXT类型。8.0.1.1.28...
Hudi概述
针对Merge On Read类型的表，查询时需要在线合并列存中的Base数据和日志中的实时数据；针对Copy On Write表，可以查询最新版本的Parquet数据。Copy On Write和Merge On Read表支持该类型的查询。Incremental Queries 支持增量查询的能力，...
列存索引（IMCI）发布说明
核心优势 PolarDB MySQL版 依托列存索引特性，具备如下优势：100%兼容MySQL：列存具有与MySQL一致的数据类型系统，支持灵活的类型转换，100%兼容MySQL协议；优秀的HTAP性能：PolarDB 在OLTP方面本身具备良好性能。列存索引使其OLAP性能也与...
概述
核心优势 PolarDB MySQL版 依托列存索引特性，具备如下优势：100%兼容MySQL：列存具有与MySQL一致的数据类型系统，支持灵活的类型转换，100%兼容MySQL协议；优秀的HTAP性能：PolarDB 在OLTP方面本身具备良好性能。列存索引使其OLAP性能也与...
产品整体介绍
技术架构 以下为 AnalyticDB PostgreSQL版 的架构图，主要包含Master Node和Compute Node两大组件，中间通过Interconnect进行互联通信和数据交换传输。Master Node和Compute Node提供多副本保障服务高可用和数据高可靠，同时均支持通过...
分区表常见问题
假设分区表 t1 的历史分区为 p0 和 p1，需要将这两个历史分区中的数据迁移到新分区表 t2 的 p0 和 p1 分区中。操作步骤如下：创建新的分区表 t2，表结构与 t1 保持一致，且包含 p0 和 p1 分区。创建普通表 temp，表结构与需要迁移的分区表...
自建Oracle迁移至PolarDB-X
说明 由于Oracle和 PolarDB-X 的数据类型并不是一一对应的，您需要在 PolarDB-X 中定义对应的数据类型，详情请参见 异构数据库间的数据类型映射关系。建议在执行数据迁移前了解源库为Oracle时DTS支持的能力和限制条件，并使用ADAM...
迁移时源库为PolarDB MySQL版的注意事项及限制
请确认DTS对数据类型为FLOAT或DOUBLE的列的迁移精度是否符合业务预期。DTS会通过 ROUND(COLUMN,PRECISION)来读取这两类列的值。如果没有明确定义其精度，DTS对FLOAT的默认迁移精度为38位，对DOUBLE的默认迁移精度为308位。DTS会尝试恢复七...
如何对JSON类型进行高效分析
尤其在 PolarDB IMCI的JSON列存版本中，大部分情况下实时计算也能满足查询性能。PolarDB IMCI实现列存表的秒级加减虚拟列INSTANT DDL功能，可以在瞬间完成加减虚拟列，不会阻塞读写，基本不会影响正常查询业务。秒级加虚拟列功能：alter ...
PolarDB HTAP实时数据分析技术解密
即表达式系统有两项关键优化：充分利用列式存储的优势，使用分批处理模型代替迭代器模型，使用SIMD指令重写大部分常用数据类型的表达式。例如，所有数字类型（int、decimal、double）的基本数学运算（+-*/abs），全部使用对应的SIMD指令。...
迁移时源库为MySQL的注意事项及限制
请确认DTS对数据类型为FLOAT或DOUBLE的列的迁移精度是否符合业务预期。DTS会通过 ROUND(COLUMN,PRECISION)来读取这两类列的值。如果没有明确定义其精度，DTS对FLOAT的迁移精度为38位，对DOUBLE的迁移精度为308位。DTS会尝试恢复七天之内...
Teradata迁移至云原生数据仓库 AnalyticDB PostgreSQL...
警告 由于此场景属于异构数据库间的数据迁移，数据类型无法一一对应，请谨慎评估数据类型的映射关系对业务的影响，否则可能会导致数据不一致或任务失败。更多信息，请参见 异构数据库间的数据类型映射关系。全量迁移 DTS将源库中迁移对象的...
PolarDB MySQL版迁移至AnalyticDB MySQL 3.0
说明 此场景属于异构数据库间的数据迁移，DTS在执行结构迁移时数据类型无法完全对应，请谨慎评估数据类型的映射关系对业务的影响，详情请参见 异构数据库间的数据类型映射关系。全量迁移 DTS将源库中迁移对象的存量数据，全部迁移到目标库...
RDS MySQL迁移至AnalyticDB MySQL 3.0
说明 此场景属于异构数据库间的数据迁移，DTS在执行结构迁移时数据类型无法完全对应，请谨慎评估数据类型的映射关系对业务的影响，详情请参见 异构数据库间的数据类型映射关系。全量迁移 DTS将源库中迁移对象的存量数据，全部迁移到目标库...
列存索引技术架构介绍
目前，白名单规则校验的内容包含SQL语句中的数据类型、算子、计算表达式以及其他场景。其他场景如不支持multi statement等。MySQL已经发展了数十年，其支持的各种列类型和SQL语法非常丰富。在IMCI中，初期重点优化在分析型查询语句中最常见...
从RDS同步到云原生数据仓库 AnalyticDB MySQL 版
数据类型映射关系 由于MySQL和 云原生数据仓库AnalyticDB MySQL 的数据类型并不是一一对应的，所以DTS在进行结构初始化时，会根据数据类型定义进行类型映射，详情请参见 结构初始化涉及的数据类型映射关系。操作步骤 购买数据同步作业，...
从RDS同步到云原生数据仓库AnalyticDB MySQL
数据类型映射关系 由于MySQL和 云原生数据仓库AnalyticDB MySQL 的数据类型并不是一一对应的，所以DTS在进行结构初始化时，会根据数据类型定义进行类型映射，详情请参见 结构初始化涉及的数据类型映射关系。操作步骤 购买数据同步作业，...
常见问题
方法二：定义字段的数据类型为String，并在SQL中使用LIKE通配符查询。说明 使用LIKE通配符查询在数据量增大时可能会产生性能降低问题，建议您在使用时及时关注查询性能。方法三：如果上述两种方法都无法满足业务需求，您可以使用ngram分词...
离线同步常见问题
数据同步原则：来源端数据源的数据要能写入目的端数据源（来源端和目的端类型需要匹配，字段定义的大小需要匹配），即源端数据类型需要与写端数据类型匹配，源端是VARCHAR类型的数据不可写到INT类型的目标列中；目标端的数据类型定义的大小...
Oracle数据源
NLS_CHARACTERSET 及 NLS_NCHAR_CHARACTERSET 为数据库字符集和国家字符集，表明Oracle中两大类字符型数据的存储类型。说明 前数据集成同步数据时，仅支持UTF8、AL32UTF8、AL16UTF16及ZHS16GBK编码格式。如果数据库中包含不支持的字符编码...
重载子程序
使用 PSQL \d 命令可显示表定义，“类型”列根据表定义中的数据类型显示内部分配给每个列的数据类型：\d data_type_aliases Column|Type|Modifiers-+-+-dt_blob|bytea|dt_long_raw|bytea|dt_raw|bytea(4)|dt_bytea|bytea|dt_integer|...
PolarDB-X 1.0迁移至AnalyticDB MySQL 3.0
数据类型映射关系 详情请参见 结构初始化涉及的数据类型映射关系。操作步骤 进入迁移任务的列表页面。登录 DMS数据管理服务。在顶部菜单栏中，单击 集成与开发（DTS）。在左侧导航栏，选择 数据传输（DTS）>数据迁移。说明 实际操作可能会...
自建Oracle迁移至AnalyticDB MySQL 3.0
数据类型映射关系 详情请参见 异构数据库间的数据类型映射关系。准备工作 登录待迁移的Oracle数据库，创建用于采集数据的账号并授权。说明 如您已创建包含下述权限的账号，可跳过本步骤。数据库 结构迁移 全量迁移 增量数据迁移 自建Oracle...
数据页面管理
在管理数据页面中，数据的类型分为 ...上传数据 管理数据页面中的数据类型有 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六大类，不同类型的数据可上传的数据格式互不相同，具体三种类型数据上传数据的详细说明请参见 上传数据。
数据页面管理
在管理数据页面中，数据的类型分为 ...上传数据 管理数据页面中的数据类型有 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六大类，不同类型的数据可上传的数据格式互不相同，具体三种类型数据上传数据的详细说明请参见 上传数据。
从自建SQL Server全量迁移至RDS SQL Server
数据迁移限制 不支持迁移数据类型为sql_variant的数据。不支持assemblies、service broker、全文索引、全文目录、分布式schema、分布式函数、CLR存储过程、CLR标量函数、CLR表值函数、内部表、聚合函数、系统的结构迁移。迁移类型说明 结构...
从RDS同步至MaxCompute
关于MaxCompute支持的数据类型与相关说明，请参见 数据类型。在MaxCompute中执行如下SQL命令，合并全量基线表和增量日志表，获取该表在某一时间点的全量数据。set odps.sql.allow.fullscan=true;insert overwrite table...
RDS SQL Server迁移至云原生数据仓库 AnalyticDB ...
警告 由于此场景属于异构数据库间的数据迁移，数据类型无法一一对应，请谨慎评估数据类型的映射关系对业务的影响，详情请参见 异构数据库间的数据类型映射关系。全量迁移 DTS将源库中迁移对象的存量数据，全部迁移到目标库中。增量迁移 DTS...
从RDS同步至MaxCompute
关于MaxCompute支持的数据类型与相关说明，请参见 数据类型。在MaxCompute中执行如下SQL命令，合并全量基线表和增量日志表，获取该表在某一时间点的全量数据。set odps.sql.allow.fullscan=true;insert overwrite table...
JindoFS实战演示
使用Checksum迁移HDFS数据到OSS 使用Checksum迁移HDFS数据到OSS 2021-05-11 通过Checksum算法，你可以在大数据迁移场景中校验数据的完整性、对比数据差异并实现增量迁移。本视频为您介绍如何使用Jindo Distcp迁移HDFS数据到OSS，以及在迁移...
RDS SQL Server迁移至云原生数据仓库 AnalyticDB ...
警告 由于此场景属于异构数据库间的数据迁移，数据类型无法一一对应，可能会导致任务失败或数据丢失，请谨慎评估数据类型的映射关系对业务的影响，详情请参见 异构数据库间的数据类型映射关系。全量迁移 DTS将源库中迁移对象的存量数据，...
- 产品推荐
- 这些文档可能帮助您