PolarDB MySQL版8.0.2版本发布日志
修复使用列存索引（IMCI）功能查询TopK数据时，因查询语句中涉及的表中的NULL值过多，进行倒序排序时排序结果错误的问题。修复只读列存节点在涉及列存索引表的DDL执行过程中启动时，无法恢复列存数据的问题。修复在某些特殊场景下，在包含...
Joining Relations Hints
嵌套循环联接：对于其他联接表中的每一行，扫描一次表。合并排序联接：在联接开始之前，每个表按联接属性排序。然后并行扫描两个表，匹配的行将合并，形成联接行。哈希联接：扫描表并使用其联接属性作为哈希键将其联接属性加载到哈希表中。...
Joining Relations Hints
嵌套循环联接：对于其他联接表中的每一行，扫描一次表。合并排序联接：在联接开始之前，每个表按联接属性排序。然后并行扫描两个表，匹配的行将合并，形成联接行。哈希联接：扫描表并使用其联接属性作为哈希键将其联接属性加载到哈希表中。...
优化内部表的性能
数据量大的表tmp1在数据量小的表tmp上方，使用数据量小的表tmp做Hash表，如下图所示。并且tmp1表展示的行数为1000万行，表明统计信息已经更新。当发现explain返回结果中 rows=1000，说明缺少统计信息。一般性能不好时，其原因通常是优化器...
SELECT语法
CTE充当当前运行环境中的临时表，您可以在之后的查询中引用该表。CTE使用规则如下：在同一WITH子句中的CTE必须具有唯一的名字。在WITH子句中定义的CTE仅对在同一WITH子句中的其他CTE可以使用。假设A是子句中的第一个CTE，B是子句中的第二个...
2021年
使用HBase外部表，可以同步HBase中的数据到MaxCompute进行后续ETL处理，也可以关联HBase外部表进行联邦计算，或将MaxCompute数据输出到HBase表。目前读写HBase外部表处于公测阶段，不收取计算费用，也暂时不保证SLA。2021-02-08 华北2...
Range Clustering
又可以用组合键来精确定位某张表，示例命令如下：SELECT count(*)from mf_project.mf_tab WHERE project_name="xxxdw"AND name="adm_ctu_cle_kba_midun_trade_dd"AND type="TABLE;甚至可以用于区域查询，比如统计以 adm 开头的表：SELECT ...
地图容器（v1.x版本）
lng（可选）地图中心位置的经度，对应配置面板中的 地图中心>经度。如果两者都进行了配置，DataV优先使用数据中的配置。lat（可选）地图中心位置的纬度，对应配置面板中的 地图中心>纬度。如果两者都进行了配置，DataV优先使用数据中的配置...
表操作
列出项目下的表和视图 列出项目下所有的表、视图或符合某规则（支持正则表达式）的表、视图。具备项目查看对象列表权限（List）的用户。列出所有分区 列出一张表中的所有分区。当表不存在或为非分区表时，返回报错。创建表 创建非分区表、...
SELECT语法
CTE充当当前运行环境中的临时表，您可以在之后的查询中引用该表。CTE使用规则如下：在同一WITH子句中的CTE必须具有唯一的名字。在WITH子句中定义的CTE仅对在同一WITH子句中的其他CTE可以使用。假设A是子句中的第一个CTE，B是子句中的第二个...
MongoDB实例的CPU使用率高问题
查看和Kill活跃会话 正常运⾏中的MongoDB实例会话突然飙升⾄100%，绝⼤部分情况是业务侧的变化引起，可能是由于扫描行数过多、数据排序和聚合、业务流量突增等原因导致的。建议您使⽤以下方法查看。在 MongoDB管理控制台 的 CloudDBA>实例...
版本发布说明
降低REPLACE/UPSERT语句在包含GSI或UGSI的表上执行时的CPU消耗。缺陷修复 修复包含clustered index的表在创建local索引时，部分旧的执行计划没有清理的问题。修复在DRDS模式数据库中，执行多表 RENAME 时，有概率找不到物理表的问题。修复...
Hash Clustering
以下是一个简单的实验，使用TPC-H数据集中100GB的 lineitem 表，包含了 int、double、string 等多种数据类型，在数据和压缩方式等完全一样的情况下，对比使用Hash Clustering和未使用Hash Clustering的表存储大小，使用Hash Clustering的表...
数据治理
配置使用按表配置，详细操作步骤请参见 配置规则：按表（单表），以下为配置要点。配置分区表达式 ds=$[yyyymmdd-1]。创建规则。参数 规则（表行数不为0）规则（业务主键唯一）规则名称 表行数不为0 业务主键唯一 强弱 强 强 动态阈值 否 ...
基本概念
这项标准定义了如何使用预先渲染的、缓存的地图瓦片来提供地图数据，以实现快速、可靠且可伸缩的地图服务。WMS栅格：WMS（Web Map Service）是另一个由OGC定义的网络服务标准，它专注于提供栅格地图和影像。与WMTS不同的是，WMS不是提供...
V5.3.x系列实例版本说明
V5.3.4-15378085 日期 2018.09.20 类别 说明 新增特性 支持同步更新广播表，基于XA事务多写，无需异步数据同步。支持全局事务策略等多种动态参数，可通过控制台设置。使用XA作为默认事务策略。支持 SET@SESSION.BINLOG_ROWS_QUERY_LOG_...
表操作
列出项目空间下的表和视图 列出项目空间下所有的表、视图或符合某规则（支持正则表达式）的表、视图。具备项目空间查看对象列表权限（List）的用户。列出所有分区 列出一张表中的所有分区。具备项目空间查看对象列表权限（List）的用户。...
CREATE TABLE
参与Join的两个表，按相同的分布键（Join列）进行数据分布，使得两个表相同键值的数据被分布到同一分片，可直接在同一分片进行Join操作，无需在分片之间进行数据传输，能够有效减少查询过程中的数据重分布，提升查询性能。例如，需要按照...
PolarDB PostgreSQL（兼容Oracle）2.0版本与1.0版本...
索引增强 PolarDB PostgreSQL版（兼容Oracle）2.0版本 在处理B树索引（标准数据库索引）中的重复数据方面进行了有效优化，从而降低了B树索引的总体空间使用量，同时提高了总体查询性能。具体而言，该版本通过引入去重技术的索引压缩策略，...
8.0.1和8.0.2版功能对比
使用全局二级索引可以实现透明分区表，即您可以像使用单表一样使用分区表，大大减少分区键对分区表的使用限制。不支持 支持 数据压缩/归档/加密 表级压缩 对于指定的表，支持显著优于MySQL官方的压缩能力，通过压缩降低数据的存储成本。...
PolarDB PostgreSQL（兼容Oracle）2.0版本商业化公告
索引增强 PolarDB PostgreSQL版（兼容Oracle）2.0版本 在处理B树索引（标准数据库索引）中的重复数据方面进行了有效优化，从而降低了B树索引的总体空间使用量，同时提高了总体查询性能。具体而言，该版本通过引入去重技术的索引压缩策略，...
JSON类型
根据 RFC 7159 中的说明，JSON 数据类型是用来存储 JSON（JavaScript Object Notation）数据的。这种数据也可以被存储为 text，但是 JSON 数据类型的优势在于能强制要求每个被存储的值符合 JSON 规则。也有很多 JSON 相关的函数和操作符...
2022年
利用MaxCompute湖仓一体在MaxCompute中创建与EMR、Hadoop、DLF等外部数据源中表结构相同的表，利用 Create table like 语法将外部数据源中的表结构迁移至MaxCompute内，以获取更好的数据治理能力和访问性能。2022-09-23 全部地域 使用SQL...
常见问题
如果在DTS进行增量同步过程中删除了目标库中的某一个库或表，导致任务异常，您可以采取如下两种方案恢复任务：方法一：重新配置任务，待同步对象不选择导致任务失败的库或表。方法二：修改同步对象，移除导致任务失败的库或表。具体操作，...
其他函数
TABLE_EXISTS 查询指定的表是否存在。TRANS_ARRAY 将一行数据转为多行的UDTF，将列中存储的以固定分隔符格式分隔的数组转为多行。TRANS_COLS 将一行数据转换为多行数据的UDTF，将不同的列拆分为不同的行。UNBASE64 将BASE64编码格式字符串...
PolarDB PostgreSQL版：ePQ架构详解
PolarDB PostgreSQL版 实现了弹性跨机并行查询（ePQ）特性，能够帮助您解决原先的 PolarDB PostgreSQL版 在处理复杂的AP查询时会遇到的问题。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 11（内核小版本1.1.28及以上）...
计算成本控制
对输入表列裁剪 对于列数特别多的输入表，Map阶段处理只需要其中的某几列，可以通过在添加输入表时明确指定输入的列，减少输入量。例如只需要c1，c2列，可以参考如下设置。InputUtils.addTable(TableInfo.builder().tableName("wc_in")....
PolarDB PostgreSQL版：ePQ架构详解
PolarDB PostgreSQL版（兼容Oracle）实现了弹性跨机并行查询（ePQ）特性，能够帮助您解决原先的 PolarDB PostgreSQL版（兼容Oracle）在处理复杂的AP查询时会遇到的问题。前提条件 支持的 PolarDB PostgreSQL版（兼容Oracle）的版本如下：...
功能发布记录
支持读写MaxCompute Transactional类型表，支持读取MaxCompute Schema Evolution状态表（在MaxCompute侧执行过删除列、修改列顺序，修改列类型操作的表），支持Array、Date类型回写，详情请参见 通过创建外部表加速查询MaxCompute数据 和 ...
文档修订记录
Hologres V1.3版本实例停止服务通知 2024.03.01 新增创建外部表 新说明 Hologres外部表允许您访问存储在外部数据源（OSS）中的数据。创建外部表 2024.03.01 新增创建Foreign Server 新说明 在Hologres中，Foreign Server（外部服务器）用于...
什么是数据资源平台
支持面向多种云计算资源中的表及字段进行预览和表数据自动探查，提供表级别、字段级别探查结果图表化展示。数据标准：提供逻辑表标准、字段标准（数据元、指标、维度、数据字典等）管理能力。帮助用户通过设计标准数据元素，定义关键业务...
2023年
通过Paimon外部表，您可以访问存储在OSS上的Paimon表中的数据。本文介绍如何创建Paimon外部表。Paimon外部表 2023-09-14 新增授权实践 新说明 为确保MaxCompute项目数据的安全性，项目所有者或者具备授权权限的用户需要对项目内成员的权限...
功能发布记录 2022年之前
您可以通过开放消息获取DataWorks中的元数据及任务变更事件，实现DataWorks与您的自有系统深度集成。2021.05.21 华北2（北京）、华东1（杭州）、华南1（深圳）和华东2（上海）地域。开放消息 DataWorks任务调度新增年周期和月末最后一天...
ALTER TABLE
您可以通过ALTER TABLE语法改变表的结构，如增加列、增加索引、修改数据定义等。注意事项 不支持通过ALTER...INCREMENT属性，并且去除了主表中的局部索引，全局唯一索引默认在索引表的所有分库分表键上创建一个唯一索引，以实现全局唯一约束。...
数据查询
数据查询为用户提供对云计算资源中物理表基本情况的概览能力，帮助用户直观了解物理表基础信息、字段内容分布等情况，建立对数据表的宏观理解，为建立数据标准、定义数据模型、定义数据加工逻辑等工作提供基础依据。如果数据表格存储的是...
数据集常见问题
如何将两个数据源中的数据应用于同一个交叉表中？如何实现多表关联分析？如何通过参数SQL实现占比的灵活运算？目前Quick BI是不支持直接计算占比的，您可以通过参数SQL创建数据集，实现占比的计算。假设目前数据表结构为：日期（date）、...
CREATE TABLE（AUTO模式）
单表 PolarDB-X 支持创建表时通过指定关键字 SINGLE 来创建单表（不进行任何分区的表），示例如下：CREATE TABLE single_tbl(id bigint not null auto_increment,bid int,name varchar(30),primary key(id))SINGLE;广播表 PolarDB-X 支持...
文档修订记录
Tablestore数据源 Tablestore Stream数据源 2023.4.7 新增功能 数据集成 DataWorks数据集成支持使用IoT Reader插件读取物联网企业实例数据服务中提供的系统表、产品表、自定义存储表。IoT数据源 2023年3月更新记录 时间 特性 类别 描述 ...
主键与唯一键（DRDS模式）
沿用示例3中的order_tbl表，该表使用city作为分库拆分键，且只分库不分表，因此每个分库都只有1张分表。向order_tbl插入一条数据，执行成功。INSERT INTO order_tbl(order_id,city,name)VALUES(10001,"Beijing","phone");Query OK,1 row ...
2021年
新说明 MaxCompute支持渐进式计算，在处理数据过程中按照一定时间颗粒度自动按时间分区保存处理过程中的中间结果数据，在下一个周期执行时可以重复使用上周期已经计算好的重叠时间部分的数据，从而降低了计算资源消耗、执行调度时间，为...
- 产品推荐
- 这些文档可能帮助您