新功能发布记录
迁移 RDS PostgreSQL 实例的数据至 OceanBase 数据库 Oracle 租户 同步 RDS PostgreSQL 实例的数据至 OceanBase 数据库 Oracle 租户 数据库至数据库的数据同步项目新增支持匹配规则能力，可以助力用户在数据同步项目中通过简单的配置通配符...
MaxCompute数据开发规范
本文为您介绍MaxCompute数据开发规范，包括项目空间、表、视图、工作流节点和编码规范。在进行数据开发前，请做好数据仓库研发流程的阶段规划，了解各种角色及其职责，具体内容请参见 数据仓库研发规范概述。项目空间管理规范 关于项目划分...
场景：调度参数在数据集成的典型应用场景
场景一：同步增量数据、场景四：同步历史数据 动态表名或文件路径 表名或文件名使用 调度参数，可实现每次同步不同表的目的。例如OSS、FTP，MySQL等插件。部分插件可能需要转脚本配置。场景二：同步动态表名或文件名中的数据 在同步时为...
实时物化视图
AnalyticDB PostgreSQL版 提供了实时物化视图功能，相较于普通（非实时）物化视图，实时物化视图无需手动调用刷新命令，即可实现数据更新时自动同步刷新物化视图。当基表发生变化时，构建在基表上的实时物化视图将会自动更新。您还可以在...
通过视图管控数据权限
实现方式 您可以通过如下操作步骤实现上述场景需求：为省份1和省份2分别创建一个视图 v1 和 v2，语句如下：查询省份1数据的视图创建语句。CREATE SQL SECURITY DEFINER VIEW v1 AS SELECT*FROM customer WHERE province_id=1;查询省份2数据...
实时物化视图（Beta）
day|avg-+-20210101|4.5 这时候一种办法是再建一张以day为维度进行聚合的物化视图，但这样会导致物化视图的数量膨胀，Hologres提供了一种基于聚合中间状态的实现，使得用户仅用一张物化视图，实现不同维度聚合查询。这里以Avg为例，修改...
2023年
全局执行计划缓存 2023年12月 支持创建/刷新物化视图的批量写入，以更快的速度完成物化视图的创建/刷新。创建/刷新物化视图支持批量写入 2023年12月 支持闪回删除功能，用于快速恢复已经删除的表，以及查看和清理回收站等，方便您找回数据...
什么是数据资源平台
阿里云数据资源平台是数据资产定义、加工、管理、服务的全流程平台，提供数据同步、数据查询、数据标准、数据建模、数据加工、质量评估、业务模型构建、资产管理、数据服务等功能，为智能数据应用持续稳定供给全量、标准、干净、智能的数据...
创建物化视图
ON DEMAND 按需触发刷新，即您可以在需要刷新物化视图时手动触发刷新，或根据刷新需求配置 NEXT 自动触发刷新。默认全量刷新触发模式为 ON DEMAND。ON OVERWRITE 物化视图引用的基表在执行 INSERT OVERWRITE 语句导致数据被覆盖后，会触发...
方案概述
对比项 物理迁移（物理复制）逻辑迁移（DTS数据同步）是否需要DTS工具 不需要 需要 是否支持迁移或同步增量数据 支持 支持 是否影响源RDS操作 不影响 不影响 源和目标的MySQL版本能否不同 仅支持5.6和5.7本地盘实例相同版本升级 支持相同...
版本及存储引擎
集群同步 推出了新的同步工具mongosync，它能支持跨任何环境（包括混合环境、Atlas、本地以及边缘环境）的数据同步（两个MongoDB实例间连续且单向的数据同步）。用户还可以实时控制和监控整个同步过程，按需启动、停止、恢复甚至反转同步。...
自动化治理-物化视图
当您在面对大数据计算任务频繁且存在大量相似子查询场景时，DataWorks支持自动化治理，智能推荐物化视图，为您提供了一种智能化、自动化的解决方案。当您启用此功能时，DataWorks能够自动识别和分类MaxCompute中的相似子查询，并生成物化...
DBMS_MVIEW
DBMS_MVIEW提供了全部物化视图刷新、指定物化视图刷新、依赖于指定对象的物化视图刷新以及获取依赖于指定对象的物化视图的能力。DBMS_MVIEW 子程序总览 子程序 说明 REFRESH_ALL_MVIEWS Procedure 刷新全部物化视图。REFRESH Procedure ...
实时物化视图
对于这种情况，PolarDB推出了实时物化视图的功能，实时物化视图对于物化视图具有以下优势：实时物化视图支持语句级别更新，当依赖表进行DML（插入/删除/更新）操作，在DML语句结束时，实时物化视图会自动更新物化视图内的数据，让实时物化...
实时物化视图
对于这种情况，PolarDB推出了实时物化视图的功能，实时物化视图对于物化视图具有以下优势：实时物化视图支持语句级别更新，当依赖表进行DML（插入/删除/更新）操作，在DML语句结束时，实时物化视图会自动更新物化视图内的数据，让实时物化...
实时物化视图
对于这种情况，PolarDB推出了实时物化视图的功能，实时物化视图对于物化视图具有以下优势：实时物化视图支持语句级别更新，当依赖表进行DML（插入/删除/更新）操作，在DML语句结束时，实时物化视图会自动更新物化视图内的数据，让实时物化...
实时物化视图
对于这种情况，PolarDB推出了实时物化视图的功能，实时物化视图对于物化视图具有以下优势：实时物化视图支持语句级别更新，当依赖表进行DML（插入/删除/更新）操作，在DML语句结束时，实时物化视图会自动更新物化视图内的数据，让实时物化...
案例二
业务背景 某客户为鞋服类企业客户提供自动化营销...业务效果 客户使用物化视图定时自动刷新功能，每天晚上定时刷新视图。视图中已有运算好的数据，利于快速查询，生成报表。同时利用定时刷新功能，客户可以节省维护额外的任务调度系统开销。
跨阿里云账号同步RDS MySQL实例
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE、REPLACE DDL ALTER TABLE...
SQL
本章节主要介绍 PolarDB PostgreSQL版 中的不同视图详细信息，可通过查询不同视图获取相关SQL信息，进而方便定位性能问题。SQL 您可以通过查询本文描述的视图来获取相关SQL信息。pg_stat_statements 说明 pg_stat_statements视图依赖于 pg_...
SQL
本章节主要介绍 PolarDB PostgreSQL版（兼容Oracle）中的不同视图详细信息，可通过查询不同视图获取相关SQL信息，进而方便定位性能问题。SQL 您可以通过查询本文描述的视图来获取相关SQL信息。pg_stat_statements 说明 pg_stat_statements...
视图
视图是从一个或多个表导出的虚拟表，其具有普通表的结构，但是不实现数据存储。视图内容由查询定义，主要包括单表视图和多表视图。单表视图一般用于查询和修改，会改变表数据。多表视图一般用于查询，不会改变表数据。本文为您介绍如何新建...
查询物化视图
本文介绍如何在任意查询语法中（例如 SELECT，INSERT INTO SELECT WITH 等）使用物化视图进行查询。权限要求 仅需具备物化视图的SELECT权限，无需具备物化视图所引用基表的SELECT权限。说明 您可以使用 GRANT 命令为用户添加物化视图的...
物化视图
刷新 当您创建或删除物化视图后，可以右键单击 物化视图 后，选择 刷新，对同步信息进行刷新。删除物化视图 您可以右键单击目标物化视图，选择 删除物化视图。确认信息后，单击 确认 完成删除操作。查询物化视图 您可以在物化视图详情页右...
全球消息路由
什么是全球消息路由 云消息队列 RocketMQ 版 的全球消息路由功能依托阿里云优质基础设施实现的高速通道专线（高速通道无需另行开通），高效地实现不同地域之间的消息同步复制。具体实现如下图所示。计费影响 全球消息路由为 云消息队列 ...
弹性物化视图
物化视图可用于加速分析，并能简化ETL，适用于多种场景，例如报表类业务、大屏展示需求、来自BI工具的查询等等。AnalyticDB MySQL版 湖仓版（3.0）支持在创建物化视图时指定Job型资源组，并使用Job型资源组的弹性能力刷新物化视图。本文...
通过向导模式配置离线同步任务
数据集成提供向导式的开发引导，您无需编写任何代码，通过在界面勾选数据来源与去向，并结合DataWorks调度参数，实现将源端单表或分库分表的全量或增量数据周期性同步至目标数据表。本文为您介绍向导模式配置离线同步任务的常规配置，各...
配置数据同步任务
数据同步功能帮助您实现数据源之间的数据实时同步，适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、云BI及实时数据仓库等多种业务场景。本文以 RDS MySQL 同步至 RDS MySQL 为例为您介绍在DTS专属集群中配置数据同步任务...
RDS MySQL I/O高问题
附：InnoDB I/O系统介绍 InnoDB通过一套独立的I/O系统来处理数据页的读取和写入，如果SQL请求的数据页不在Buffer Pool中，会产生物理I/O，需要读写底层存储的数据：读数据页操作 通过同步I/O实现，同步I/O调用底层的读接口。写数据页操作 ...
下载和导入同步对象配置
数据传输支持下载数据同步项目的同步对象配置信息，并支持通过导入 CSV 文件的方式实现自动配置和确认同步对象的配置信息，以实现保存项目配置信息和批量、快速配置项目。下载对象配置 新建数据同步项目后，您可以下载同步对象的配置信息。...
物化视图操作
物化视图（Materialized View）是一种预先计算的方式，通过保存某些耗时操作（例如JOIN、AGGREGATE）的结果，以便在查询时直接复用，从而避免重复执行这些耗时操作，最终实现加速查询的目的。本文将介绍物化视图相关的命令、语法格式，并...
数据方案概览
结构同步 支持对比不同数据库、指定表之间的表结构，产生差异化脚本并执行到目标数据库。影子表同步 支持根据源表的表结构自动在当前库中创建影子表，支持周期性同步。空库初始化 支持将源数据库的表结构同步至空数据库中，实现快速同步...
查询改写功能
云原生数据仓库AnalyticDB MySQL版 不仅支持查询物化视图，还支持查询改写，即执行用户查询时，自动将查询改写成对物化视图的查询，提高查询效率。本文介绍如何使用物化视图的查询改写功能。前提条件 AnalyticDB for MySQL 湖仓版（3.0）和...
数据集成侧同步任务能力说明
DataWorks为您提供多种数据源之间进行不同数据同步场景的全增量同步任务，包括实时数据同步、离线全量同步、离线增量同步等同步场景，助力企业数据更高效、更便捷的一键上云。背景信息 实际业务场景下，数据同步通常不能通过一个或多个简单...
PolarDB MySQL版间的同步
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 级联双向同步 多对一单向同步 一对一双向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、...
项目级别Information Schema
不同视图存在不同的时效性或系统默认的保留周期，超过保留周期的数据将无法访问。您可以手工从Information_Schema周期性导出数据到本地表中，备份更长周期的历史数据。费用说明如下。对于使用按量计费计算资源的项目，针对Information ...
2023年
2023-05-06 全部地域 数学函数 ISNAN ATAN2 POSITIVE NEGATIVE 时间日期函数 DAYOFWEEK DAYOFYEAR CURRENT_TIMEZONE 字符串函数 INITCAP 物化视图支持定时刷新数据 物化视图支持多种定时方式刷新数据，让物化视图能保持更新鲜的数据供用户...
一键建仓
您只需要在RDS PostgreSQL侧创建发布（PUBLICATION），在 AnalyticDB PostgreSQL版 侧创建一键建仓任务订阅并发布，即可实现数据实时同步。注意事项 仅 AnalyticDB PostgreSQL版 存储弹性模式实例且内核版本为V6.3.8.0及以上，才支持一键建...
什么是EMR Serverless StarRocks
StarRocks的物化视图能够实现自动同步。每当原始表中的数据发生任何变更，物化视图能即时感知并自动完成相应的更新操作，确保与原表数据始终保持一致。此外，StarRocks还具备智能选择物化视图的功能。在查询规划阶段，若检测到有能够提升...
整库离线同步至Elasticsearch
整库离线同步方案包括周期性全量同步、周期性增量同步、一次性全量同步、一次性增量同步、一次性全量周期性增量同步。本文以一次性全量周期性增量同步至Elasticsearch为例，为您讲解如何将整库数据离线同步至Elasticsearch。前提条件 已...
- 产品推荐
- 这些文档可能帮助您