新功能发布记录
OceanBase 数据库之间的数据迁移 支持 TiDB 数据库至 OceanBase 数据库 MySQL 租户的结构迁移、全量迁移、增量同步、全量校验和反向增量 迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户 支持 PolarDB-X 1.0 数据库至 OceanBase ...
实时物化视图
实时物化视图对于物化视图具有以下优势：实时物化视图支持语句级别更新，当依赖表进行DML（插入/删除/更新）操作，在DML语句结束时，实时物化视图会自动更新物化视图内的数据，让实时物化视图的数据始终和依赖表的数据保持一致。...
实时物化视图
实时物化视图对于物化视图具有以下优势：实时物化视图支持语句级别更新，当依赖表进行DML（插入/删除/更新）操作，在DML语句结束时，实时物化视图会自动更新物化视图内的数据，让实时物化视图的数据始终和依赖表的数据保持一致。...
RDS术语
DMS Data Management，数据管理，是一种阿里云提供的图形化的数据管理工具，集数据管理、结构管理、访问安全、BI图表、数据趋势、数据轨迹、性能与优化和服务器管理于一体的数据管理服务。支持MySQL、SQL Server、PostgreSQL、MongoDB、...
RDS术语
A AliPG 阿里云支持一系列兼容PostgreSQL的云数据库服务产品，这些云数据库服务采用统一的数据库内核（简称AliPG），AliPG兼容PostgreSQL开源数据库，于2015年正式商用，支持PostgreSQL主流大版本，已稳定运行多年，支撑了大量阿里巴巴集团...
RTMP视频流播放器
重要 RTMP视频流播放器组件暂时不支持在谷歌浏览器中播放视频，RTMP是依赖flash的，谷歌浏览器不支持flash，您可以转换成hls格式，用阿里云流播放器组件播放视频，详情请参见 阿里云流播放器。图表样式 RTMP视频流播放器是媒体组件的一种，...
实时物化视图
实时物化视图对于物化视图具有以下优势：实时物化视图支持语句级别更新，当依赖表进行DML（插入/删除/更新）操作，在DML语句结束时，实时物化视图会自动更新物化视图内的数据，让实时物化视图的数据始终和依赖表的数据保持一致。...
自建MySQL同步至RDS MySQL
数据传输服务DTS（Data Transmission Service）支持在不影响业务正常运行的情况下，将部署在本地或ECS的MySQL数据库同步至 RDS MySQL 实例。DTS默认仅实时同步增量数据，您也可以选择同时进行库表结构同步和全量同步，平滑地完成自建MySQL...
实时物化视图
实时物化视图对于物化视图具有以下优势：实时物化视图支持语句级别更新，当依赖表进行DML（插入/删除/更新）操作，在DML语句结束时，实时物化视图会自动更新物化视图内的数据，让实时物化视图的数据始终和依赖表的数据保持一致。...
数据模型架构规范
公共处理逻辑下沉及单一 底层公用的处理逻辑应该在数据调度依赖的底层进行封装与实现，不要让公用的处理逻辑暴露给应用层实现，不要让公共逻辑在多处同时存在。成本与性能平衡 适当的数据冗余可换取查询和刷新性能，不宜过度冗余与数据复制...
从自建PostgreSQL（10.0及以下版本）增量迁移至RDS ...
迁移限制 一个数据迁移任务只能对一个数据库进行数据迁移，如果有多个数据库需要迁移，则需要为每个数据库创建数据迁移任务。待迁移的数据库名称中间不能包含短划线（-），例如dts-testdata。如果迁移过程中源库发生了主备切换，DTS的增量...
百度智能云云数据库RDS MySQL迁移到阿里云
注意事项 对于七天之内的异常任务，DTS会尝试自动恢复，可能会导致迁移任务的源端数据库数据覆盖目标实例数据库中写入的业务数据，迁移任务结束后务必将DTS访问目标实例账号的写权限用 revoke 命令回收掉。操作步骤（新版控制台）进入迁移...
Google Cloud SQL for MySQL数据库迁移到阿里云
注意事项 对于七天之内的异常任务，DTS会尝试自动恢复，可能会导致迁移任务的源端数据库数据覆盖目标实例数据库中写入的业务数据，迁移任务结束后务必将DTS访问目标实例账号的写权限用 revoke 命令回收掉。操作步骤（新版控制台）进入迁移...
华为云云数据库RDS MySQL迁移到阿里云
注意事项 对于七天之内的异常迁移任务，DTS会尝试自动恢复，可能会导致迁移任务的源端数据库数据覆盖目标实例数据库中写入的业务数据，迁移任务结束后务必将DTS访问目标实例账号的写权限用 revoke 命令回收掉。操作步骤 登录 DTS控制台。在...
数据投递
数据传输服务DTS（Data Transmission Service）提供的数据投递功能，用户可以通过SDK将各种类型的数据源投递到DTS，再由DTS同步至目标数据库，从而支持更多类型的数据源。应用场景 数据投递功能适用于以下任一场景：源端为DTS同步方案暂不...
从腾讯云MySQL迁移至阿里云
对于七天之内的异常任务，DTS会尝试自动恢复，可能会导致迁移任务的源端数据库数据覆盖目标实例数据库中写入的业务数据，迁移任务结束后务必将DTS访问目标实例账号的 写权限 用 revoke 命令回收掉。迁移前准备工作 登录腾讯云MySQL数据库...
RDS SQL Server实例间数据迁移
如为增量迁移任务，DTS要求源数据库的数据日志保存24小时以上，如为全量迁移和增量迁移任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量迁移完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
概述
按备份集恢复：依赖数据备份恢复数据，仅支持将数据恢复至数据备份的时刻。按时间点恢复：依赖数据备份+日志备份恢复数据，支持将数据恢复至备份时间范围内的 任意时间点（精确至秒）。例如，实例有2021年01月01日00:00:01的数据备份集以及...
2.0数据类型版本
本文为您介绍MaxCompute 2.0数据类型版本的定义、使用场景、支持的数据类型以及与其它数据类型版本的差异。定义 项目空间选择数据类型版本为2.0数据类型版本时，项目空间的数据类型属性参数定义如下。setproject odps.sql.type.system.odps...
RDS SQL Server实例间的迁移
如为增量迁移任务，DTS要求源数据库的数据日志保存24小时以上，如为全量迁移和增量迁移任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量迁移完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
PolarDB-X 1.0同步至Elasticsearch
如为增量数据同步任务，DTS要求源数据库的本地Binlog日志保存24小时以上，如为全量数据同步和增量数据同步任务，DTS要求源数据库的本地Binlog日志至少保留7天以上（您可在全量同步完成后将Binlog保存时间设置为24小时以上），否则DTS可能因...
Teradata迁移至云原生数据仓库 AnalyticDB PostgreSQL...
数据传输服务DTS（Data Transmission Service）支持将Teradata迁移至 云原生数据仓库AnalyticDB PostgreSQL版。前提条件 该迁移任务仅支持在新版控制台配置。Teradata数据库为17及以下版本。已创建目标 AnalyticDB PostgreSQL 实例，如未...
Bucket Shuffle Join
Bucket Shuffle Join只生效于Join条件为等值的场景，原因与Colocation Join类似，都依赖hash计算来确定数据分布。在等值Join条件中包含两张表的分桶列，当左表的分桶列为等值的Join条件时，它有很大概率会被规划为Bucket Shuffle Join。...
资产质量概述
因业务系统的原始数据的规范性无法得以保障，所以Dataphin需要定义数据分析的质量，以满足资产质量的时效性、准确性、完整性、一致性、有效性，助您真正能够依赖数据进行经营决策。数据质量流程引导 数据质量流程引导帮助您从（可选）配置...
资产质量概述
因业务系统的原始数据的规范性无法得以保障，所以Dataphin需要定义数据分析的质量，以满足资产质量的时效性、准确性、完整性、一致性、有效性，助您真正能够依赖数据进行经营决策。数据质量流程引导 数据质量流程引导帮助您从（可选）配置...
设置调度依赖最佳实践
配置调度依赖时，需要根据本节点输出名称作为关联项来给任务间设置依赖关系。本文将为您介绍如何配置任务调度依赖的输入输出。配置任务的本节点输入 您可以通过以下两种方式配置本节点输入：使用代码自动解析功能，解析出任务的依赖。手动...
提交节点时提示：输入输出和代码血缘分析不匹配
例如，代码中SELECT一张表A，并且表A是个调度节点每天定时产出的表（即表A不是非周期性生成数据的表），如果没有将表A添加为本节点的依赖的父节点，形成依赖关系的时，某次生成表A的节点没有执行成功的话，下游节点取表A的数据即取用的表A...
对象标识符类型
对象标识符（OID）被本数据库用来在内部作为多个系统表的主键。类型 oid 表示一个对象标识符。也有多个 oid 的别名类型命名为 reg``something。oid 类型目前被实现为一个无符号 4 字节整数。因此，在大型数据库中它并不足以提供数据库范围...
DLF数据探索快速入门-淘宝用户行为分析
DLF产品（数据湖构建）提供数据发现和数据探索的功能，本文介绍如何通过DLF完成对淘宝用户行为样例的分析。操作流程 服务开通：开通阿里云账号及DLF和OSS相关服务。样例数据集下载和导入：下载样例数据（csv文件），并上传至OSS。DLF数据...
实时消费Kafka数据
当您需要将Kafka数据写入 云原生数据仓库AnalyticDB PostgreSQL版，且不希望使用其他数据集成工具时，可以通过实时数据消费功能直接消费Kafka数据，减少实时处理组件依赖，提升写入吞吐。Apache Kafka是一个容错、低延迟、分布式的发布-...
XML 类型
使用这种数据类型要求在安装时用 configure-with-libxml 选项编译。xml 类型可以存储格式良好的遵循 XML 标准定义的“文档”，以及“内容”片段，它是通过引用更宽泛的“document node”XQuery 和 XPath 数据模型来定义的。大致上说，这...
产品概述
产品描述 Dataphin是集产品、技术、方法论于一体的智能大数据平台建设引擎，为您提供数据引入、规范定义、建模研发、资产管理、数据服务等全链路智能数据建设及治理服务。功能 描述 Dataphin全托管 全托管又称公共云多租户模式，只需购买...
创建Kudu数据源
背景信息 Kudu提供接近于关系数据库管理系统（RDBMS）的功能和数据模型，提供类似于关系型数据库的存储结构来存储数据，允许用户以和关系型数据库相同的方式插入、更新、删除数据。Kudu仅仅是一个存储层，并不存储数据，因此需要依赖外部的...
Hudi概述
Apache Hudi是一种数据湖的存储格式，在Hadoop文件系统之上提供了更新数据和删除数据的能力以及消费变化数据的能力。Hudi表类型 Hudi支持如下两种表类型：Copy On Write 使用Parquet格式存储数据。Copy On Write表的更新操作需要通过重写...
区域柱状图
区域柱状图是三维城市构建器的图层，用来表达面状区域上的动态变化指标，如停车场的已用车位数。区域柱状图支持独立的样式和数据配置，包括区域柱状图的默认颜色、默认高度和内外柱半径比等。本文介绍区域柱状图配置项的含义。在场景编辑器...
调度依赖配置指引
方式一：自定义依赖关系 若DataWorks上任务间不存在强血缘依赖（例如，不强依赖上游某个分区数据，仅取上游当前时间点最大分区数据），或依赖的数据非周期调度节点产出的表数据（例如，本地上传的表数据），则您可自定义节点的依赖关系。...
区域柱状图
区域柱状图是三维城市构建器的图层，用来表达面状区域上的动态变化指标，如停车场的已用车位数。区域柱状图支持独立的样式和数据配置，包括区域柱状图的默认颜色、默认高度和内外柱半径比等。本文介绍区域柱状图配置项的含义。在场景编辑器...
区域柱状图
区域柱状图是三维城市构建器的图层，用来表达面状区域上的动态变化指标，如停车场的已用车位数。区域柱状图支持独立的样式和数据配置，包括区域柱状图的默认颜色、默认高度和内外柱半径比等。本文介绍区域柱状图配置项的含义。在场景编辑器...
背景信息以及准备工作
在使用DLA对OSS中的历史数据按天进行清洗时，由于数据清洗的SQL是固定的，只是每次执行的时候需要传入不同的日期，因此我们可以通过DataWorks来循环调度DLA数据清洗任务。针对上述场景，我们需要在DataWorks中完成以下工作：部署一个赋值...
ADAM概览
异构数据库迁移ADAM（Advanced Database&Application Migration）提供数据库平滑迁云解决方案，全面评估上云可行性、成本和云存储选型，内置实施协助、数据迁移、应用迁移等工具，覆盖数据库迁移的全生命周期，帮助企业降低数据库和应用...
- 产品推荐
- 这些文档可能帮助您