功能简介
数据同步为用户提供批量、实时多源异构数据的便捷同步或接入能力，系统提供完善的数据接入配置、任务运行监控等功能，有效保障数据接入的稳定性和可控性，满足各类平台、数据源及应用系统间的数据汇聚需求。同时支持对存储在基于ArcGIS、...
数据同步
数据同步为用户提供批量、实时多源异构数据的便捷同步或接入能力，系统提供完善的数据接入配置、任务运行监控等功能，有效保障数据接入的稳定性和可控性，满足各类平台、数据源及应用系统间的数据汇聚需求。前提条件 已根据快速入门教程...
【通知】数据管理DMS数据归档功能调整
为提升DMS数据归档功能的稳定性，DMS中国站计划在2023年12月22日进行功能调整，届时DMS的新、老用户在新创建数据归档至专属存储或用户OSS任务时，需要确保您的源实例的管控模式为稳定变更或安全协同。在调整时间前创建的归档任务（源实例为...
新功能发布记录
当存储即将出现溢出时，集群的存储空间可自动进行扩容，保障线上业务的稳定性，主要适用于业务数据量比较大，或者业务量波动较大且频繁的场景。设置存储自动扩容 访问地址优化 支持多机房部署方案添加两个访问地址。当访问地址为 2 个时，...
全球多活使用限制
为保障实例的稳定和数据一致性，在使用 全球多活 功能时，有一些使用约束需要您注意。使用限制 子实例需满足以下条件：部署模式为 经典（原本地盘）。存储介质为 内存型。架构为标准架构或集群架构。说明 请确保各子实例规格一致，如需进行...
步骤二：规划数仓
业务负责人 为板块数据的业务使用稳定性负责，可根据需要进行选择。数据负责人 为板块数据生产质量保障负责，可根据需要进行选择。单击 确定。步骤二：创建 MaxCompute 计算源 按照下图操作指引，进入 新建计算源 页面。在 新建计算源 页面...
步骤二：规划数仓
业务负责人 为板块数据的业务使用稳定性负责，可根据需要进行选择。数据负责人 为板块数据生产质量保障负责，可根据需要进行选择。单击 确定。步骤二：创建 MaxCompute 计算源 按照下图操作指引，进入 新建计算源 页面。在 新建计算源 页面...
银泰商业
到2019年，随着银泰业务的持续发展，IDC中残余的少量数据库资源对系统的性能及稳定性带来了很大的威胁，于是银泰寻求快速云化的方案，最终在2019年9月份实现了数据库的100%云化。业务挑战 以前进行核心交易库从Oracle转成云上MySQL，投入的...
性能调优
说明 对于数据量非常大的表，如果分片值太小，会导致分片数量过多，从而导致Tablestore服务压力增大，经常产生超时，影响数据写入链路的稳定性。如果当前要访问的Tablestore数据量大于10GB，则当前分片值建议为256MB；如果Tablestore数据量...
应用场景
实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线，您可以实时接入APP、WEB、IoT和数据库等产生的异构数据，统一管理，并投递到下游的分析、归档等系统，构建清晰的数据流，让您更好的释放数据的价值。...
迁移方案概览
说明 数据迁移在某些场景下可实现部分数据同步的功能，但数据同步的网络稳定性更好、功能更丰富，推荐您使用数据同步功能。更多区别，请参见 数据迁移和数据同步的区别是什么。迁移链路均支持跨地域的任务。是否支持创建跨阿里云账号的迁移...
支持的数据库
数据同步 数据同步功能帮助您实现数据源之间的数据实时同步，适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、查询与报表分流、云BI及实时数据仓库等多种业务场景。同步支持的数据库、版本和同步类型以及配置文档，请参见...
集群容灾能力
在阿里云上，如果使用的是云盘技术，则每一个云盘在后台都会对应三个数据副本，当其中任一个出现问题时，副本数据都会自动进行切换并恢复，以保证数据的可靠性。Hadoop HDFS是一个经历了长时间考验且具有高可靠性的数据存储系统，已实现了...
应用场景
自动空间优化累计优化超4.6P，自动异常修复覆盖电商等多场景数十万实例，自动处理异常覆盖超90%，实现“1-5-10”异常自愈能力，即1分钟发现，5分钟定位，10分钟恢复，为双11大促数据库稳定性提供了强有力的保障，同时也带来大量人力投入...
概述
DataWorks（数据工场，原大数据开发套件）是阿里云重要的PaaS（Platform-as-a-Service）平台产品，为您提供 数据集成、数据开发、数据地图、数据质量 和 数据服务 等全方位的产品服务，一站式开发管理的界面，帮助企业专注于数据价值的挖掘...
受众与核心能力
产品定位 DataWorks致力于为数据开发者、数据分析师、数据资产管理者，打造一个具备开放自主开发与全栈数据研发能力的一站式、标准化、可视化、透明化的智能大数据全生命周期云研发平台。DataWorks赋予用户仅通过单一平台，即可实现数据...
概述
解决方案 T+1全量同步一键建仓是指通过DLA控制台配置数据源（RDS、PolarDB for MySQL、MongoDB数据源、ECS自建数据库数据）和目标OSS数据仓库，系统按照您设定的数据同步时间自动、无缝的帮您把数据源中的数据同步到目标数据仓库OSS中，...
应用场景
数据审计 智能解析数据库及大数据的通信流量，细粒度审计数据访问行为，通过对数据源全量行为的审计溯源、危险攻击的实时告警、风险语句的智能预警，为您最敏感的数据库资产做好最安全的监控保障。个人信息合规 可精准区分和保护个人数据，...
性能监控常见问题
本文介绍了在使用性能监控功能过程中的常见问题。如何查看集群的最大连接数？...为什么IOPS一直处于较高水位 检查是否存在大事务，并通过 性能洞察（旧版）功能快速评估数据库负载情况，来找到引发性能问题的源头，以提升数据库的稳定性。
创建Hudi数据源
背景信息 Hudi即Apache Hudi，Hudi是一个通用的大数据存储系统，将核心仓库和数据库功能直接引入到数据库中，并支持记录级别的插入更新和删除数据的能力。权限说明 仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据...
什么是云原生数据库PolarDB分布式版
历经十余年淬炼，PolarDB-X 具备了强数据一致性、高系统稳定性、快速集群弹性等核心关键特性，并在司法财税、交通物流、电力能源等公共事业领域有广泛深入应用。PolarDB-X 坚定遵循自主可控、开放生态的发展思路，持续围绕MySQL开源生态...
功能特性
对于 Oracle 数据库，OceanBase 数据库能够支持绝大部分的 Oracle 语法和几乎全量过程性语言功能，可以做到大部分的 Oracle 业务进行少量修改后自动迁移。在多家金融行业客户和阿里巴巴内部已有多次迁移至 OceanBase 数据库的成功案例。...
使用MaxCompute控制台（离线）
查看上传记录 提交上传后，若数据量较大，需要耗费一些时间，您无需在提交页面一直等待，可后续通过单击 数据上传 页面右上角的 查看上传记录 查看通过该功能上传数据的详情记录。说明 通过该页面的 查看上传记录 查询到的记录详情也包含...
超级SQL模式
背景信息 为增强数据库的安全性和稳定性，管理员和DBA通常会配置SQL窗口的安全规则，例如限制用户在SQL窗口中执行生产库的DML，DML仅允许通过工单的形式执行。但上述安全规则也会给管理员和DBA等高权限的人员造成一定的不便，如果管理员和...
功能特性
设置删除保护 设置可维护时间段 为保障云原生多模数据库Lindorm实例的稳定性，阿里云会不定期对实例进行维护操作。可维护时间段是用户允许阿里云进行维护操作的时间段。设置可维护时间段 变更实例配置 支持通过Lindorm管理控制台修改实例的...
AliSQL功能概览
支持 支持 支持 Performance Insight 是专注于实例负载监控、关联分析、性能调优的利器，帮助您迅速评估数据库负载，找到性能问题的源头，提升数据库的稳定性。支持 支持 不支持 Binlog Cache Free Flush 对大事务提交写Binlog的阶段做了...
数据集成：全领域数据汇聚
DataWorks的数据集成功能模块是稳定高效、弹性伸缩的数据同步平台，致力于提供复杂网络环境下、丰富的异构数据源之间高速稳定的数据移动及同步能力。功能概述 DataWorks数据集成支持离线同步、实时同步，以及离线和实时一体化的全增量同步...
数据组织优化
另外，对于超过一定时间跨度的文件也不会进行合并，因为将时间跨度太大的数据合并在一起可能导致在进行Time travel或者增量查询时读取大量不属于此次查询时间范围的历史数据，进而造成不必要的读放大问题。由于数据是按照 BucketIndex 来...
常见问题
造成服务不稳定的情况可能有很多，最常见的情况是znode数量过大或者snapshot过大，由于ZooKeeper将所有的znode维护在内存中，并且需要在节点间进行数据同步，因此过大的znode数量或者容量会对服务稳定性造成影响。ZooKeeper的定位是一个...
云数据库RDS简介
Statement Queue 确保执行计划的稳定性；Inventory Hint 快速提交/回滚事务以提高业务吞吐能力；Thread Pool 优化了并发控制机制，保证了数据库在高并发环境下的高性能；Faster DDL 提升了在线DDL的并发处理性能。AliPG 在开源PostgreSQL的...
OceanBase 4.x 简介
数据开发（ODC）：稳定性：大幅度提升了 PL 编译能力及稳定性。安全性：完善了变更管控流程，支持自定义任务流程，支持数据导出脱敏能力。易用性：对外提供了统一的堡垒机、审批集成能力，支持多种主题切换，现有核心功能交互升级。更强...
JindoFS实战演示
Fluid+JindoFS对海量小文件的训练加速 Fluid+JindoFS对海量小文件的训练加速 2021-07-13 在AI训练场景中处理海量小文件面临很多问题，例如远程调用频繁，NameNode压力大、访问数据延时高、高频访问稳定性低。Fluid JindoRuntime提供了高效...
计算设置概述
计算引擎 说明 操作文档 离线计算引擎 MaxCompute 阿里原生的大数据计算平台，承载海量数据存储与计算能力，高效率与高稳定性。设置Dataphin实例的计算引擎为MaxCompute AnalyticDB for PostgreSQL 专注于OLAP领域的分析型数据库，是云端...
产品概述
PolarDB-X 1.0 的稳定性建立在合理使用久经考验的MySQL的基础上，单机MySQL在高并发、大量数据存储和复杂计算场景下，呈现出相对弱势的状态。PolarDB-X 1.0 将数据拆分到多个MySQL存储，使每个MySQL承担合适的并发、数据存储和计算负载，...
性能优化与诊断简介
性能洞察（新版）基于MySQL的performance_schema能力汇聚SQL信息，评估目标数据库负载情况，找到性能问题的源头，提供相应的治理方案，提升数据库的稳定性。性能洞察（旧版）负载监控、分析、性能调优的利器，以简单直观的方式帮助您迅速...
文档更新动态（2023年）
更新说明 创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 创建Kafka数据源 离线集成配置优化 新增Apache Doris数据源的离线集成。...
功能更新动态（2023年）
创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 创建Kafka数据源 离线集成 新增Apache Doris数据源的离线集成。整库迁移任务支持...
周期任务补数据
对于汇总逻辑表，系统会根据指标的业务相关性原则（引用相同的业务限定或原子指标）、归属同一物化节点的一致性原则，系统提示选中进行补数据的连带字段，提供数据正确性和业务稳定性的保障。例如，指标A和指标B的业务限定相同，当该业务...
周期任务补数据
对于汇总逻辑表，系统会根据指标的业务相关性原则（引用相同的业务限定或原子指标）、归属同一物化节点的一致性原则，系统提示选中进行补数据的连带字段，提供数据正确性和业务稳定性的保障。例如，指标A和指标B的业务限定相同，当该业务...
升级数据库大版本
本文介绍云数据库MongoDB支持升级的数据库大版本以及如何升级数据库大版本。注意事项 升级分片集群实例的数据库大版本时，实例的协议类型需为 MongoDB协议。升级采用轮转升级的方式进行，升级过程中会自动对实例进行2~3次重启，请在业务低...
- 产品推荐
- 这些文档可能帮助您