网络资源
网络资源是指用于节点之间通信和数据传输的硬件和软件资源，除了包括广域网、局域网、交换机、路由器，还包括常用到的专有网络、虚拟交换机、负载均衡、弹性公网、VPN、DNS、CDN等资源。在分布式系统中，网络资源的主要作用是支持节点之间...
基本概念
本章节介绍 云网管（CMN）使用过程中遇到的常用...SNMP 简单网络管理协议是广泛应用于TCP/IP网络的网络管理标准协议，提供对网络设备高频率采集运行状态数据的手段。OID Object Identifier，SNMP树中唯一标识指标的由数字节点组成的序列ID。
新功能发布记录
一键诊断 切换专有网络和交换 数仓版（3.0）集群支持切换专有网络和交换机。切换专有网络VPC和交换机 湖仓版 类别 名称 说明 相关文档 新增 自定义Spark镜像 当 AnalyticDB for MySQL Spark默认镜像无法满足您的需求时，您可以基于默认镜像...
基于ECS实例创建伸缩组
如果您需要在业务需求量有波动时自动增加或减少ECS实例的数量...创建伸缩组时需要指定专有网络和交换机，如果该伸缩组所使用的启动模板中也指定了专有网络和交换机，则在弹性扩容时，伸缩组中指定的专有网络和交换机会替换掉启动模板中指定的...
LTS（原BDS）服务介绍
支持简单易用的数据交换、处理、订阅等能力，满足用户的数据迁移、实时订阅、数湖转存、数仓回流、单元化多活、备份恢复等需求，实现面向Lindorm的一站式数据生态服务。核心能力 云原生分布式：LTS是一个基于ECS部署的分布式系统，具备良好...
网络ACL概述
网络ACL与安全组 与交换机绑定的网络ACL规则控制流入和流出交换机的数据流，与ECS实例相关的安全组规则控制流入和流出ECS实例的数据流。网络ACL和安全组的基本差异如下表所示。对比项 网络ACL 安全组 运行范围 在交换机级别运行。在ECS实例...
实时消费Kafka数据
重要 如果Kafka服务与 云原生数据仓库AnalyticDB PostgreSQL版 实例属于同一专有网络但是不在同一交换机（vSwitch）下，您需要进行如下操作：将Kafka服务所在交换机的IPv4网段添加至 云原生数据仓库AnalyticDB PostgreSQL版 实例白名单中。...
创建PolarDB-X 2.0数据订阅任务
消费网络类型 网络类型 数据订阅实例的 网络类型 固定为 专有网络，您需要选择具体的 专有网络 和 虚拟交换机。更多信息请参见 专有网络。说明 任务创建成功后，消费网络类型 不可更改。若您的数据订阅客户端部署在专有网络上，则建议选择...
LTS（原BDS）服务介绍
支持简单易用的数据交换、处理、订阅等能力，满足用户的数据迁移、实时订阅、数湖转存、数仓回流、单元化多活、备份恢复等需求，实现面向云HBase的一站式数据生态服务。核心能力 云原生分布式：LTS是一个基于ECS部署的分布式系统，具备良好...
基础设施安全
网络ACL与安全组 与交换机绑定的网络ACL规则控制流入和流出交换机的数据流，与ECS实例相关的安全组规则控制流入和流出ECS实例的数据流。网络ACL和安全组的基本差异如下表所示。对比项 网络ACL 安全组 功能 通过自定义设置网络ACL规则，并将...
行业趋势与背景
传统的“IOE”系统为集中式系统，但是随着“摩尔定律”的逐渐失效，单台服务器上的性能极限已经慢慢显露，在这种情况下，技术人员逐渐开始探索将原有的集中式系统改造为分布式系统，通过多台中低端服务器的水平扩展方式替换一台高性能...
C100售前支持相关问题
本文介绍了您在使用C100系列数据库审计服务前可能遇到的问题和解答，帮助您更好地理解和使用产品。咨询类问题 如何通过数据库审计实现数据库的安全监控及合规？数据库审计C100实例通过对数据库全量行为的审计溯源、危险攻击的实时告警、...
Kafka实时ETL同步至Hologres
实时ETL同步方案根据来源Kafka指定Topic的内容结构对目的Hologres表结构做初始化，然后将Kafka指定Topic的存量数据同步至Hologres，同时也持续将增量数据实时同步至Hologres。本文为您介绍如何创建Kafka实时ETL同步至Hologres任务。使用...
控制台发布记录
10月19日 库表恢复方式1：从备份集恢复 库表恢复方式2：恢复到过去时间点 PolarDB 支持在线切换专有网络VPC和交换机 PolarDB MySQL版 企业版支持灵活切换连接地址（包括主地址、集群地址、自定义地址）的专有网络VPC和交换机。该功能可将 ...
MaxCompute数据离线同步至ClickHouse
背景信息 云数据库ClickHouse是面向联机分析处理的列式数据库。数据集成支持从ClickHouse同步数据到其他目标端，也支持从其他目标端同步数据到ClickHouse。本文以MaxCompute离线同步写入ClickHouse为例，为您介绍ClickHouse离线同步的完整...
创建PolarDB PostgreSQL版数据订阅任务
消费网络类型 网络类型 数据订阅实例的 网络类型 固定为 专有网络，您需要选择具体的 专有网络 和 虚拟交换机。更多信息请参见 专有网络。说明 任务创建成功后，消费网络类型 不可更改。若您的数据订阅客户端部署在专有网络上，则建议选择...
创建PolarDB PostgreSQL版（兼容Oracle）数据订阅任务
消费网络类型 网络类型 数据订阅实例的 网络类型 固定为 专有网络，您需要选择具体的 专有网络 和 虚拟交换机。更多信息请参见 专有网络。说明 任务创建成功后，消费网络类型 不可更改。若您的数据订阅客户端部署在专有网络上，则建议选择...
创建PolarDB-X 1.0数据订阅任务
消费网络类型 网络类型 数据订阅实例的 网络类型 固定为 专有网络，您需要选择具体的 专有网络 和 虚拟交换机。更多信息请参见 专有网络。说明 任务创建成功后，消费网络类型 不可更改。若您的数据订阅客户端部署在专有网络上，则建议选择...
迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...
本文为您介绍如何使用数据传输迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动...
功能特性
PolarDB MySQL数据导入 PolarDB-X数据导入 自建MySQL数据源 AnalyticDB for MySQL支持通过外表将ECS自建MySQL数据库中的数据导入至数仓版集群，同时也支持将数仓版集群中的数据导出至自建的MySQL数据库。自建MySQL数据导入 导出至自建MySQL...
一键实时同步至Elasticsearch
背景信息 本方案适用于需要实时监测业务库数据的更新情况，便于上层应用对实时数据进行检索分析或数据开发的场景。方案属性 说明 可同步的表个数 支持将源端多表数据写入至目标端多个索引。支持通过目标索引配置规则实现源端多表数据写入至...
附录：SOFAStack 产品目录
同时满足异地容灾、低成本快速扩容的需求，能够解决传统集中式架构转型的困难，并通过打造大规模高可用分布式系统架构，来支撑金融业务创新。SOFAStack 由四大领域模块组成：分布式中间件、运维管理（应用 PaaS）、高阶运维保障、研发效能...
常见问题
选型与购买 云数据库ClickHouse和官方版本对比多了哪些功能和特性？购买实例时，推荐选择哪一个版本？单双副本实例各有什么特点？购买链路资源时显示“当前区域资源不足”，应该如何处理？扩容与缩容 水平扩缩容耗时受什么影响？扩缩容期间...
MySQL分库分表同步至MaxCompute
本文以MySQL分库分表实时写入MaxCompute场景为例，为您介绍如何通过数据集成同步分库分表数据至MaxCompute。前提条件 已完成MaxCompute和MySQL数据源配置。您需要将数据库添加至DataWorks上，以便在同步任务配置时，可通过选择数据源名称来...
MySQL分库分表同步至MaxCompute
本文以MySQL分库分表实时写入MaxCompute场景为例，为您介绍如何通过数据集成同步分库分表数据至MaxCompute。前提条件 已完成MaxCompute和MySQL数据源配置。您需要将数据库添加至DataWorks上，以便在同步任务配置时，可通过选择数据源名称来...
创建分布式实例
若您希望跨地域的不同实例能够自动进行实时数据同步，您可以通过转化已有普通实例或创建新实例的方式，创建分布式（全球多活）实例。可应用于跨地域的实例多活、灾备与数据同步等场景。背景信息 Tair 全球多活 是阿里云自研的基于 云原生...
创建分布式实例
若您希望跨地域的不同实例能够自动进行实时数据同步，您可以通过转化已有普通实例或创建新实例的方式，创建分布式（全球多活）实例。可应用于跨地域的实例多活、灾备与数据同步等场景。背景信息 Tair 全球多活 是阿里云自研的基于 云原生...
Tablestore外部表
背景信息 表格存储（Tablestore）是构建在阿里云飞天分布式系统之上的NoSQL数据存储服务，提供海量结构化数据的存储和实时访问，详情请参见 Tablestore文档。您可以通过DataWorks配合MaxCompute对外部表进行可视化的创建、搜索、查询、配置...
整库离线同步至Elasticsearch
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
新功能发布记录
同时，提供多种更加简单高效的非关系型 API 接口，充分发挥 NoSQL 和 SQL 共处的新架构优势，满足用户不同场景下数据的多样性需求。目前仅支持 32C 和 64C 两种规格。产品系列 购买实例 备实例解耦 支持将备实例解耦为一个和现有主集群无关...
版本发布记录
无 RDS MySQL分析实例 云数据库ClickHouse 支持通过RDS MySQL分析实例将数据同步到 云数据库ClickHouse 中，进行企业数据的集中分析。创建云ClickHouse分析实例 2021年07月 功能名称 描述 相关文档 云实例迁移 控制台上发布云实例迁移功能...
ApsaraDB For OceanBase数据源
ApsaraDB for OceanBase数据源提供读取和写入ApsaraDB for OceanBase数据的双向功能，您可以使用ApsaraDB for OceanBase数据源配置同步任务同步数据。本文为您介绍DataWorks的ApsaraDB For Oceanbase数据同步能力支持情况。支持的版本 离线...
分区表常见问题
PolarDB MySQL版 是基于共享存储和一写多读的计算存储分离架构的集中式数据库，单分区或单表数据量最大64 TB，不必过早考虑分库分表。使用 PolarDB MySQL版 数据库，单张表数据量太大，想使用分表，如何使用？建议使用分区表。分区表的更多...
列存索引如何实现高效数据过滤
当进行数据查询时，minmax索引可以根据查询范围的最小值和最大值快速定位数据块，从而减少对不相关数据的访问。以下图为例，A、B列包含3个DataPack，条件 A>15 and B结合minmax索引，最终RowGroup2与RowGroup3可跳过，只需访问RowGroup1，...
常见问题
如果收到DTS返回的错误信息，可查阅 常见报错 匹配解决方案。如果您没有收到具体的错误信息，请根据问题分类匹配问题和解决方案。问题分类 常见问题分为如下几种类型：计费问题 性能和规格问题 预检查问题 更多预检查问题，请参见 预检查及...
列存索引技术架构介绍
MySQL+专用AP数据库的搭积木方案 该方案由两套系统来分别满足OLTP和OLAP型需求，在两套系统中间通过数据同步工具进行数据的实时同步。用户甚至 可以增加一层Proxy，自动将TP型负载路由到MySQL上，将分析性负载路由到OLAP数据库上，对应用层...
PolarDB HTAP实时数据分析技术解密
本文介绍IMCI背后的技术路线和具体方案。背景信息 PolarDB MySQL版 是因云而生的一个数据库系统。除云上OLTP场景外，大量客户也对PolarDB提出了实时数据分析的性能需求。对此，PolarDB技术团队提出了In-Memory Column Index（IMCI）的技术...
同步 OceanBase 数据库的数据至 Kafka
背景信息 Kafka 是目前广泛应用的高性能分布式流计算平台，数据传输支持 OceanBase 数据库两种租户与自建 Kafka 数据源之间的数据实时同步，扩展消息处理能力，广泛应用于实时数据仓库搭建、数据查询和报表分流等业务场景。前提条件 数据...
2020年
本章节介绍了2020年数据传输服务DTS（Data Transmission Service）产品功能和对应的文档动态。更多新功能介绍 详情请参见 数据传输服务产品动态。2020年 发布时间 发布内容 相关文档 2020年12月 支持MaxCompute结构、全量数据迁移至MySQL...
配置规则：按表（单表）
并且，规则配置后，产出表数据的调度节点需要使用网络已连通的独享调度资源组进行调度，才可正常触发数据质量规则校验。独享调度资源组的相关配置，详情请参见 新增和使用独享调度资源组。动态阈值类规则需要有21天采样记录，若少于21天，...
- 产品推荐
- 这些文档可能帮助您