离线同步常见问题
本文为您介绍离线同步的...您可以尝试以下操作：JDBC格式添加的数据源修改utf8mb4：jdbc:mysql:/xxx.x.x.x:3306/database?com.mysql.jdbc.faultInjection.serverCharsetIndex=45 。实例ID形式添加数据源：在数据库名后拼接，格式为 database?...
通过Logstash导入数仓版
更多参数配置：max_flush_exceptions：当写入数据出现异常时，设置最大重试次数，默认值100。skip_exception：设置是否跳过异常，默认为FALSE，表示出现异常时将重试直到到达最大重试次数 max_flush_exceptions，如果仍然失败，则同步程序...
基于Client SDK数据写入
错误码名 错误码值 描述 COMMIT_ERROR_DATA_LIST 101 commit中某些数据出现异常，会返回异常的数据。说明 通过 e.getErrData()即可获得异常数据List，此错误码在 addMap(s)、addRow(s)、commit 操作的时候都可能会发生，因此在这些操作的...
实例告警
及时发现数据库异常是数据库日常运维的重要...当数据库出现异常情况或达到预设的告警阈值时，系统会立即通知设定的告警联系人，以帮助您及时发现数据库异常并维护数据库的稳定性。操作步骤 为实例配置警规则和告警模板，详情请参见 配置告警。
备份费用
当您使用 数据库备份DBS 备份数据时，DBS会根据备份的数据量进行计费。备份费用支持按量付费与包年包月（预付费）两种计费方式。按量付费 仅在DMS中使用 数据归档 时，系统会创建按量付费的备份计划，DBS会根据实际备份的数据量进行收费。...
企业版和标准版功能对比
自治服务开启后，DAS会在数据库出现异常时，自动进行根因分析，给出优化或止损建议，并自动进行优化或止损操作（需经您授权后才会开启优化操作）。支持 支持 会话管理 PolarDB MySQL版 的一键诊断融合了DAS部分功能，您可以通过其中的会话...
使用创建反向任务功能
本文为您介绍如何使用数据传输服务DTS（Data Transmission Service）的创建反向任务功能，实现数据库容灾场景下的数据回传。前提条件 已创建存储空间大于业务数据库已使用的灾备数据库，建议灾备数据比业务数据大10%。已在业务数据库和灾备...
V5.1.x系列实例版本说明
本文汇总了 PolarDB-X 1.0 实例V5.1.x系列的版本说明。V5.1.28-1508068 日期 2017.12.15 类别 说明 新增特性 支持查询一张逻辑表下的各个物理分表的数据分布情况。新增拆分函数UNI_HASH能让分库数一样的两张表的JOIN保持为非跨库JOIN，不再...
创建PolarDB-X 1.0数据订阅任务
本文介绍如何创建 PolarDB-X 1.0 数据订阅任务。前提条件 已创建 PolarDB-X 1.0，如未创建请参见 创建实例 和 创建数据库。说明 PolarDB-X 1.0 的存储类型支持为RDS MySQL（包括私有定制RDS和单独购买的RDS），暂不支持为PolarDB MySQL。若...
升级步骤
查看数据同步任务详情（可选）在版本升级的过程中，若升级报错或出现其他异常时，您可以前往对应的DTS数据同步任务详情页查看数据同步任务的详细信息。登录 PolarDB控制台。找到目标集群，单击集群ID。在 基本信息 页面的 PolarDB升级功能 ...
行业趋势与背景
本文介绍了数据库行业的发展及 PolarDB-X 的技术发展历程。行业趋势 数据库系统至关重要 数据库与操作系统、中间件并称为系统软件的三驾马车，是企业IT系统不可或缺的组件，也是互联网应用级企业信息管理系统存储数据和管理数据的核心平台...
Kafka实时ETL同步至Hologres
在 数据输出预览 窗口，您可以根据需要修改输入数据，或者单击 手工构造数据 按钮自定义输入数据，然后单击 预览 按钮，查看当前数据处理节点对数据的处理结果，当数据处理节点处理异常，或者产生脏数据时，也会实时反馈异常信息，能够帮助...
气泡图（v4.x版本）
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
购买按量付费集群
步骤1：完成基础配置 基础配置包括购买集群的基础需求（计费类型、地域可用区）以及集群所需的基础资源（数据库引擎、集群计算规格、数据库代理、存储）。完成基础设置后，单击 下一步：集群配置。前往 PolarDB集群购买页面。选择 计费类型...
购买包年包月集群
步骤1：完成基础配置 基础配置包括购买集群的基础需求（计费类型、地域可用区）以及集群所需的基础资源（数据库引擎、集群计算规格、数据库代理、存储）。完成基础设置后，单击 下一步：集群配置。前往 PolarDB集群购买页面。选择 计费类型...
迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...
本文为您介绍如何使用数据传输迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动...
创建DMS逻辑库的数据订阅任务
本文介绍如何创建数据管理DMS（Data Management）逻辑库的数据订阅任务。...根据消费客户端类型，选择订阅数据的消费方式：使用SDK示例代码消费PolarDB-X 1.0订阅数据 使用flink-dts-connector消费订阅数据 使用Kafka客户端消费订阅数据
购买按量付费集群
该功能需要搭配使用 PolarDB 最新版本的JDBC驱动，JDBC驱动版本需要42.2.9.1.2及以上，否则可能会出现精度丢失的问题。更多详细信息，请参见 支持64位DATE类型。背景信息 一个集群包含一个主节点以及最多十五个只读节点（最少一个只读节点...
购买包年包月集群
该功能需要搭配使用 PolarDB 最新版本的JDBC驱动，JDBC驱动版本需要42.2.9.1.2及以上，否则可能会出现精度丢失的问题。更多详细信息，请参见 支持64位DATE类型。背景信息 一个集群包含一个主节点以及最多十五个只读节点（最少一个只读节点...
MaxCompute数据离线同步至ClickHouse
批量写入ClickHouse异常时 批量写入ClickHouse异常时，可以选择异常处理策略：尝试单条写入，单条写入仍异常则计入脏数据：单条写入可用于识别少量脏数据但单条写入对ClickHouse负载影响较大，需要您谨慎选择。同步任务失败退出：出于...
创建PolarDB-X 2.0数据订阅任务
源库、目标库出现其他问题后的重试时间 在订阅任务启动后，若源库出现非连接性的其他问题（如DDL或DML执行异常），则DTS会报错并会立即进行持续的重试操作，默认持续重试时间为10分钟，您也可以在取值范围（1~1440分钟）内自定义重试时间，...
配置DTS迁移、同步或校验任务
Reserve String 否 {"srcInstanceId":"cen-9kqshqum*"} DTS预留参数，格式为JSON字符串，您可以传入本参数完善源目库信息（如目标Kafka数据库的数据存储格式、云企业网CEN的实例ID）。更多信息，请参见 Reserve参数说明。Checkpoint String...
模型创建
model_file_path 模型上传至LDFS上的地址，格式为 ldfs:/model_file_path，例如 ldfs:/x.x.x.x/CLIP-ViT-B-32-IMAGE.zip。huggingface_repo 模型平台（HuggingFace）上的模型路径，格式为 huggingface:/repository_id，例如 huggingface:/...
设备网络状态
以下两种情况下，设备立即上报网络状态数据：当网络出现异常时，设备采集到异常指标，会立即上报数据到云端。您设置了定时采集，设备会在指定时间采集数据，并立即上报数据。假设当前时间是2019-08-22 08:10:29，设备检测到网络问题，立即...
迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库...
本文为您介绍如何使用数据传输迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输...
同步时源库为PolarDB MySQL版的注意事项及限制
X 1.0 PolarDB MySQL版同步至云原生数据仓库 AnalyticDB MySQL 版 2.0 PolarDB MySQL版同步至云原生数据仓库 AnalyticDB MySQL 版 3.0 PolarDB MySQL版同步至阿里云流式数据服务DataHub PolarDB MySQL版同步至Elasticsearch PolarDB ...
迁移 PolarDB-X 2.0 数据库的数据至 OceanBase 数据库...
本文为您介绍如何使用数据传输迁移 PolarDB-X 2.0 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输...
错误码
常见 PolarDB-X 数据节点连接失败的原因如下：后端数据节点连接数已满 计算节点到数据节点的连接超时 数据节点拒绝连接 如果排除后端数据节点问题后仍然出现该错误，请联系技术支持。PXC-4103 ERR_ATOM_CONNECTION_POOL_FULL 描述：PolarDB...
如何开启高压缩引擎（X-Engine）
本文介绍 PolarDB 集群开启高压缩引擎（X-Engine）的前提条件、注意事项和操作步骤。前提条件 PolarDB 的 产品版本 需为 企业版，产品 系列 需为 集群版，集群版本需为 PolarDB MySQL版 8.0版本且修订版本需满足如下条件：8.0.1.1.31及以上...
新增和使用独享调度资源组
选择已经与目标数据库网络联通的交换机，若没有可用交换机，可单击 创建交换机 为独享资源组创建交换机。创建完成后这里配置为创建的交换机。安全组 安全组指定了独享资源实例需要允许或禁止哪些公网或内网的访问。您可根据业务需求选择已...
文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
数据服务入门
步骤一：创建数据源并配置网络连通性 使用数据服务创建API前，您需将数据库或数据仓库添加为DataWorks的数据源，并保障数据服务资源组与您的目标数据源网络连通，以便调用API时DataWorks可成功访问数据源。说明 DataWorks工作空间将集群或...
PolarDB-X
PolarDB-X（原DRDS升级版）是由阿里巴巴自主研发的云原生分布式数据库，融合分布式SQL引擎DRDS与分布式自研存储X-DB，基于云原生一体化架构设计，可支撑千万级并发规模及百PB级海量存储。本文主要介绍如何通过DLA Serverless Spark访问云...
如何选择备份计划规格
数据库备份DBS 提供多种备份计划规格，包括serverless、micro、small、medium、large、xlarge。每个规格都有不同的免费数据量额度、收费标准以及备份与恢复性能。规格越高，性能越高，单价也越低。您可以根据需求选择适当的规格，来满足...
部署与运维
也可以基于某些指标定制实时的监测与告警，当关键业务出现异常时可通过多种途径通知告警。控制台上可以查看当前实例会话，也可以选择终止会话。会话统计页面可查看按客户端统计、按namespace统计等的聚合统计信息。10秒SQL分析功能可以在10...
2019年
本章节介绍了2019年数据传输服务DTS（Data Transmission Service）产品功能和对应的文档动态。更多新功能介绍 详情请参见 数据传输服务产品动态。2019年 发布时间 发布内容 相关文档 2019年12月 支持迁移PostgreSQL 11版本数据库。从自建...
数据库代理发布记录
当前 PolarDB MySQL版 数据库代理包含 1.x.x 和 2.x.x 两大版本，两个版本的区别如下：1.x.x 2021年2月1日前创建的集群下的数据代理版本，该版本不再进行新功能迭代开发，只进行问题修复。2.x.x 2021年2月1日（包含）后新创建的集群下的...
网络连通与白名单配置
11.194.121.51,11.194.121.50,39.107.223.0/26,39.107.223.128/26,39.107.223.192/26,39.107.223.64/26 华东2（上海）金融云 140.205.46.128/25,140.205.48.0/25,140.205.48.128/25,140.205.49.0/25,140.205.49.128/25,11.192.156.0/25,11....
数据集成概述
脏数据 脏数据是对于业务没有意义，格式非法或者同步过程中出现异常的数据。单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。例如，源端是VARCHAR类型的数据写到INT类型的目标列...
主备方案介绍
A：存储的是数据D1和数据D2中时间戳更大的数据，数据在LTS同步过程中不会改变数据原有的时间戳，一般情况下存储的是数据D2，但是由于主备实例不同可能存在时间戳毫秒级的时间差异造成数据D2的时间戳比数据D1的时间戳小，在这种情况下存储的...
- 产品推荐
- 这些文档可能帮助您