通过Logstash导入数仓版

更多参数配置:max_flush_exceptions:当写入数据出现异常时,设置最大重试次数,默认值100。skip_exception:设置是否跳过异常,默认为FALSE,表示出现异常时将重试直到到达最大重试次数 max_flush_exceptions,如果仍然失败,则同步程序...

基于Client SDK数据写入

错误码名 错误码值 描述 COMMIT_ERROR_DATA_LIST 101 commit中某些数据出现异常,会返回异常的数据。说明 通过 e.getErrData()即可获得异常数据List,此错误码在 addMap(s)、addRow(s)、commit 操作的时候都可能会发生,因此在这些操作的...

使用数据订阅SDK出现“client partition is empty,...

问题描述 数据订阅SDK...如果数据订阅已经正常启动,则需要排查是否有多个Client消费数据,如有多个,只有正在订阅数据的Client异常或是出现网络连接异常时后,Backup才可进行数据订阅,详情请参考 数据订阅SDK容灾。适用于 数据传输服务 DTS

在程序中通过AnalyticDB MySQL版Client高效写入数据到...

COMMIT_ERROR_DATA_LIST 101 提交中某些数据出现异常,会返回异常的数据,通过 e.getErrData()即可获得异常数据List。此错误码在 addMap(s)、addRow(s)和提交操作的时候都可能会发生,需要单独处理此错误码的异常。COMMIT_ERROR_OTHER 102 ...

质量规则模板类型

实时多链路对比 高可用场景下,需要构建多条链路,以便数据出现异常时,能够及时切换。对于多链路之间的数据计算进度监控则可以发现一些数据滞留、统计偏差问题,提升实时数据质量。稳定性 实时统计值检测 实时数据为指标值或可统计数据时...

质量规则模板类型

实时多链路对比 高可用场景下,需要构建多条链路,以便数据出现异常时,能够及时切换。对于多链路之间的数据计算进度监控则可以发现一些数据滞留、统计偏差问题,提升实时数据质量。稳定性 实时统计值检测 实时数据为指标值或可统计数据时...

实例告警

及时发现数据库异常是数据库日常运维的重要...当数据出现异常情况或达到预设的告警阈值时,系统会立即通知设定的告警联系人,以帮助您及时发现数据库异常并维护数据库的稳定性。操作步骤 为实例配置警规则和告警模板,详情请参见 配置告警。

使用创建反向任务功能

请根据业务数据出现异常后的预估恢复时间,合理设置数据库Binlog的保存时间。若原实例为Serverless实例,则创建的反向实例的计费方式将为按量付费,且规格为 micro;若原实例的计费方式为包年包月或按量付费,则创建的反向实例的计费方式...

实例告警

数据出现异常情况或达到预设的告警阈值时,系统会立即通知设定的告警联系人,以帮助您及时发现数据库异常并维护数据库的稳定性。操作步骤 登录 DAS控制台。在左侧导航栏中,单击 实例监控。找到目标实例,单击实例ID,进入目标实例详情...

异常检测

及时发现数据库的异常问题是数据库日常运维的重点。数据库自治服务DAS提供异常检测功能,基于...相关文档 您可以利用DAS的自治功能,在数据出现异常时进行自动处理。自动SQL限流 自动SQL优化 自动性能扩展 自动空间扩展 空间碎片自动回收

数据订阅SDK容灾

为了简化用户使用SDK的复杂度,DTS实现了SDK容...当主SDK异常或是出现网络连接异常时,DTS会自动failover漂移到备SDK上,同时使用最后消费的时间点启动备SDK。主SDK每消费一条数据,会向DTS控制系统汇报一个ACK,即向控制系统汇报消费时间点。

使用限制

您在使用数据湖构建(Data Lake Formation,简称DLF)控制台和接口时,产品做了如下限制,请在使用时注意不要超过相应的限制值,以免出现异常数据湖元数据 限制项 用户配额 单表QPS 500 单表分区数量 100万 数据湖入湖预处理作业 限制项 ...

接入DAS的实例状态概览

您可以将阿里云数据库或自建数据库实例接入...监控异常 DAS数据库网关(DBGateway)出现异常,详情请参见 DBGateway常见问题。连接正常 目标实例已正确连接至DAS控制台,您可以使用集群管理、实例监控和告警服务等功能,详情请参见 产品功能。

Tair Proxy特性说明

在某些极端场景下某个数据分片出现异常后,对数据的影响及优化方案如下。场景 影响与优化方案 图 2.多Key命令场景 影响:客户端通过4个连接发送4个请求,当数据分片2处于异常状态时,仅有请求1(GET Key1 可正常读取到数据),其他请求会...

Redis Proxy特性说明

在某些极端场景下某个数据分片出现异常后,对数据的影响及优化方案如下。场景 影响与优化方案 图 2.多Key命令场景 影响:客户端通过4个连接发送4个请求,当数据分片2处于异常状态时,仅有请求1(GET Key1 可正常读取到数据),其他请求会...

时序引擎版本说明

功能优化 修复TSQL条件中出现BOOLEAN数据类型的数据时可能出现异常的问题。3.4.17(稳定版本)发布日期 类型 说明 2022年06月17日 新特性 支持设置写入的最大时间(即当前时间和偏移时间),超过偏移时间后写入的数据会被丢掉。功能优化 ...

功能特性

云原生内存数据库Tair 云原生内存数据库Tair是阿里云自研数据库,兼容Redis的同时提供更多数据结构和企业级能力,包括全球多活、任意时间点恢复和透明加密等。支持多种存储介质和不同场景性价比需求:内存型支持超高吞吐,性能为Redis三倍...

迁移 PolarDB-X 2.0 数据库的数据至 OceanBase 数据库...

已为源端 PolarDB-X 2.0 数据库和目标端 OceanBase 数据库 MySQL 租户创建专用数据迁移的数据库用户,并赋予其相关权限。详情请参见 管理数据库账号 和 创建数据库用户。使用限制 源端数据库的操作限制 请勿在结构迁移和全量迁移阶段执行...

迁移 OceanBase 数据库 MySQL 租户的数据至 MySQL ...

已为源端 OceanBase 数据库 MySQL 租户和目标端 MySQL 数据库创建专用数据迁移项目的数据库用户,并为其赋予了相关权限。详情请参见 创建数据库用户。使用限制 源端数据库的操作限制 请勿在结构迁移和全量迁移阶段执行库或表结构变更的 ...

迁移 OceanBase 数据库 Oracle 租户的增量数据至 ...

已为源端 OceanBase 数据库 Oracle 租户和目标端 MySQL 数据库创建专用数据迁移项目的数据库用户,并为其赋予了相关权限。详情请参见 创建数据库用户。使用限制 数据传输支持的 MySQL 数据库版本为 V5.5、V5.6、V5.7 和 V8.0。数据传输不...

迁移 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...

本文为您介绍如何使用数据传输迁移 RDS PostgreSQL 实例 的数据至 OceanBase 数据库 Oracle 租户。重要 如果数据迁移项目长期处于非活跃状态(项目状态为 失败、已暂停 或 已完成),受增量日志保留时长等影响,项目可能无法恢复。数据传输...

迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库...

项目启动成功后,PolarDB-X 1.0 数据库至 OceanBase 数据库 MySQL 租户的数据迁移项目会自动删除,数据传输会保存 PolarDB-X 1.0 数据库下挂载的数据库至 OceanBase 数据库 MySQL 租户的数据迁移项目,并自动创建相应的数据源。您可以在弹...

OceanBase 数据库之间的数据迁移

背景信息 您可以在数据传输控制台创建从 OceanBase 数据库迁移数据至 OceanBase 数据库同类型租户的数据迁移项目,通过结构迁移、全量迁移和增量同步,无缝迁移源端数据库中的存量业务数据和增量数据至目标端数据库。前提条件 数据传输已...

迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL ...

已为源端 TiDB 数据库和目标端 OceanBase 数据库 MySQL 租户创建专用数据迁移项目的数据库用户,并为其赋予了相关权限。详情请参见 创建数据库用户。使用限制 源端数据库的操作限制 请勿在结构迁移和全量迁移阶段执行库或表结构变更的 ...

迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...

已为源端 Oracle 数据库和目标端 OceanBase 数据库 Oracle 租户创建专用数据迁移的数据库用户,并赋予其相关权限。详情请参见 创建数据库用户。已在目标端 OceanBase 数据库 Oracle 租户创建对应的数据库。OceanBase 数据迁移功能支持...

迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL ...

已为源端 MySQL 数据库和目标端 OceanBase 数据库 MySQL 租户创建专用数据迁移的数据库用户,并赋予其相关权限。详情请参见 创建数据库用户。已开启 Binlog。RDS MySQL 数据库的详情请参见 管理本地日志(Binlog),PolarDB MySQL 数据库...

产品优势

数据库备份DBS 支持多种环境的数据库备份,通过专线接入、公网等接入技术,实现用户本地IDC数据库备份、ECS自建数据库的备份、其他云环境和RDS数据库备份,通过简单地配置实现数据库全量备份、增量备份以及数据恢复。低成本 DBS使用飞天...

迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle ...

背景信息 在数据传输控制台创建从 OceanBase 数据库 Oracle 租户迁移数据至 Oracle 数据库的数据迁移项目,您可以通过结构迁移、全量迁移和增量同步,无缝迁移源端数据库中的存量业务数据和增量数据至 Oracle 数据库。同时,数据传输支持将...

常见错误处理方法

连接异常 连接异常即应用程序或者客户端与数据库的连接出现异常,例如已经创建的连接,提示连接不存在或连接超时,无法与数据库实例建立连接等。连接异常经常发生在网络闪断,或者数据库服务重启时,您需要在应用程序中就此类异常,添加重...

查看数据复制方式

当备实例不可用或者主备实例间出现网络异常时,同步会退化为异步。异步 应用发起更新请求,即进行增加、删除、修改数据的操作时,主实例完成操作后会立即响应应用,同时主实例向备实例异步复制数据。因此,在异步数据复制方式下,备实例不...

修改数据复制方式

说明 当备实例不可用或者主备实例间出现网络异常时,半同步会退化为异步。异步 应用发起更新请求,即进行增加、删除、修改数据的操作时,主实例完成操作后会立即响应应用,同时主实例向备实例异步复制数据。因此,在异步数据复制方式下,备...

查询和修改数据复制方式

当备实例不可用或者主备实例间出现网络异常时,半同步会退化为异步。异步 应用发起更新请求,即进行增加、删除、修改数据的操作时,主实例完成操作后会立即响应应用,同时主实例向备实例异步复制数据。因此,在异步数据复制方式下,备实例...

查看异常告警

异常事件类型 异常事件可分为以下类型:流转异常数据在流转过程中出现异常情况。例如:异常地理位置下载敏感数据。行为异常:非正常的数据操作行为。例如:登录密码连续错误、登录使用终端异常等。自定义异常:根据您自定义的检测模型...

概述

专用数据仓库场景:依托 PolarDB 提供的海量数据存储能力,汇聚多个上游数据源,将其作为专用数据仓库使用;ETL数据加速计算场景:依托 PolarDB 基于列存索引提供的强大而灵活的计算能力,在 PolarDB 中使用SQL来实现ETL功能。性能提升情况...

校验迁移后的Redis数据

使用场景 如果Redis迁移的过程出现异常,源端与目的端Redis的数据将会不一致。使用redis-full-check进行校验能够找出异常数据,为数据对齐提供可靠依据。redis-full-check是阿里云自研的Redis数据校验工具,能够提取源端和目的端的数据进行...

从MaxCompute迁移至RDS MySQL

由于源MaxCompute实例不支持主键约束,在一些异常情况下(如网络异常),DTS会进行任务重试,可能会导致目标RDS实例中该无主键表出现重复数据。DTS在迁移MaxCompute至RDS MySQL时,暂不支持增量数据迁移,即不支持将迁移过程中源库产生的...

同步时源库为PolarDB-X 2.0的注意事项及限制

由于 云原生数据仓库AnalyticDB MySQL版 3.0 本身的使用限制,当 云原生数据仓库AnalyticDB MySQL版 3.0 中的节点磁盘空间使用量超过80%,会导致DTS任务异常,产生延迟。请提前根据待同步的对象预估所需空间,确保目标集群具备充足的存储...

同步时源库为PolarDB MySQL版的注意事项及限制

由于 云原生数据仓库AnalyticDB MySQL(3.0)本身的使用限制,当 云原生数据仓库AnalyticDB MySQL(3.0)集群中的节点磁盘空间使用量超过80%,会导致DTS任务异常,产生延迟。请提前根据待同步的对象预估所需空间,确保目标集群具备充足的...

查看全域数据表校验记录

下载异常数据:单击 下载异常数据 按钮,可下载异常校验数据。② 列表区 为您展示 校验对象、规则名称、校验结果、校验范围、规则类型、规则模板、规则强度、校验开始时间。③ 操作区 单击 图标,查看 规则校验详情。单击 图标,查看 运行...

查看全域数据表校验记录

下载异常数据:单击 下载异常数据 按钮,可下载异常校验数据。② 列表区 为您展示 校验对象、规则名称、校验结果、校验范围、规则类型、规则模板、规则强度、校验开始时间。③ 操作区 单击 图标,查看 规则校验详情。单击 图标,查看 运行...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 DBS 云数据库 RDS 云数据库 Redis 版 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用