数据订阅SDK容灾
为了简化用户使用SDK的复杂度，DTS实现了SDK容...当主SDK异常或是出现网络连接异常时，DTS会自动failover漂移到备SDK上，同时使用最后消费的时间点启动备SDK。主SDK每消费一条数据，会向DTS控制系统汇报一个ACK，即向控制系统汇报消费时间点。
统计类算法参数调优
1.9598247370788646，2022-04-11T18:00:00+08:00 对应记录依然会被识别为异常，而 2022-04-11T19:00:00+08:00 对应的记录不再被识别为异常。数据点增多后误报减少 数据点较少时，算法不稳定，可能会误报很多异常。当数据点相对较多后，误报...
Kafka增量数据同步至MaxCompute
推荐勾选 出错后自动重跑，重跑次数设置3，重跑间隔设置2，让同步实例出现异常的话能够自动重跑实现自愈。配置调度资源组。按照需要选择调度资源组，推荐使用独享调度资源组。配置调度依赖。本实践同步任务无需在特定其他任务运行成功后才...
Kafka增量数据同步至MaxCompute
推荐勾选 出错后自动重跑，重跑次数设置3，重跑间隔设置2，让同步实例出现异常的话能够自动重跑实现自愈。配置调度资源组。按照需要选择调度资源组，推荐使用独享调度资源组。配置调度依赖。本实践同步任务无需在特定其他任务运行成功后才...
离线同步任务调优
BatchSize或maxfilesize参数控制一次性批量提交的记录数大小，该值可以减少数据同步与数据库网络交互次数，并提升吞吐量。但如果该值设置过大，会导致数据同步运行进程OOM异常。出现上述报错后，请参见：离线同步常见问题。附录：查看实际...
数据风险点监控
订单拍下时间不会大于当天时间，也不会小于业务系统上线时间，一旦出现异常校验则报错。当业务复杂、规则繁多、规则配置的运行成本高时，您也可以根据数据资产等级进行监控。离线数据风险点监控 数据准确性 数据准确性是数据质量的关键，也...
校验迁移后的Redis数据
使用场景 如果Redis迁移的过程出现异常，源端与目的端Redis的数据将会不一致。使用redis-full-check进行校验能够找出异常数据，为数据对齐提供可靠依据。redis-full-check是阿里云自研的Redis数据校验工具，能够提取源端和目的端的数据进行...
文件核对
步骤四：新建核对点 核对点用做进行资金业务表或表与表之间的核对检查，找到异常数据。在左侧导航栏上，单击 核对点列表。单击 新建核对点，进入 新建核对点 页面。在 新建核对点 页面填写以下信息。基本信息：核对点名称：核对点的名称，...
主备切换
此类触发方式会以 短信或 站内信、邮件等形式通知到您，通知示例如下：【阿里云】尊敬的*：您的 云数据库Redis版 实例：r-bp1zxszhcgatnx*（名称：*）出现异常，高可用系统已经触发切换，确保实例稳定运行。请检查程序连接是否正常，建议...
主备切换
此类触发方式会以 短信或 站内信、邮件等形式通知到您，通知示例如下：【阿里云】尊敬的*：您的 云原生内存数据库Tair 实例：r-bp1zxszhcgatnx*（名称：*）出现异常，高可用系统已经触发切换，确保实例稳定运行。请检查程序连接是否正常，...
2023年
本文介绍2023年 云原生数据仓库AnalyticDB PostgreSQL版 存储弹性模式的内核功能发布记录。您可以在 云原生数据仓库AnalyticDB PostgreSQL版 控制台将实例升级至最新发布的小版本。升级小版本的具体操作，请参见 版本升级。2023年12月（V7....
HDFS概述
Active NameNode负责处理DataNode和Client的请求，Standby NameNode跟Active NameNode一样拥有最新的元数据信息，随时准备在Active NameNode出现异常时接管其服务。如果Active NameNode异常，Standby NameNode会感知到并切换成Active ...
产品架构
日志拉取模块及下游消费SDK的高可用：DTS容灾系统一旦检测到日志拉取模块出现异常，就会在健康服务节点上断点重启日志拉取模块，保证日志拉取模块的高可用。DTS支持在服务端实现下游SDK消费进程的高可用。用户同时对一个数据订阅链路，启动...
2019年
支持的数据库 支持异常告警恢复通知的功能，当检测到异常恢复后，将发送短信通知用户，降低用户运维成本。无 2019年6月 支持从MySQL/PostgreSQL同步至AnalyticDB for PostgreSQL，帮助构建数据仓库，大幅降低数据源到数仓之间的延时，提升...
数据库代理发布记录
本文主要介绍了 PolarDB MySQL版 数据库代理的版本更新记录。关于版本或者主动运维升级的相关问题，可加钉钉群咨询，群号：51685000218。版本管理机制 当前 PolarDB MySQL版 数据库代理有两个版本管理机制：新购版本：用户新购买的实例的...
常见问题
支持的数据库部署位置（接入方式）阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...
MySQL实例间的双向同步
UPDATE要更新的记录出现主键或唯一键冲突。DELETE对应的记录不存在 DELETE要删除的记录在同步的目标实例中不存在。出现这种冲突时，不论配置何种冲突修复策略，DTS都会自动忽略DELETE操作。重要 由于数据同步两端的系统时间可能存在差异、...
SmartData数据读取异常修复公告
缺陷级别：严重，建议修复，概率性发生时会出现数据正确性问题。缺陷发生现象：如果集群启用JindoFS Cache模式（即设置数据缓存参数 jfs.cache.data-cache.enable 为 true）或者使用了JindoFS Block模式（Block模式默认启用缓存），则数据...
MySQL实例间的双向同步
UPDATE要更新的记录出现主键或唯一键冲突。DELETE对应的记录不存在 DELETE要删除的记录在同步的目标实例中不存在。出现这种冲突时，不论配置何种冲突修复策略，DTS都会自动忽略DELETE操作。重要 由于数据同步两端的系统时间可能存在差异、...
常见问题参考
默认情况下，当日志服务采集到的记录出现内容错误，或者因为类型不兼容等原因，无法正确转换为TSDB数据点时，数据导出任务会将对应的数据点字段设置为默认值（数值类型为0，字符串类型为空串，布尔类型为false).数据导出过程并不会因为运行...
时序引擎版本说明
功能优化 修复TSQL条件中出现BOOLEAN数据类型的数据时可能出现异常的问题。3.4.17（稳定版本）发布日期 类型 说明 2022年06月17日 新特性 支持设置写入的最大时间（即当前时间和偏移时间），超过偏移时间后写入的数据会被丢掉。功能优化 ...
RDS MySQL与PolarDB MySQL版间的双向同步
UPDATE要更新的记录出现主键或唯一键冲突。DELETE对应的记录不存在 DELETE要删除的记录在同步的目标实例中不存在。出现这种冲突时，不论配置何种冲突修复策略，DTS都会自动忽略DELETE操作。重要 由于数据同步两端的系统时间可能存在差异、...
常见问题
在数据水印的基础上，数据安全中心通过系统内置的异常事件检测，对运维高危操作、异常访问、拖库攻击、数据库注入、数据库外联、数据库高危操作等行为进行监控告警，覆盖传统数据库的基础上，还支持对象存储OSS、大数据平台MaxCompute以及...
配置自建RDS
本文介绍如何配置自建的阿里云RDS，作为E-MapReduce（简称EMR）上DataLake集群、Custom集群或Hadoop集群的元数据。...说明 在初始化之前，Hive的Hive MetaStore、HiveServer2和Spark的ThriftServer可能会出现异常，待初始化之后会恢复正常。
一键实时同步至Kafka
当在 设置目标Topic 页面未勾选 支持源表无主键同步，则无主键的表同步时会出现异常，您需要在同步任务中删除无主键的表或者选择单击 图标自定义主键才能继续执行同步任务。选择Topic建立方式 支持 自动建Topic 和 使用已有Topic：当 Topic...
配置并管理实时同步任务
当在 设置目标Topic 页面未勾选 支持源表无主键同步，则无主键的表同步时会出现异常，您需要在同步任务中删除无主键的表或者选择单击 图标自定义主键才能继续执行同步任务。选择Topic建立方式 支持 自动建Topic 和 使用已有Topic：当 Topic...
PolarDB MySQL版CPU使用率高
另有一种情况是前端连接风暴导致集群流量瞬间堆积，此时流量属于异常流量，一般出现在流量数据被爬虫拉取数据的场景下。此时可以通过SQL限流的方式进行请求拒绝，具体操作请参见 会话管理。内核配置不合理 自建MySQL的参数是通用场景下的...
查看并管理整改流程
或者历史任务中出现过异常，但最新数据处理中已经用不到了，可以选择直接忽略。取消忽略：取消忽略后，将会按照最新一次校验结果确定问题状态。如果校验通过，问题状态是已解决；如果校验不通过，问题状态是未解决。重新校验：仅待处理、已...
查看并管理整改流程
或者历史任务中出现过异常，但最新数据处理中已经用不到了，可以选择直接忽略。取消忽略：取消忽略后，将会按照最新一次校验结果确定问题状态。如果校验通过，问题状态是已解决；如果校验不通过，问题状态是未解决。重新校验：仅待处理、已...
V5.1.x系列实例版本说明
修复部分Count（Distinct）语句出现数据重复的问题。V5.1.23-783 日期 2016.04.12 类别 说明 新增特性 控制台新增 PolarDB-X 1.0 实例级别监控。控制台增 PolarDB-X 1.0 诊断建议，提前发现实例异常。控制台新增 PolarDB-X 1.0 实例数据库...
功能特性
数据源配置管理 您可以在产品中添加多种不同类型的数据源配置，每个数据来源配置代表一个核对系统在后续核对工作中可以用来读取数据的数据来源配置，当前支持如下类型的数据源配置：OSS：OSS 文件系统的读取配置，需要您输入访问信息，...
错误码
说明：当分库包含的数据节点出现访问异常，并且分库下没有其他可用数据节点时，PolarDB-X 会将分库置于fail-fast状态并提示PXC-4200错误。通常该错误是由于数据节点故障导致的。请根据包含的数据节点异常信息定位和解决问题。当故障数据...
批量配置数据标准
异常记录 如果导入过程中出现解析或校验失败等异常情况，则为您展示导入异常的记录，包括记录在原始文件中对应的 行号、标准名称、标准编码 和 异常提示。可单击 下载异常记录，将对应的原始记录下载成Excel文件。跳过记录 如果在导入过程...
批量配置数据标准
异常记录 如果导入过程中出现解析或校验失败等异常情况，则为您展示导入异常的记录，包括记录在原始文件中对应的 行号、标准名称、标准编码 和 异常提示。可单击 下载异常记录，将对应的原始记录下载成Excel文件。跳过记录 如果在导入过程...
实例会话
当数据库出现性能问题或异常操作时，通常需要结合数据库的会话信息，快速定位和解决数据库的问题。数据库自治服务DAS（Database Autonomy Service）的实例会话功能，支持实时查看目标实例的会话信息，并提供会话运维操作，例如结束会话、10...
文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
智能分析-异常根因定位分析利器
例如：上午10点总交易量下降了15%，则您可以分析总交易量的各个维度（省份，机房，类型等），在这些异常数据中发现数据中的模式：机房A的转账交易发生了下降。整个分析过程的长短取决于数据维度的数量。数据维度越多，分析过程越长。日志...
会话管理
当数据库出现性能问题或异常操作时，通常需要结合数据库的会话信息，快速定位和解决数据库的问题。数据库自治服务DAS（Database Autonomy Service）的实例会话功能，支持实时查看目标实例的活跃会话、异常会话、会话访问来源和SQL语句等...
mysqlclient 连接 OceanBase 数据库
本文将介绍如何使用 mysqlclient 和 OceanBase 数据库构建一个应用程序，实现创建表、插入数据和查询数据等基本操作。点击下载 python-mysqlclient 示例工程 前提条件 您已安装 Python 3.x 和 pip。您已安装 OceanBase 数据库并且创建了 ...
AnalyticDB for MySQL 3.0数据源
推荐 splitPk 用户使用表主键，因为表主键通常情况下比较均匀，因此切分出来的分片也不容易出现数据热点。目前 splitPk 仅支持整型数据切分，不支持字符串、浮点和日期等其他类型。如果您指定其他非支持类型，忽略 splitPk 功能，使用单...
- 产品推荐
- 这些文档可能帮助您