通过Logstash导入数仓版
更多参数配置：max_flush_exceptions：当写入数据出现异常时，设置最大重试次数，默认值100。skip_exception：设置是否跳过异常，默认为FALSE，表示出现异常时将重试直到到达最大重试次数 max_flush_exceptions，如果仍然失败，则同步程序...
基于Client SDK数据写入
说明 通过 e.getErrData()即可获得异常数据List，此错误码在 addMap(s)、addRow(s)、commit 操作的时候都可能会发生，因此在这些操作的时候需要单独处理此错误码的异常 COMMIT_ERROR_OTHER 102 commit中的其他异常。ADD_DATA_ERROR 103 add...
在程序中通过AnalyticDB MySQL版Client高效写入数据到...
COMMIT_ERROR_DATA_LIST 101 提交中某些数据出现异常，会返回异常的数据，通过 e.getErrData()即可获得异常数据List。此错误码在 addMap(s)、addRow(s)和提交操作的时候都可能会发生，需要单独处理此错误码的异常。COMMIT_ERROR_OTHER 102 ...
质量规则模板类型
实时多链路对比 高可用场景下，需要构建多条链路，以便数据出现异常时，能够及时切换。对于多链路之间的数据计算进度监控则可以发现一些数据滞留、统计偏差问题，提升实时数据质量。稳定性 实时统计值检测 实时数据为指标值或可统计数据时...
质量规则模板类型
实时多链路对比 高可用场景下，需要构建多条链路，以便数据出现异常时，能够及时切换。对于多链路之间的数据计算进度监控则可以发现一些数据滞留、统计偏差问题，提升实时数据质量。稳定性 实时统计值检测 实时数据为指标值或可统计数据时...
实例告警
及时发现数据库异常是数据库日常运维的重要...当数据库出现异常情况或达到预设的告警阈值时，系统会立即通知设定的告警联系人，以帮助您及时发现数据库异常并维护数据库的稳定性。操作步骤 为实例配置警规则和告警模板，详情请参见 配置告警。
实例告警
当数据库出现异常情况或达到预设的告警阈值时，系统会立即通知设定的告警联系人，以帮助您及时发现数据库异常并维护数据库的稳定性。操作步骤 登录 DAS控制台。在左侧导航栏中，单击 实例监控。找到目标实例，单击实例ID，进入目标实例详情...
使用创建反向任务功能
请根据业务数据库出现异常后的预估恢复时间，合理设置数据库Binlog的保存时间。若原实例为Serverless实例，则创建的反向实例的计费方式将为按量付费，且规格为 micro；若原实例的计费方式为包年包月或按量付费，则创建的反向实例的计费方式...
异常检测
及时发现数据库的异常问题是数据库日常运维的重点。数据库自治服务DAS提供异常检测功能，基于...相关文档 您可以利用DAS的自治功能，在数据库出现异常时进行自动处理。自动SQL限流 自动SQL优化 自动性能扩展 自动空间扩展 空间碎片自动回收
一键诊断
自治服务开启后，DAS会在数据库出现异常时，自动进行根因分析，给出优化或止损建议，并自动进行优化或止损操作（需经您授权后才会开启优化操作）。详情请参见 自治中心。会话管理：您可以通过会话管理功能查看目标实例的会话详情和会话统计...
告警服务
当数据库出现异常情况或达到预设的告警阈值时，系统会立即通知设定的告警联系人，以帮助您及时发现数据库异常并维护数据库的稳定性。背景信息 了解以下概念，能帮助您更好地配置告警：告警规则：定义了触发告警的监控项、触发次数、告警...
错误码
DTX-513 insert branchInfo error,branchInfo:[%s]保存 undo log 至业务数据库出现异常 检查业务数据库是否正常。DTX-514 lock table row failed,data may be locked by another transaction.db:[%s],tableName:[%s],primaryKey:[%s]添加行...
使用限制
您在使用数据湖构建（Data Lake Formation，简称DLF）控制台和接口时，产品做了如下限制，请在使用时注意不要超过相应的限制值，以免出现异常。数据湖元数据 限制项 用户配额 单表QPS 500 单表分区数量 100万 数据湖入湖预处理作业 限制项 ...
数据集成概述
脏数据 脏数据是对于业务没有意义，格式非法或者同步过程中出现异常的数据。单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。例如，源端是VARCHAR类型的数据写到INT类型的目标列...
产品概述
阿里云流数据处理平台数据总线DataHub是流式数据（Streaming Data）的处理平台，提供对流式数据的发布(Publish)，订阅（Subscribe）和分发功能，让您可以轻松构建基于流式数据的分析和应用。数据总线 DataHub服务可以对各种移动设备，应用...
服务等级说明
服务等级说明 数据总线服务等级协议 本服务等级协议（Service Level Agreement，以下简称“SLA”）规定了阿里云向客户提供的数据总线（简称“数据总线”）的服务可用性等级指标及赔偿方案。1.定义 1.1 服务周期 一个服务周期为一个自然月。...
数据管理DMS中出现“Data truncated for column”的...
问题描述 在数据管理DMS中执行DDL语句进行变更时，系统提示以下错误。...请您在操作前，确保数据已经备份成功，避免出现数据丢失或异常。您还可以通过阿里云数据库备份DBS提前备份您的数据库，详情请参见 什么是DBS。适用于 数据管理DMS
使用限制
事件总线EventBridge 对某些具体指标进行了约束和规范，您在使用 事件总线EventBridge 时请不要超过相应的限制，以免程序出现异常。事件总线EventBridge 的限制及其说明请参见下表。限制类 限制项 限制说明 事件总线 云服务专用总线数 不...
常见问题
支持的数据库部署位置（接入方式）阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...
Tair Proxy特性说明
在某些极端场景下某个数据分片出现异常后，对数据的影响及优化方案如下。场景 影响与优化方案 图 2.多Key命令场景 影响：客户端通过4个连接发送4个请求，当数据分片2处于异常状态时，仅有请求1（GET Key1 可正常读取到数据），其他请求会...
Redis Proxy特性说明
在某些极端场景下某个数据分片出现异常后，对数据的影响及优化方案如下。场景 影响与优化方案 图 2.多Key命令场景 影响：客户端通过4个连接发送4个请求，当数据分片2处于异常状态时，仅有请求1（GET Key1 可正常读取到数据），其他请求会...
应用场景
实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线，您可以实时接入APP、WEB、IoT和数据库等产生的异构数据，统一管理，并投递到下游的分析、归档等系统，构建清晰的数据流，让您更好的释放数据的价值。...
时序引擎版本说明
功能优化 修复TSQL条件中出现BOOLEAN数据类型的数据时可能出现异常的问题。3.4.17（稳定版本）发布日期 类型 说明 2022年06月17日 新特性 支持设置写入的最大时间（即当前时间和偏移时间），超过偏移时间后写入的数据会被丢掉。功能优化 ...
错误码
说明：当分库包含的数据节点出现访问异常，并且分库下没有其他可用数据节点时，PolarDB-X 会将分库置于fail-fast状态并提示PXC-4200错误。通常该错误是由于数据节点故障导致的。请根据包含的数据节点异常信息定位和解决问题。当故障数据...
常见错误处理方法
连接异常 连接异常即应用程序或者客户端与数据库的连接出现异常，例如已经创建的连接，提示连接不存在或连接超时，无法与数据库实例建立连接等。连接异常经常发生在网络闪断，或者数据库服务重启时，您需要在应用程序中就此类异常，添加重...
数据总线的审计事件
数据总线已与操作审计服务集成，您可以在操作审计中查询用户操作数据总线产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了用户通过Open...
使用数据订阅SDK出现“client partition is empty,...
问题描述 数据订阅SDK...如果数据订阅已经正常启动，则需要排查是否有多个Client消费数据，如有多个，只有正在订阅数据的Client异常或是出现网络连接异常时后，Backup才可进行数据订阅，详情请参考 数据订阅SDK容灾。适用于 数据传输服务 DTS
产品定价
产品定价 数据总线产品已于2020年4月20号正式开始商业化收费，目前仅支持按量付费的计费模式，根据用户实际使用量来梯度计费，每月也为用户准备了一定的免费额度 按量付费 按量付费的单价，请查看产品价格。扣费周期为天：每天为您提供账单...
功能概览
2.产品功能 2.1 数据接入 提供多种SDK、API和Flume、Logstash等第三方插件，让您高效便捷的把数据接入到数据总线。2.2 数据投递 提供DataConnector模块，稍作配置即可把接入的数据实时同步到下游MaxCompute、OSS、TableStore等存储分析系统...
功能特性
Datahub数据总线 功能集 功能 功能描述 参考文档 数据接入 API接入 使用REST API方式，将数据写入Datahub API参考 SDK接入 使用SDK将数据传入Datahub Java SDK C++ SDK Go SDK Python SDK 插件接入 使用插件将数据传入Datahub LogStash插件...
离群点剔除
在很多项目中，数据集中会出现一些异常值（离群点），为消除异常值对结果的影响，需要将异常值进行剔除。应用场景：如图1，在历史数据中，会时长出现一些明显异常的值，图中①、②、③处。这些明显区别于其他历史数据的数据点需要剔除。图 ...
调用HSF服务异常
本文介绍在调用HSF服务时，出现异常 HSFServiceAddressNotFoundException 的原因和处理方法。问题现象 当您通过CSB调用EDAS HSF服务时，出现异常 HSFServiceAddressNotFoundException。可能原因 环境问题，例如地址服务器、网络或命名空间...
JournalNode出现异常
本文介绍JournalNode出现异常的原因和解决方案。具体报错 JournalNode日志出现：org.apache.hadoop.hdfs.server.namenode.FSImage:Caught exception after scanning through 0 ops from/current/edits_inprogress_0000000000000191004 ...
实例会话
当数据库出现性能问题或异常操作时，通常需要结合数据库的会话信息，快速定位和解决数据库的问题。通过实例会话功能，您可以实时查看目标实例会话的客户端信息，所执行的命令和已连接的时长等信息，并可以根据业务需求终止异常会话。前提...
自定义异常
崩溃分析服务支持系统提供的异常看板数据，也支持自定义异常数据看板分析功能，本文介绍如何查看自定义异常看板数据。操作步骤 自定义异常是用户通过SDK定义和分类的一系列异常，自定义异常 提供了 自定义异常分析、自定义异常分布、自定义...
应用概览
异常数据：统计了该应用近5分钟的异常情况，为您排查系统问题提供有效信息。说明 该区域默认展示最近一次统计情况。单击 异常统计数据 柱形图中的柱形，则在右侧 异常TOP 列表中，展示该异常的具体接口、类型、次数。单击 异常统计数据 右...
查看全域数据表校验记录
下载异常数据：单击 下载异常数据 按钮，可下载异常校验数据。② 列表区 为您展示 校验对象、规则名称、校验结果、校验范围、规则类型、规则模板、规则强度、校验开始时间。③ 操作区 单击 图标，查看 规则校验详情。单击 图标，查看 运行...
查看全域数据表校验记录
下载异常数据：单击 下载异常数据 按钮，可下载异常校验数据。② 列表区 为您展示 校验对象、规则名称、校验结果、校验范围、规则类型、规则模板、规则强度、校验开始时间。③ 操作区 单击 图标，查看 规则校验详情。单击 图标，查看 运行...
查看Dataphin数据表校验记录
下载异常数据：单击 下载异常数据 按钮，可下载异常校验数据。② 列表区 为您展示 校验对象、规则名称、校验结果、校验范围、规则类型、规则模板、规则强度、校验开始时间。③ 操作区 单击 图标，查看 规则校验详情。单击 图标，查看 运行...
查看Dataphin数据表校验记录
下载异常数据：单击 下载异常数据 按钮，可下载异常校验数据。② 列表区 为您展示 校验对象、规则名称、校验结果、校验范围、规则类型、规则模板、规则强度、校验开始时间。③ 操作区 单击 图标，查看 规则校验详情。单击 图标，查看 运行...
- 产品推荐
- 这些文档可能帮助您