常见问题
支持的数据库部署位置（接入方式）阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...
常见问题
ClickHouse每次写入都会生成一个data part，如果每次写入一条或者少量的数据，那会造成ClickHouse内部有大量的data part（会给merge和查询造成很大的负担）。为了防止出现大量的data part，ClickHouse内部做了很多限制，这就是too many ...
配置规则：按表（单表）
开启动态阈值后，无需手动配置波动阈值或期望值，系统会根据智能算法，自动判断合理阈值，若发现数据异常，会立即触发报警或阻塞。说明 您需购买DataWorks企业版及以上版本，才可以选择 动态阈值型。购买或升级DataWorks，详情请参见 购买...
时序引擎版本说明
修复覆盖式写入数据时可能会导致数据异常的问题。优化读写性能。3.4.30 发布日期 类型 说明 2023年06月30日 功能优化 修改默认用户名、密码。修复可能导致查询异常的问题。优化读写性能。3.4.29 发布日期 类型 说明 2023年06月06日 功能...
管理问题数据
数据质量支持您保留数据质量监控过程中从数据表中发现的非预期数据，帮助您快速排查、定位问题，提升数据质量。本文为您介绍如何管理数据质量监控过程中从数据表中发现的非预期数据。背景信息 问题数据表 数据质量支持在部分规则校验不通过...
离线同步常见问题
读取Loghub同步某字段有数据但是同步过来为空 读取Loghub同步少数据 读取Loghub字段映射时读到的字段不符合预期 读取kafka配置了endDateTime来指定所要同步的数据的截止范围，但是在目的数据源中发现了超过这个时间的数据 Kafka中数据量少...
mysqlclient 连接 OceanBase 数据库
本文将介绍如何使用 mysqlclient 和 OceanBase 数据库构建一个应用程序，实现创建表、插入数据和查询数据等基本操作。点击下载 python-mysqlclient 示例工程 前提条件 您已安装 Python 3.x 和 pip。您已安装 OceanBase 数据库并且创建了 ...
实时同步常见问题
如果源端无法避免中间字段加列，需要注意以下约束条件：全增量解决方案中，在全量同步阶段不要进行中间字段加列，否则会导致实时同步阶段数据异常。实时同步阶段，同步位点重置时间需要设置在中间字段加列DDL事件之后，否则会导致后续实时...
基于Client SDK数据写入
说明 通过 e.getErrData()即可获得异常数据List，此错误码在 addMap(s)、addRow(s)、commit 操作的时候都可能会发生，因此在这些操作的时候需要单独处理此错误码的异常 COMMIT_ERROR_OTHER 102 commit中的其他异常。ADD_DATA_ERROR 103 add...
功能更新动态（2023年）
创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 创建Kafka数据源 离线集成 新增Apache Doris数据源的离线集成。整库迁移任务支持...
在程序中通过AnalyticDB MySQL版Client高效写入数据到...
COMMIT_ERROR_DATA_LIST 101 提交中某些数据出现异常，会返回异常的数据，通过 e.getErrData()即可获得异常数据List。此错误码在 addMap(s)、addRow(s)和提交操作的时候都可能会发生，需要单独处理此错误码的异常。COMMIT_ERROR_OTHER 102 ...
异常列表
当系统发现差异数据后，会创建异常事件。您可以在 异常列表 页面，查看当前租户下的所有异常。目前支持按照以下条件筛选异常：异常范围：全部异常、我订阅的异常、待处理异常。核对场景：全部核对场景，某一选定的核对场景。指定条件：规则...
配置算法实例
时序异常检测 数据服务提供异常点和异常区间两种异常检测类型，您可按检测类型，上传待检测的设备时序数据，进行时序数据异常检测。具体使用说明，请参见 时序异常检测。在算法实例页签，找到 时序异常检测 的算法实例，单击右侧 操作 列的...
产品优势
智能化 运用大数据和机器学习能力，通过智能化的算法，对敏感数据和高风险活动，例如数据异常访问和潜在的泄露风险进行有效识别和监控，并提供修复建议。可视化 提供敏感数据识别结果可视化能力，让企业数据安全现状一目了然。提供动态可视...
一键诊断
自治服务开启后，DAS会在数据库出现异常时，自动进行根因分析，给出优化或止损建议，并自动进行优化或止损操作（需经您授权后才会开启优化操作）。详情请参见 自治中心。会话管理：您可以通过会话管理功能查看目标实例的会话详情和会话统计...
运维阶段
数据异常的核查。运维阶段的流程包括分析影响、制定与实施方案和验证实施方案。操作步骤 分析影响。运维人员或开发人员通过监控规则捕获、自主发现或其它方法获取关于数据产出时效性、数据准确性等指标的异常情况，并进行影响分析。异常...
查看异常统计
单击 下载CSV，下载更多统计数据，以便进一步分析数据异常原因。报警排行 在 报警排行 区域，可以查看运行超时报警排行。排名靠前的任务，需要评估监控配置是否合理（例如，是否需要修改设置的超时阈值）、评估任务配置是否需要优化。同时...
查看异常统计
单击 下载CSV，下载更多统计数据，以便进一步分析数据异常原因。报警排行 在 报警排行 区域，可以查看运行超时报警排行。排名靠前的任务，需要评估监控配置是否合理（例如，是否需要修改设置的超时阈值）、评估任务配置是否需要优化。同时...
错误码
示例：ERR-CODE:[PXC-4100][ERR_ATOM_NOT_AVALILABLE]Atom:*isNotAvailable 说明：如果 PolarDB-X 探测到后端某个数据节点状态异常，会临时阻止访问该实例并提示PXC-4100错误。当遇到该错误，请检查 PolarDB-X 后端所有数据节点是否异常。...
核心自治技术案例解析
决策中心模块则会根据当前性能数据、实例会话列表数据等信息进行全局判断，以基于根因的全局自治，例如可通过SQL限流来解决当前计算资源不足的问题则会采取限流处理。若确实为突增的业务流量，则会继续进行弹性服务流程。算法模型是整个DAS...
什么是数据库自治服务DAS
软硬件bugs，导致数据异常。误操作导致数据丢失。解决方案 数据库自治服务DAS（Database Autonomy Service）是一种基于机器学习和专家经验实现数据库自感知、自修复、自优化、自运维及自安全的云服务，帮助用户消除数据库管理的复杂性及...
企业版和标准版功能对比
自治服务开启后，DAS会在数据库出现异常时，自动进行根因分析，给出优化或止损建议，并自动进行优化或止损操作（需经您授权后才会开启优化操作）。支持 支持 会话管理 PolarDB MySQL版 的一键诊断融合了DAS部分功能，您可以通过其中的会话...
自定义异常
崩溃分析服务支持系统提供的异常看板数据，也支持自定义异常数据看板分析功能，本文介绍如何查看自定义异常看板数据。操作步骤 自定义异常是用户通过SDK定义和分类的一系列异常，自定义异常 提供了 自定义异常分析、自定义异常分布、自定义...
创建PolarDB-X 1.0数据订阅任务
X 1.0 支持分库分表，源 PolarDB-X 1.0 的某一DDL指令会在所有分表上执行对应的DDL操作，并且每个订阅子任务的进度并不一致，因此DTS的订阅数据可能陆续包含多条此DDL操作，如您多次消费此类DDL操作，可能会导致订阅客户端数据异常，建议您...
DAS Auto Scaling弹性能力
数据库自治服务DAS的Auto Scaling是以数据库实例的实时性能数据作为输入，由DAS完成流量异常发现、合理数据库规格建议和合理磁盘容量建议，使数据库服务具备自动扩展存储和计算资源的能力。背景信息 为业务应用选择一个合适的数据库计算...
错误码
非法赋权 0L000 非法赋权（INVALID GRANTOR）0LP01 非法赋权操作（INVALID GRANT OPERATION）0P 类：非法角色声明 0P000 非法角色声明（INVALID ROLE SPECIFICATION）21 类：势违反 21000 势违反（CARDINALITY VIOLATION）22 类：数据异常 ...
基础版Spark全密态计算引擎使用示例
AnalyticDB MySQL 湖仓版（3.0）基础版的Spark全密态计算引擎可以加密敏感数据，并将数据以密文的形式传输和存储，只有密钥拥有者才能解密数据，避免数据泄露。本文 以云数据库RDS MySQL例，介绍使用基础版Spark全密态计算引擎加密数据，...
如何不间断地进行时序异常检测
说明 在异常检测算法中如果需要设置 warmupCount 参数（表示至少需要多少个数据点才会开始报异常），请确保指定 adhoc_state=true 时本次查询检测的数据点数量满足 warmupCount 参数要求的数据点数量。如果异常检测查询中采用相同的异常...
LogHub（SLS）实时ETL同步至Hologres
在 数据输出预览 窗口，您可以根据需要修改输入数据，或单击 手工构造数据 按钮自定义输入数据，再单击 预览 按钮，查看当前数据处理节点对数据的处理结果，当数据处理节点对输入数据处理异常，或产生脏数据时，也会反馈出异常信息，能够...
查看全域数据表校验记录
全域数据表校验记录用于记录质量规则校验全域数据表的结果。本文为您介绍如何查看全域数据表质量规则的校验记录。全域数据表校验记录 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 全域数据表 校验记录页面。参数 说明 ...
查看全域数据表校验记录
全域数据表校验记录用于记录质量规则校验全域数据表的结果。本文为您介绍如何查看全域数据表质量规则的校验记录。全域数据表校验记录 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 全域数据表 校验记录页面。参数 说明 ...
读写分离架构
针对读多写少的业务场景，云原生内存数据库Tair 推出了读写分离架构，提供高可用、高性能、灵活的读写分离服务，满足热点数据集中及高并发读取的业务需求。同时，读写分离架构实例由阿里云 Tair 团队自研的Proxy组件进行数据分发、故障切换...
读写分离版
针对读多写少的业务场景，云数据库 Redis 版 推出了读写分离架构，提供高可用、高性能、灵活的读写分离服务，满足热点数据集中及高并发读取的业务需求。同时，读写分离架构实例由阿里云 Tair 团队自研的Proxy组件进行数据分发、故障切换等...
查看Dataphin数据表校验记录
Dataphin数据表校验记录用于记录质量规则校验Dataphin数据表的结果。本文为您介绍如何查看Dataphin数据表质量规则的校验记录。Dataphin数据表校验记录 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 Dataphin数据表 校验...
查看Dataphin数据表校验记录
Dataphin数据表校验记录用于记录质量规则校验Dataphin数据表的结果。本文为您介绍如何查看Dataphin数据表质量规则的校验记录。Dataphin数据表校验记录 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 Dataphin数据表 校验...
数据模型
基本概念 物联网、应用监控、工业互联网等典型的时序场景下，数据源（Data Source）通常按一定的周期持续产生时序数据，一条时序数据由Tag、Timestamp、Field等元素共同来描述，具有相同特征的一类数据存放在同一张表中，表的时序数据元素...
数据质量管理流程
数据质量管理是通过划分数据资产等级和分析元数据的应用链路，对不同资产等级的数据采取相对应的质量管理方式。数据质量管理流程图如下。数据管理流程说明如下：分析业务场景，根据应用的影响程度，确定当前以及生产链路上的数据资产等级。...
异常指标监控
PAI提供了特征编码、模型训练及模型评估全套功能，您只需要抽取异常行为特征，并对其进行标记，即可快速构建异常指标监控模型。背景信息 用户系统中的异常数据（例如运维系统的CPU消耗突然增高或某平台突然产生大量不良信息）属于平台异常...
DataWorks On EMR使用说明
数据地图概述 安全中心 数据保护伞 审批中心 安全中心是集数据资产分级分类、敏感数据识别、数据授权管理、敏感数据脱敏、敏感数据访问审计、风险识别与响应于一体的一站式数据安全治理界面，帮助用户落地数据安全治理事项。安全中心概述 ...
实时数据订阅概述
云原生多模数据库 Lindorm 支持实时数据订阅功能，实时数据订阅功能帮助您获取Lindorm的实时增量数据，您可以根据自身业务需求自由消费增量数据，搭建或实现多种业务场景。背景信息 云原生多模数据库 Lindorm 数据订阅功能支持任何一个表的...
- 产品推荐
- 这些文档可能帮助您