后续指引
开发与分析 数据类型 MaxCompute支持三种数据类型版本，为您介绍各版本支持的数据类型、适用场景及各版本间的差异，避免开发过程中出现数据类型无法解析问题。介绍：数据类型 常见问题：数据类型常见问题 常用命令 提供开发过程中的针对 表...
基于Client SDK数据写入
说明 通过 e.getErrData()即可获得异常数据List，此错误码在 addMap(s)、addRow(s)、commit 操作的时候都可能会发生，因此在这些操作的时候需要单独处理此错误码的异常 COMMIT_ERROR_OTHER 102 commit中的其他异常。ADD_DATA_ERROR 103 add...
通过Logstash导入数仓版
更多参数配置：max_flush_exceptions：当写入数据出现异常时，设置最大重试次数，默认值100。skip_exception：设置是否跳过异常，默认为FALSE，表示出现异常时将重试直到到达最大重试次数 max_flush_exceptions，如果仍然失败，则同步程序...
在程序中通过AnalyticDB MySQL版Client高效写入数据到...
COMMIT_ERROR_DATA_LIST 101 提交中某些数据出现异常，会返回异常的数据，通过 e.getErrData()即可获得异常数据List。此错误码在 addMap(s)、addRow(s)和提交操作的时候都可能会发生，需要单独处理此错误码的异常。COMMIT_ERROR_OTHER 102 ...
实例告警
及时发现数据库异常是数据库日常运维的重要...当数据库出现异常情况或达到预设的告警阈值时，系统会立即通知设定的告警联系人，以帮助您及时发现数据库异常并维护数据库的稳定性。操作步骤 为实例配置警规则和告警模板，详情请参见 配置告警。
使用创建反向任务功能
请根据业务数据库出现异常后的预估恢复时间，合理设置数据库Binlog的保存时间。若原实例为Serverless实例，则创建的反向实例的计费方式将为按量付费，且规格为 micro；若原实例的计费方式为包年包月或按量付费，则创建的反向实例的计费方式...
实例告警
当数据库出现异常情况或达到预设的告警阈值时，系统会立即通知设定的告警联系人，以帮助您及时发现数据库异常并维护数据库的稳定性。操作步骤 登录 DAS控制台。在左侧导航栏中，单击 实例监控。找到目标实例，单击实例ID，进入目标实例详情...
异常检测
及时发现数据库的异常问题是数据库日常运维的重点。数据库自治服务DAS提供异常检测功能，基于...相关文档 您可以利用DAS的自治功能，在数据库出现异常时进行自动处理。自动SQL限流 自动SQL优化 自动性能扩展 自动空间扩展 空间碎片自动回收
DescribeEvents-查询异常事件列表
说明 如果根据子类型异常事件的名称查询异常事件列表，子类型异常事件名称可通过 DescribeEventTypes 接口获取。数据下载量异常 StartTime string 否 异常事件发生时间，即开始检测异常事件时间。格式：时间戳。单位：毫秒。1657900000 ...
一键诊断
自治服务开启后，DAS会在数据库出现异常时，自动进行根因分析，给出优化或止损建议，并自动进行优化或止损操作（需经您授权后才会开启优化操作）。详情请参见 自治中心。会话管理：您可以通过会话管理功能查看目标实例的会话详情和会话统计...
告警服务
当数据库出现异常情况或达到预设的告警阈值时，系统会立即通知设定的告警联系人，以帮助您及时发现数据库异常并维护数据库的稳定性。背景信息 了解以下概念，能帮助您更好地配置告警：告警规则：定义了触发告警的监控项、触发次数、告警...
错误码
DTX-513 insert branchInfo error,branchInfo:[%s]保存 undo log 至业务数据库出现异常 检查业务数据库是否正常。DTX-514 lock table row failed,data may be locked by another transaction.db:[%s],tableName:[%s],primaryKey:[%s]添加行...
时序引擎版本说明
功能优化 修复TSQL条件中出现BOOLEAN数据类型的数据时可能出现异常的问题。3.4.17（稳定版本）发布日期 类型 说明 2022年06月17日 新特性 支持设置写入的最大时间（即当前时间和偏移时间），超过偏移时间后写入的数据会被丢掉。功能优化 ...
新建及管理数据分类
数据分类用于定义数据在安全领域的业务属性，可对数据进行多级分类打标，更贴合行业标准，本文为您介绍如何新建及管理数据分类。前提条件 已创建数据分类层级。如需创建，请参见 新建数据分类层级。已创建识别特征。如需创建，请参见 添加...
新建及管理数据分类
数据分类用于定义数据在安全领域的业务属性，可对数据进行多级分类打标，更贴合行业标准，本文为您介绍如何新建及管理数据分类。前提条件 已创建数据分类层级。如需创建，请参见 新建数据分类层级。已创建识别特征。如需创建，请参见 添加...
配置敏感数据分类分级
数据分类分级支持您按照数据的价值、内容敏感程度、影响和分发范围对数据进行敏感级别和类型的划分，不同敏感级别的数据其管控原则和数据开发要求存在差异，划分分类分级后，后续可通过分类分级管控不同程度的敏感数据。本文为您介绍如何...
查看敏感数据识别结果
仅支持在 结构化数据、半结构化数据、非结构化数据 或 大数据 分类下分别选择一个或多个数据类型，不支持跨分类同时选择多个数据类型。如果您未选中任意数据类型，数据安全中心默认展示所有数据类型下的敏感数据识别结果。数据模板：在 ...
数据集成概述
脏数据 脏数据是对于业务没有意义，格式非法或者同步过程中出现异常的数据。单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。例如，源端是VARCHAR类型的数据写到INT类型的目标列...
SQL其他常见问题
但您需要注意，MaxCompute支持的DECIMAL类型数据的最大长度为38位，但实际业务处理过程中如果数据存储为最大长度，在数据处理过程中很容易出现数据溢出问题，建议调小数据长度。新创建的MaxCompute项目不支持数据类型自动隐式转换，如何...
数据保护伞入门
步骤二：配置敏感数据识别规则 根据数据的来源、用途，定义数据分类并配置敏感字段类型，识别当前工作空间中的敏感数据。DataWorks提供了内置数据分类及识别规则，您也可根据需要自定义数据分类及敏感数据识别规则。步骤三：配置数据脱敏...
管理敏感数据
说明 用户可自定义新的数据分类。更多信息，请参见 管理敏感数据识别规则。敏感数据信息汇总：可通过不同层级（库视角、表视角、字段视角）查看敏感数据的详细信息，包含：敏感信息所在的数据库名和表名。敏感信息的敏感等级。关于敏感等级...
创建同步RDS/MySQL/ADS3.0
3.同步说明 1）目前DataHub仅支持将TUPLE数据同步到RDS服务中2）DataHub中的TIMESTAMP默认按照 微秒（Microsecond）时间转换成RDS TIMESTAMP类型，请用户注意控制数据精度3）为了避免并发读写同一个主键数据出现加锁竞争，请用户确保同一...
查看全域数据表校验记录
区域 描述 ① 筛选、搜索及下载异常数据区 您可按照 规则类型、规则强度、校验结果 进行筛选，也可按照对象或规则名称进行搜索。下载异常数据：单击 下载异常数据 按钮，可下载异常校验数据。② 列表区 为您展示 校验对象、规则名称、校验...
查看全域数据表校验记录
区域 描述 ① 筛选、搜索及下载异常数据区 您可按照 规则类型、规则强度、校验结果 进行筛选，也可按照对象或规则名称进行搜索。下载异常数据：单击 下载异常数据 按钮，可下载异常校验数据。② 列表区 为您展示 校验对象、规则名称、校验...
异常指标监控
背景信息 用户系统中的异常数据（例如运维系统的CPU消耗突然增高或某平台突然产生大量不良信息）属于平台异常指标。如果能实时高效地监控平台指标，并对各种异常指标进行预防和实时预警，将大幅度提升平台的智能化安全防卫能力。解决方案 ...
新建离线物理表
数据分类 选择字段的数据分类。如需创建分类，请参见 新建数据分类。数据分级 选择数据分类后，系统将自动识别数据级别。删除 您可以在操作列下对字段进行 删除 操作。说明 字段删除后不可撤销。步骤三：提交离线物理表 在离线物理表开发...
新建离线物理表
数据分类 选择字段的数据分类。如需创建分类，请参见 新建数据分类。数据分级 选择数据分类后，系统将自动识别数据级别。删除 您可以在操作列下对字段进行 删除 操作。说明 字段删除后不可撤销。步骤三：提交离线物理表 在离线物理表开发...
创建数据集
数据集是基于特定数据库和特定SQL查询所产生的，以二维表表现的数据集合。本文介绍创建数据集的方法。创建数据集 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 传输与加工>数据可视化。说明 更多访问方式，请参见 访问数据可视化功能。在 ...
新建自定义数据源
完成自定义数据源类型后，您可将该类型的数据源接入到Dataphin中，为后续进行集成开发做准备。前提条件 已有自定义数据源类型。具体操作，请参见：新建离线自定义源类型。新建实时自定义源类型。操作步骤 请参见 数据源管理入口，进入 数据...
ClickHouse数据源
支持的字段类型 支持阿里云ClickHouse以下常见的数据类型，阿里云ClickHouse的数据类型全集请参见 数据类型，开源ClickHouse官方数据类型集合中的其他类型暂不支持，开源ClickHouse数据类型全集请参见 ClickHouse Doc。数据类型 ClickHouse...
配置数据识别规则
添加敏感字段类型 选择敏感字段所在的数据分类。在左侧的 内置分类分级模板 区域选择新增敏感字段所在的数据分类。新增敏感字段类型并配置识别规则。单击右上角的+敏感字段类型。在 基本信息 页签中配置敏感字段类型信息，单击 下一步。...
系统函数分类
函数分类 数据探索系统函数的类型包含分为以下几种：函数类型 说明 时间函数 处理日期、时间类型数据，实现加减日期、提取日期字段、获取当前时间、转换日期格式等业务处理能力。字符串函数 处理字符串类型数据，实现截取字符串、替换字符...
查看Dataphin数据表校验记录
区域 描述 ① 筛选、搜索及下载异常数据区 您可按照 规则类型、规则强度、校验结果 进行筛选，也可按照对象或规则名称进行搜索。下载异常数据：单击 下载异常数据 按钮，可下载异常校验数据。② 列表区 为您展示 校验对象、规则名称、校验...
查看Dataphin数据表校验记录
区域 描述 ① 筛选、搜索及下载异常数据区 您可按照 规则类型、规则强度、校验结果 进行筛选，也可按照对象或规则名称进行搜索。下载异常数据：单击 下载异常数据 按钮，可下载异常校验数据。② 列表区 为您展示 校验对象、规则名称、校验...
数据源分类
本文介绍DataV服务中数据源的分类，通过查看不同的数据源类型，在创建完成后可以快速查找。数据源类型 数据源名称 数据库 RDS for MySQL、RDS for PostgreSQL、交互式分析Hologres、RDS for SQLServer、AnalyticDB for MySQL、AnalyticDB ...
MaxCompute数据源
类型分类 数据集成配置类型 数据库数据类型 整数类 LONG BIGINT、INT、TINYINT和SMALLINT 布尔类 BOOLEAN BOOLEAN 日期时间类 DATE DATETIME、TIMESTAMP和DATE 浮点类 DOUBLE FLOAT、DOUBLE和DECIMAL 二进制类 BYTES BINARY 复杂类 STRING ...
购买数据安全中心
基础版：对云上数据（包括RDS、OSS等）进行安全防护，识别敏感数据、自动对敏感数据分类分级，并提供针对性的数据泄漏风险检测和告警。重要 DSC 不支持重复开通版本服务，即当您购买某版本后，不能再次购买其他任何版本。您只能升级当前...
自定义异常
崩溃分析服务支持系统提供的异常看板数据，也支持自定义异常数据看板分析功能，本文介绍如何查看自定义异常看板数据。操作步骤 自定义异常是用户通过SDK定义和分类的一系列异常，自定义异常 提供了 自定义异常分析、自定义异常分布、自定义...
批量创建质量规则
异常归档 默认 关，开启 后可以归档异常数据到文件或归档表中，质量校验后可以下载、分析归档的异常数据。说明 仅支持Dataphin数据表和全域数据表配置异常归档。归档模式 支持 仅归档异常字段 和 归档完整记录。仅归档异常字段：只去重归档...
批量创建质量规则
异常归档 默认 关，开启 后可以归档异常数据到文件或归档表中，质量校验后可以下载、分析归档的异常数据。说明 仅支持Dataphin数据表和全域数据表配置异常归档。归档模式 支持 仅归档异常字段 和 归档完整记录。仅归档异常字段：只去重归档...
- 产品推荐
- 这些文档可能帮助您