离线同步日志分析
附录：关系型数据库切分键配置 推荐 splitPk 用户使用表主键，因为表主键通常情况下比较均匀，因此切分出来的分片也不容易出现数据热点。splitPk 仅支持切分整型数据，不支持切分字符串、浮点和日期等其他类型数据。如果配置 splitPk 切分...
会话管理
当数据库出现性能问题或异常操作时，通常需要结合数据库的会话信息，快速定位和解决数据库的问题。数据库自治服务DAS（Database Autonomy Service）的实例会话功能，支持实时查看目标实例的活跃会话、异常会话、会话访问来源和SQL语句等...
应用场景
图数据库GDB针对高度互联数据的存储和查询场景进行设计，并在内核层面进行了大量优化，非常适合营收增长、金融风控、商品推荐、社交推荐、循环担保检测、异常指标监控和违规团伙挖掘等场景。营收增长 图数据库GDB提供智能搜索推荐一体化...
发现和处理异常告警
异常事件类型 异常事件可分为以下类型：流转异常：数据在流转过程中出现的异常情况。例如：下载非常用Bucket内敏感文件、初次下载敏感数据等。行为异常：非正常的数据操作行为。例如：登录密码连续错误、短时间内大量删除数据等。自定义...
错误码
DTX-513 insert branchInfo error,branchInfo:[%s]保存 undo log 至业务数据库出现异常 检查业务数据库是否正常。DTX-514 lock table row failed,data may be locked by another transaction.db:[%s],tableName:[%s],primaryKey:[%s]添加行...
主备切换
此类触发方式会以 短信或 站内信、邮件等形式通知到您，通知示例如下：【阿里云】尊敬的*：您的 云原生内存数据库Tair 实例：r-bp1zxszhcgatnx*（名称：*）出现异常，高可用系统已经触发切换，确保实例稳定运行。请检查程序连接是否正常，...
主备切换
此类触发方式会以 短信或 站内信、邮件等形式通知到您，通知示例如下：【阿里云】尊敬的*：您的 云数据库Redis版 实例：r-bp1zxszhcgatnx*（名称：*）出现异常，高可用系统已经触发切换，确保实例稳定运行。请检查程序连接是否正常，建议...
功能更新动态（2023年）
创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 创建Kafka数据源 离线集成 新增Apache Doris数据源的离线集成。整库迁移任务支持...
文档更新动态（2023年）
更新说明 创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 创建Kafka数据源 离线集成配置优化 新增Apache Doris数据源的离线集成。...
什么是网络智能服务
网络智能服务 NIS（Network Intelligence Service）是一个对网络进行健康分析、性能监控、诊断修复、流量分析和测量仿真的云服务，通过集成机器学习、知识图谱等AIOps方法减少网络使用复杂性，提供自助运维能力，方便网络架构师和运维...
数据集成概述
脏数据 脏数据是对于业务没有意义，格式非法或者同步过程中出现异常的数据。单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。例如，源端是VARCHAR类型的数据写到INT类型的目标列...
常见问题
支持的数据库部署位置（接入方式）阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...
备份费用
针对上述情况，建议您在购买时选择较高规格 或serverless规格 的备份计划，或在出现异常后请先尝试 升级备份计划 至较高规格，再重新尝试备份。若问题仍无法解决，请到DBS客户咨询群（钉钉群号：35585947）进行咨询。具体请以备份计划购买...
功能特性
数据库审计提供用户行为发现审计、多维度分析、实时报警和报表功能。用户行为审计 支持关联应用层和数据库层的访问操作，您可以在C/S架构和B/S架构中使用应用身份识别功能。支持溯源应用者的身份和行为。多维度线索分析 风险和危害线索 ...
HDFS概述
Active NameNode负责处理DataNode和Client的请求，Standby NameNode跟Active NameNode一样拥有最新的元数据信息，随时准备在Active NameNode出现异常时接管其服务。如果Active NameNode异常，Standby NameNode会感知到并切换成Active ...
创建备份计划
无需购买：如果您在DBS控制台备份RDS数据库、ECS自建数据库、本地IDC数据库或其他云数据库时，由于是通过公网或您自行准备的专线、VPN网关、智能网关等网络进行备份，将不会产生DBS网络费用，无需购买网络包。DBS控制台支持创建按量付费的...
源为PolarDB-X的功能规范和约束说明
在出现故障（如网络中断、机房批量设备故障或互联网数据中心IDC故障），且DTS任务存在延迟的情况下，此时如更新至目标库的最后一条数据的时间与故障发生时的时间之差小于RPO（如5分钟），则可以业务优先恢复为准则切流。切流后可能有5分钟...
工作原理
下探分析用于多维时序数据的根因定位，当监控的时序指标出现异常时，分析这个时序指标的各个维度，检测是哪个维度或者哪些维度的组合导致了指标异常。通过指标的各个维度进行根因定位，便于运维人员在服务异常时快速定位异常根因。例如网站...
数据服务入门
DataWorks数据服务的主要目标是为个人、团队和企业构建统一的数据服务总线，帮助用户统一管理面向内外部的...日志分析：可使用日志分析功能对调用请求进行分析，当调用请求出现异常时，智能分析可帮助您快速定位问题，并给出诊断结果和建议。
DBGateway常见问题
请执行以下命令确认：telnet 数据库实例IP或域名 数据库实例服务端口号 例如：telnet 192.168.XX.XX 3306 如出现以下提示，表示网络连接正常，需要参考上文，查看DBGateway日志进行进一步排查。Connected to 192.168.XX.XX Escape ...
配置备份计划
数据库所在位置 待备份数据库实例的所在位置，支持类型如下：RDS实例 有公网IP:Port的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能网关接入的自建数据库 PolarDB 无公网IP:Port的自建数据库(通过数据库网关DG接入)说明 本示例为...
Hive服务异常排查及处理
可继续对HiveMetaStore或者HiveServer2的日志进行排查，日志路径一般位于/mnt/disk1/log/hive/中，可逐步检查组件的.log、.err、.out 及GC等日志，判断HiveMetastore或者HiveServer2出现异常的真实原因。HiveMetaStore后端数据库问题 常见...
Kafka增量数据同步至MaxCompute
推荐勾选 出错后自动重跑，重跑次数设置3，重跑间隔设置2，让同步实例出现异常的话能够自动重跑实现自愈。配置调度资源组。按照需要选择调度资源组，推荐使用独享调度资源组。配置调度依赖。本实践同步任务无需在特定其他任务运行成功后才...
Kafka增量数据同步至MaxCompute
推荐勾选 出错后自动重跑，重跑次数设置3，重跑间隔设置2，让同步实例出现异常的话能够自动重跑实现自愈。配置调度资源组。按照需要选择调度资源组，推荐使用独享调度资源组。配置调度依赖。本实践同步任务无需在特定其他任务运行成功后才...
恢复SQL Server物理备份
本文介绍 数据库备份DBS 如何恢复已完成物理备份的SQL Server数据到自建数据库，可用于误操作后恢复以及分析历史数据等场景。支持恢复的数据库类型 目标数据库类型 说明 ECS自...如果恢复任务出现异常或报错，请参见 常见报错 排查尝试解决。
模型创建
时序异常检测 esd 达摩院自研算法，适用于尖刺型异常（例如监控曲线出现尖刺的现象），对于数据点中有少量显著离群点的情况，检测结果准确。详细信息，请参见 时序异常检测。nsigma 达摩院自研算法，原理简单，便于分析异常原因。详细信息...
SQL Server数据源
否 无 fetchSize 该配置项定义了插件和数据库服务器端每次批量数据获取条数，该值决定了数据集成和服务器端的网络交互次数，能够提升数据抽取性能。说明 fetchSize 值过大（>2048）可能造成数据同步进程OOM。否 1024 对于您配置的 table、...
DB2数据源
数据同步系统会启动并发任务进行数据同步，以提高数据同步的效能：推荐 splitPk 用户使用表主键，因为表主键通常情况下比较均匀，因此切分出来的分片也不容易出现数据热点。目前 splitPk 仅支持整型数据切分，不支持浮点、字符串和日期等...
主备方案介绍
Q：目标实例出现异常无法写入时，LTS是否会缓存数据？A：LTS不会缓存数据，数据同步中当目标实例无法写入时，会记录读取WAL的点位，保证数据在目标实例恢复后继续同步数据，数据存储在源集群的Hlog中。Q：数据D1写入主实例，但数据D1尚未...
执行补数据并查看补数据实例（新版）
补数据可通过补历史或未来一段时间的数据，将写入数据至对应时间分区。代码中的 调度参数，将根据补数据选择的业务时间自动替换为具体值，并结合业务代码将对应时间数据写入指定分区。具体写入的分区与执行的代码逻辑，与任务定义的代码...
MariaDB逻辑备份
如果备份计划出现异常或报错，建议您及时排查问题并修复。具体操作，请参见 如何修复异常DBS备份计划。若按照文中修复建议仍未解决您的问题，请到DBS客户咨询群（钉钉群号：35585947）进行咨询。相关操作 备份完成后，您可以查看备份计划或...
逻辑备份PostgreSQL数据
您可以使用PostgreSQL自带的工具pg_dump将实例的数据进行逻辑备份，后续导出到本地保存。背景信息 pg_dump是备份PostgreSQL数据库的工具，可用于...相关文档 如果数据库出现异常需要恢复数据，请参见 使用pg_restore恢复逻辑备份文件数据。
Task快速重启配置
从而避免由于非Source Task异常导致的Source回到上一个Checkpoint位点重新消费数据的情况，减少由于Task取消、重启、追数据导致作业无法正常消费数据的时长。此外，还可以缓解高并发的情况下，所有Task进行一轮Failover的调度时间和初始化...
源为PolarDB-X的功能规范和约束说明
在出现故障（如网络中断、机房批量设备故障或互联网数据中心IDC故障），且DTS任务存在延迟的情况下，此时如更新至目标库的最后一条数据的时间与故障发生时的时间之差小于RPO（如5分钟），则可以业务优先恢复为准则切流。切流后可能有5分钟...
如何恢复数据到其它数据库实例
数据库备份DBS 支持恢复已有备份数据到源备份数据库实例上，同时也支持恢复到其它已有数据库实例上，包括RDS实例、ECS上的自建数据库等，可用于误操作后恢复以及分析历史数据等...如果恢复任务出现异常或报错，请参见 常见报错 排查尝试解决。
创建同步ADS
即数据写入DataHub中后若干秒内将会同步到ADS，网络异常的情况可能造成重复数据Update，但是保证数据At least once语义。4）ADS的写入性能直接影响同步的性能，若ADS实例性能过低，可能导致DataHub同步较慢，数据堆积，严重情况可能因为...
节点诊断
ECS实例网卡链路层状态 检查ECS实例网卡链路层是否出现异常。ECS实例未正常启动或网络配置有问题，您可以尝试通过重启实例进行恢复。ECS实例启动状态 检查ECS实例的boot操作是否能正常执行加载。ECS实例无法正常启动，您需要创建一个新的...
RDS术语
当备实例不可用或者主备实例间出现网络异常时，半同步会退化为异步。包年包月 预付费，即在新建实例时需要支付费用。适合长期需求，价格比按量付费更实惠，且购买时长越长，折扣越多。更多信息，请参见 计费项。备份 为保证数据的完整性和...
RDS术语
当备实例不可用或者主备实例间出现网络异常时，半同步会退化为异步。包年包月 预付费，即在新建实例时需要支付费用。适合长期需求，价格比按量付费更实惠，且购买时长越长，折扣越多。更多信息，请参见 计费项。备份 为保证数据的完整性和...
企业版和标准版功能对比
自治服务开启后，DAS会在数据库出现异常时，自动进行根因分析，给出优化或止损建议，并自动进行优化或止损操作（需经您授权后才会开启优化操作）。支持 支持 会话管理 PolarDB MySQL版 的一键诊断融合了DAS部分功能，您可以通过其中的会话...
- 产品推荐
- 这些文档可能帮助您