文档更新动态（2022年）
更新说明 逻辑表实例 补数据实例 新增 强制重跑下游 操作，以实现全链路数据修复性重跑。新功能 脚本实例 逻辑表实例支持的运维操作 萃取实例 告警策略优化：针对配置了运行失败监控的实例，告警策略由 每次运行失败均告警 修改为 仅最后...
2023年
修复并发插入数据过程中，会出现误报主键冲突的问题。2023年04月（V2.0.0.2）类别 功能 功能描述 相关文档 缺陷修复 修复实时写入时，执行Flush、Compact以及并发DDL等操作可能出错的问题。2023年03月（V2.0.0.1）类别 功能 功能描述 相关...
数据质量教程概述
在整体数据链路的处理过程中，为保证最终产出数据的质量，您需要对数据仓库ODS、CDM和ADS层的数据分别进行监控。数据仓库分层的定义请参见 数仓分层。本教程基于 搭建互联网在线运行分析平台 教程，ods_user_trace_log、dw_user_trace_log...
调用链分析
将应用数据上报至 可观测链路 OpenTelemetry...接口指标详情 相关文档 为避免在出现问题后被动诊断错误原因，您还可以使用告警功能针对一个接口或全部接口创建告警，即可在出现问题时向运维团队发送通知。如何创建告警，请参见 创建告警规则。
数据质量教程概述
在整体数据链路的处理过程中，为保证最终产出数据的质量，您需要对数据仓库ODS、CDM和ADS层的数据分别进行监控。数据仓库分层的定义请参见 数仓分层。本教程基于 搭建互联网在线运行分析平台 教程，ods_user_trace_log、dw_user_trace_log...
SSL连接RDS PostgreSQL数据库
若连接信息无误，会出现如下界面，则表示连接成功。重要 postgres是RDS实例默认的系统数据库，请勿在该数据库中进行任何操作。psql命令行终端SSL连接 说明 本步骤依赖本地PostgreSQL客户端自带的psql命令行工具，请确保您已安装PostgreSQL...
产品架构
数据源地址动态适配 对于数据订阅及同步链路，容灾系统还会监测数据源的连接地址切换等变更操作，一旦发现数据源发生连接地址变更，它会动态适配数据源新的连接方式，在数据源变更的情况下，保证链路的稳定性。数据迁移工作原理 数据迁移...
新建同步节点并运行后上线
数据同步节点，实现不同云计算资源之间的数据传输。本文介绍如何新建数据同步节点并运行。操作步骤 步骤一：登录节点任务设置页面 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组...
新建同步节点并运行后上线
数据同步节点，实现不同云计算资源之间的数据传输。本文介绍如何新建数据同步节点并运行。操作步骤 步骤一：登录节点任务设置页面 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，...
购买流程
迁移链路规格 DTS为您提供了不同性能的链路规格，迁移链路规格的不同会影响迁移速率，您可以根据业务场景进行选择，详情请参见 数据迁移链路规格说明。资源组 选择迁移任务所属的资源组，相关介绍，请参见 什么是资源管理。购买量 链路数量...
设置SSL加密
为了提高链路安全性，您可以启用SSL（Secure Sockets Layer）加密，并安装SSL CA证书到需要的应用服务。SSL在传输层对网络连接进行加密，能提升通信数据的安全性和完整性，但会同时增加网络连接响应时间。背景信息 SSL是Netscape公司所提出...
方案概述
切换域名后，可能会存在DNS解析缓存问题，在缓存过期时间内可能会出现连接不上数据库或数据库只支持读操作而无法执行写入操作等情况，建议您刷新一下服务器的DNS缓存。升级评估 为了保证升级链路的顺利和更好的升级体验，PolarDB 提供了...
等待资源
为什么会出现等待资源？为什么任务一直在等待gateway调度资源？为什么数据集成任务一直显示wait？为什么会出现等待资源？问题现象 调度将任务下发到对应执行引擎上，此过程可能会出现以下等待资源问题：等待调度资源组。数据集成任务等待...
大数据安全治理的难点
大数据系统以数据类型多（结构化、非结构化、半结构化）、数据量大（动辄PB级别）著称，某些巨头组织一天就能新增数十万甚至数百万张表，如此体量给数据分级分类带来了极大挑战，通过人工进行数据分级分类显然是不现实的，难免会出现遗漏的...
异常分析
将应用数据上报至 可观测链路 OpenTelemetry 版 后，可观测链路 OpenTelemetry 版 即可开始监控应用，您可以在 异常分析 页面按照异常名称、接口名称、主机对异常次数、异常列表进行筛选分析，优化产生异常的代码。异常分析功能中，异常...
术语表
前置串联链路一般用于数据的预先处理，例如导出登录Cookie。后置串联链路 在压测结束时执行的串联链路，用于在常规串联链路执行完成后执行必要操作，功能类似于JMeter中的TearDown Thread Group。重要 只有主动单击结束压测才会执行后置...
计费说明
阿里云 可观测链路 OpenTelemetry 版 新版计费按写入可观测数据量计费。本文介绍 可观测链路 OpenTelemetry 版 按写入数据量计费模式计费项及付费方式。说明 ARMS面向新用户支持按写入可观测数据计费方案。对于已开通产品的用户，请通过...
无感集成（Zero-ETL）
传统的ETL流程通常会面临以下挑战：资源成本增加：不同的数据源可能需要不同的ETL工具，搭建ETL链路会产生额外的资源成本。系统复杂度增加：用户需要自行维护ETL工具，增加了运维难度，无法专注于业务应用的开发。数据实时性降低：部分ETL...
调用链采样配置最佳实践
例如电商系统中，商品详情和购买流程的业务逻辑是比查询或编辑用户信息的优先级高，对于这类业务逻辑对应的后端接口，是需要被优先采集以便确保重要的、难以快速复现的链路故障能够被立刻分析和解决。所以这类接口对应的调用链采样率建议...
数据治理
数据地图 为什么数据地图数据总览页存储量和存储趋势图相差较大？数据地图血缘展示延迟问题 数据地图新建表搜不到 当前表业务逻辑变更如何通知下游？哪些类型的Hive表支持在数据地图中预览？数据保护伞 数据保护伞为什么有时候查询脱敏有...
逻辑库
等于1 等于1时，仅存在分表的单个数据库会抽取成逻辑库。使用场景 如下为典型的逻辑库场景：单库-分表 分库-分表 分库-不分表 注意事项 SQL Console数据查询、结构设计、数据导出、数据变更等功能支持选择物理库或者逻辑库操作。选择逻辑库...
为什么在控制台看不到数据？
使用开源客户端上报数据后，如果遇到控制台或日志中打印了错误日志，或者控制台上没有观察到报错数据，可以根据本文档进行问题排查。控制台没有数据的可能原因：网络无法连通 控制台中上报开关设置有误 SLS数据源上报失败 HTTP上报数据失败...
基于Delta lake的一站式数据湖构建与分析实战
其主要数据链路如下：步骤一：服务开通并准备数据 1.服务开通 确保DLF、OSS、DDI、RDS、DTS等云产品服务已开通。注意DLF、RDS、DDI实例均需在同一Region下。2.数据准备 RDS数据准备，在RDS中创建数据库dlf-demo。在账户中心创建能够读取...
数据库分析
将应用数据上报至 可观测链路 OpenTelemetry 版 后，可观测链路 OpenTelemetry 版 即可开始监控应用，您可以在 数据库分析 页面查看数据库分析数据，从而了解数据库的调用详情。前提条件 已将应用数据上报至 可观测链路 OpenTelemetry 版，...
设置SSL加密
为提高链路的安全性，您可以开通SSL（Secure Sockets Layer）加密，然后安装SSL CA证书到您的应用服务。SSL加密功能在传输层对网络连接进行加密，在提升通信数据安全性的同时，保证数据的完整性。本文介绍SSL加密功能的相关操作。前提条件 ...
性能监控最佳实践
提高故障排查效率：当系统或应用出现故障时，传统的性能监控方案通常需要IT运维人员手动分析监控数据来确定故障原因，这样会浪费大量的时间和精力。而一体化性能监控能够对多种关联的监控数据进行自动分析和处理，帮助IT运维人员快速定位...
基本概念
本文介绍在使用 可观测链路 OpenTelemetry 版 之前需要了解的基本概念，包括分布式追踪系统的作用，什么是调用链，可观测链路 OpenTelemetry 版 所依赖的OpenTracing数据模型，以及在 可观测链路 OpenTelemetry 版 产品里数据是如何上报的...
全链路流量控制简介
多应用问题排查 当部署在EDAS中的HSF微服务应用出现问题时，可以通过全链路流量控制将特定流量引入到某个应用，排查链路中具体应用的问题，保证整个微服务应用正常运行。入口应用与流量控制规则 在全链路流量控制中首先要指定入口应用，并...
计费项
常见问题 为什么没有传输数据的按量付费实例还在收费？按量付费的DTS实例在增量任务运行期间，将按照实际资源使用情况进行计费，与源端数据是否发生变更无关。建议您在完成数据传输后，尽快结束或释放实例。具体操作，请参见 结束DTS实例 ...
PolarDB-X 1.0迁移至PolarDB-X 2.0
类型 说明 源库限制 待迁移的表需具备主键或唯一约束（仅具有唯一约束的表不支持库表结构迁移，建议使用主键约束），且字段具有唯一性，否则可能会导致目标数据库中出现重复数据。如迁移对象为表级别，且需进行编辑（如表列名映射），则单...
通过Jaeger上报Go应用数据
通过Jaeger为应用埋点并上报链路...常见问题 Q：在运行过程中，为什么会出现以下报错？2021/06/28 21:11:54 ERROR:error when flushing the buffer:error from collector:403 A：出现上述报错，说明输入的接入点信息不正确。请更正并重试。
通过Zipkin上报Go应用数据
通过Zipkin为应用埋点并上报链路数据至 可观测链路 OpenTelemetry 版 后，可观测链路 OpenTelemetry 版 即可开始监控应用，您可以查看应用拓扑、调用链路、异常事务、慢事务和SQL分析等一系列监控数据。本文介绍如何使用Zipkin为Go应用埋点...
电商压测场景示例
根据业务逻辑，串联链路2：购买产品B 中的一系列用户行为是存在先后顺序的，所以将这些存在先后关系的API添加到一个串联链路中，PTS压测中会按照顺序发起压测。综合来看，在压测中，示例中的 浏览产品A 的API和 登录 的API，会同时发起压测...
通过ALB链路追踪实现业务全链路分析
阿里云 ALB 支持链路追踪功能，通过该功能您可以获得完整的 ALB 请求追踪数据，包括请求的来源、经过的节点、响应时间等信息，有助于您快速定位和解决业务问题。背景信息 链路追踪为分布式应用的开发者提供了完整的调用链路还原、调用请求...
使用DTS迁移实例
本文介绍如何使用数据传输服务DTS（Data Transmission Service），实现 RDS PostgreSQL 间的结构迁移、全量数据迁移以及增量数据迁移。同时使用这三种迁移类型可以实现在业务不停服的情况下，平滑地完成数据库的迁移。前提条件 已创建源和...
PolarDB-X 2.0迁移至Elasticsearch
源库、目标库出现其他问题后的重试时间 在迁移任务启动后，若源库或目标库出现非连接性的其他问题（如DDL或DML执行异常），则DTS会报错并会立即进行持续的重试操作，默认持续重试时间为10分钟，您也可以在取值范围（1~1440分钟）内自定义重...
通过Jaeger上报.NET应用数据
通过Jaeger为应用埋点并上报链路数据至 可观测链路 OpenTelemetry 版 后，可观测链路 OpenTelemetry 版 即可开始监控应用，您可以查看应用拓扑、调用链路、异常事务、慢事务和SQL分析等一系列监控数据。本文介绍如何使用OpenTracing/...
AliPG优势
支持 逻辑复制槽故障转移（Logical Replication Slot Failover），在使用逻辑复制功能时,主备切换不影响逻辑复制可靠性。支持 透明数据加密，对数据文件进行实时加密和解密，保护用户数据隐私。支持 SSL链路加密，对网络连接进行加密，保证...
Teradata迁移至云原生数据仓库 AnalyticDB PostgreSQL...
待迁移的表需具备主键或唯一约束，且字段具有唯一性，否则可能会导致目标数据库中出现重复数据。如迁移对象为表级别，且需进行编辑（如表列名映射），则单次迁移任务仅支持迁移至多1000张表。当超出数量限制，任务提交后会显示请求报错，...
配置数据层
配置异地多活数据层主要包括数据源、数据同步以及数据保护规则。各单元之间数据源的数据会通过数据同步组件进行复制，并按照指定的数据保护规则承担不同比例流量写入和读取，使各个单元的数据保持最终一致性。当某个单元出现异常或者不可用...
- 产品推荐
- 这些文档可能帮助您