如何接入链路追踪
在微服务分布式场景下，全链路追踪功能给业务提供了各个服务点执行情况的可视化快速分析定位能力。在定时任务场景下，业务执行链路可能比常规实时业务的执行链路更长，接入全链路追踪有助于查询任务执行耗时、分析执行异常等问题。本文介绍...
如何接入链路追踪
在微服务分布式场景下，全链路追踪功能给业务提供了各个服务点执行情况的可视化快速分析定位能力。在定时任务场景下，业务执行链路可能比常规实时业务的执行链路更长，接入全链路追踪有助于查询任务执行耗时、分析执行异常等问题。本文介绍...
BI分析模式数据面板功能介绍
使用BI分析模式配置组件数据是一个全新的数据配置功能，需要与您准备的数据集内容相结合，您可以使用BI分析模式，为组件自由分配所需数据集的字段内容，合理配置图表数据映射和其他数据筛选等功能。本文介绍BI分析模式下组件数据配置面板...
新功能发布记录
2022.06.25 所有用户 数据智能诊断 数据质量是做出推荐效果的基础，推出数据诊断功能辅助分析数据存在的问题、优化的空间，从而获得更优质的推荐效果：每日凌晨将自动触发数据诊断，结合服务可用性、数据逻辑合理性、算法链路是否奏效等多...
压测场景的结构和数据分配
本文主要通过图例介绍常见的压测场景内的逻辑结构关系，并说明数据在压测中是如何分配的。基本概念 压测API：指由用户行为触发的一条端上请求，是压测中的必需元素。串联链路：指一组压测API的有序集合（类似于事务），具有业务含义。关联...
调用链采样配置最佳实践
当业务量级不断增长，链路数据也会随之增多，简单算一下，如果某个链路的调用量4000 QPS，每个调用产生大概30个Span，每个Span大约500 Bytes，那一天产生的数据就是：4000×30×500（Bytes）×24（Hours）=4.7（TiB）。如果有100个调用链路...
什么是云原生应用组装平台BizWorks
云原生应用组装平台BizWorks是基于组装式理念和阿里巴巴中台实践构建的一体化云原生应用开发和组装平台，提供了业务建模、微服务开发、轻应用组装、能力开放等平台功能，致力于帮助企业快速设计、构建、组装和运营可复用的业务能力组件和...
PolarDB-X 2.0和1.0功能对比
数据同步 PolarDB-X 1.0中的数据同步到下游，需要使用DTS来订阅其中的每一个MySQL实例，并仔细处理同一个逻辑表的不同分表之间，例如表名的差异等细节，并且在同步链路中不支持DDL操作。提供统一的Binlog服务，可以使用DTS像订阅一个单机...
管理明细及汇总表任务字段
本文为您介绍明细及汇总表（维度逻辑表、事实逻辑表、汇总逻辑表）字段支持的运维操作。字段以及批量操作 页面入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引，进入 明细及汇总表 任务字段管理...
管理明细及汇总表任务字段
本文为您介绍明细及汇总表（维度逻辑表、事实逻辑表、汇总逻辑表）字段支持的运维操作。字段以及批量操作 页面入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引，进入 明细及汇总表 任务字段管理...
配置逻辑表数据延迟
维度与事实逻辑表数据延迟用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。本文为您介绍如何配置维度与事实逻辑表数据延迟。使用限制 事实逻辑表数据时效须为天时效（离线T+1）且该逻辑表设置了 事件时间 字段，才可配置是否开启数据...
配置逻辑表数据延迟
维度与事实逻辑表数据延迟用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。本文为您介绍如何配置维度与事实逻辑表数据延迟。使用限制 事实逻辑表数据时效须为天时效（离线T+1）且该逻辑表设置了 事件时间 字段，才可配置是否开启数据...
计费常见问题
A：不同规格实例的传输性能不同，当实例其他参数相同且影响因素（传输网络的带宽和网络延时等）固定时，规格越高性能越强，更多信息请参见 数据迁移链路规格说明 和 数据同步链路规格说明。Q：为什么数据同步实例的价格普遍高于数据迁移...
概览信息
对数据资产的全局及增量数据进行统计和展示。本文介绍如何查看及搜索数据资产。前提条件 已在运营模块中公开数据表、API和指标等数据资产。背景信息 在运营公开一条数据，资产首页刷新数量实时+1。在运营隐藏一条数据，资产首页刷新数量...
概览信息
对数据资产的全局及增量数据进行统计和展示。本文介绍如何查看及搜索数据资产。前提条件 已在运营模块中公开数据表、API和指标等数据资产。背景信息 在运营公开一条数据，资产首页刷新数量实时+1。在运营隐藏一条数据，资产首页刷新数量...
升级任务的链路规格
若现有的迁移或同步任务的链路规格不能适应业务需求时，您可以考虑升级链路规格以提升传输数据的性能，确保任务的顺利执行并更好地支持不断增长的业务需求。前提条件 任务须处于 运行中、已暂停 或 运行失败 状态。任务需为数据迁移任务和...
升级实例配置
说明 关于链路的规格信息，请参见 数据迁移链路规格说明 和 数据同步链路规格说明。升级数据迁移任务时，选择 迁移链路规格。升级数据同步作业时，选择 同步链路规格。说明 本文介绍通用操作，实际页面可能有差异。如果需要更改同步拓扑，...
新功能发布记录
逻辑数仓 数据归档新增归档至 AnalyticDB MySQL版 链路 迭代 定时将大表的数据归档至OSS、Lindorm、AnalyticDB MySQL版 数据库，解决了由于线上数据量增多影响表的查询性能与业务运作的问题。数据归档至AnalyticDB MySQL 3.0 03月 功能名称...
步骤八：验证数据
本文为您介绍如何通过即席查询来验证本教程开发的数据模型是否符合预期。即派生指标是否能够统计到 最近1天西湖龙井品类订单总金额。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，进入 新建即席查询 对话框。在 ...
步骤八：验证数据
本文为您介绍如何通过即席查询来验证本教程开发的数据模型是否符合预期。即派生指标是否能够统计到 最近1天西湖龙井品类订单总金额。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，进入 新建即席查询 对话框。在 ...
产品概述
产品描述 Dataphin是集产品、技术、方法论于一体的智能大数据平台建设引擎，为您提供数据引入、规范定义、建模研发、资产管理、数据服务等全链路智能数据建设及治理服务。功能 描述 Dataphin全托管 全托管又称公共云多租户模式，只需购买...
构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
文档更新动态（2022年）
更新说明 逻辑表实例 补数据实例 新增 强制重跑下游 操作，以实现全链路数据修复性重跑。新功能 脚本实例 逻辑表实例支持的运维操作 萃取实例 告警策略优化：针对配置了运行失败监控的实例，告警策略由 每次运行失败均告警 修改为 仅最后...
无感集成（Zero-ETL）
为了解决这些问题，阿里云瑶池数据库提供了无感集成（Zero-ETL）功能，可以快速构建业务系统（OLTP）和数据仓库（OLAP）之间的数据同步链路，将业务系统（OLTP）的数据自动进行提取、转换清洗和加载到数据仓库（OLAP），从而一站式完成数据...
查看表资产详情
已在数据建模模块中创建逻辑表、物理化逻辑表、以及设置数据表质量规则。已在质量评估模块中创建质量检测计划任务。单击 数据质量>历史运行，展示质量运行信息以及运行日志，包括质量评分、质量结果和运行日志等。单击 查看详情，跳转到...
查看表资产详情
已在数据建模模块中创建逻辑表、物理化逻辑表、以及设置数据表质量规则。已在质量评估模块中创建质量检测计划任务。单击 数据质量>历史运行，展示质量运行信息以及运行日志，包括质量评分、质量结果和运行日志等。单击 查看详情，跳转到...
Tair全球多活简介
全球多活架构 Tair 全球多活 是所有全球多活子实例（简称子实例）及链路的逻辑集合，所有子实例通过同步通道保持实时数据同步，各组件介绍如下：子实例 构成全球多活实例的子实例，即独立的实例，是构成多活实例的基本服务单元。...
Redis全球多活简介
全球多活架构 Redis 全球多活 是所有全球多活子实例（简称子实例）及链路的逻辑集合，所有子实例通过同步通道保持实时数据同步，各组件介绍如下：子实例 构成全球多活实例的子实例，即独立的实例，是构成多活实例的基本服务单元。...
TOP Objects
平均逻辑读 数据库对象平均每次执行的逻辑读消耗。平均返回行 数据库对象平均每次执行返回的行数。实时TOP Objects-总开销：从总CPU开销占比、总执行时间占比、总逻辑IO占比和总返回行占比四个方面查看实例中的TOP Objects。详细参数说明...
分布式链路配置
链路采样配置 链路采样配置支持链路关键字段采集配置、链路采样率配置、链路采样率配置。功能入口 在左侧导航栏上，单击 分布式链路>应用拓扑。单击配置图标，进入链路采样配置页面。链路关键字段采集配置 默认采集链路每个 span 的全字段...
数据资产定级
数据的资产等级，可以根据数据质量不满足完整性、准确性、一致性、及时性对业务的影响程度进行划分。数据等级定义如下：毁灭性质：数据一旦出错，将会引起重大资产损失，面临重大收益损失等。标记为A1。全局性质：数据直接或间接用于企业级...
功能特性
可观测链路 OpenTelemetry 版 该产品针对 PHP、C++、Go、Node.js 等多语言应用，提供端到端全链路追踪、应用监控与告警、链路拓扑、日志关联分析能力，并基于 OpenTelemetry 开源标准，兼容 Jaeger、Zipkin、SkyWalking 等开源项目数据上报...
数据资产定级
数据的资产等级，可以根据数据质量不满足完整性、准确性、一致性、及时性对业务的影响程度进行划分。数据等级定义如下：毁灭性质：数据一旦出错，将会引起重大资产损失，面临重大收益损失等。标记为A1。全局性质：数据直接或间接用于企业级...
功能特性
支持MaxCompute外表 数据同步链路 从Kafka同步数据 支持Kafka的数据实时同步到ClickHouse。从Kafka同步数据 从MySQL同步 支持通过DTS从自建MySQL或RDS MySQL同步数据到ClickHouse中进行实时分析。从MySQL同步 从SLS同步 支持使用日志投递...
什么是Dataphin
Dataphin是阿里巴巴集团OneData数据治理方法论内部实践的云化输出，一站式提供数据采、建、管、用全生命周期的大数据能力，以助力企业显著提升数据治理水平，构建质量可靠、消费便捷、生产安全经济的企业级数据中台。Dataphin兼容多种计算...
产品架构
数据源地址动态适配 对于数据订阅及同步链路，容灾系统还会监测数据源的连接地址切换等变更操作，一旦发现数据源发生连接地址变更，它会动态适配数据源新的连接方式，在数据源变更的情况下，保证链路的稳定性。数据迁移工作原理 数据迁移...
购买流程
迁移链路规格 DTS为您提供了不同性能的链路规格，迁移链路规格的不同会影响迁移速率，您可以根据业务场景进行选择，详情请参见 数据迁移链路规格说明。资源组 选择迁移任务所属的资源组，相关介绍，请参见 什么是资源管理。购买量 链路数量...
查询数据代码说明
查询数据的代码说明 查询逻辑表数据。SELECT*FROM 板块英文名.逻辑表名 WHERE ds='${bizdate}';其中：板块英文名：需要查询逻辑表所在数据板块的 板块英文名。您可以在数据板块页面，查看数据板块公用英文名。说明 若为开发环境查询数据，...
查询数据代码说明
查询数据的代码说明 查询逻辑表数据。SELECT*FROM 板块英文名.逻辑表名 WHERE ds='${bizdate}';其中：板块英文名：需要查询逻辑表所在数据板块的 板块英文名。您可以在数据板块页面，查看数据板块公用英文名。说明 若为开发环境查询数据，...
购买同步实例
说明 关于各链路规格的说明及性能测试情况请参见 数据同步链路规格说明。RegionId String 否 cn-hangzhou 数据同步实例地域的ID，与 DestRegion参数保持一致。Topology String 否 oneway 同步拓扑，取值：oneway：单向同步 bidirectional：...
- 产品推荐
- 这些文档可能帮助您