底纹报表
底纹引导搜索点赞数/引导搜索PV 依赖开通数据采集功能，并且上传了用户点赞(bhv_type=”like”)行为数据 衡量底纹引导点赞效果 引导搜索评论转化率 底纹引导搜索的评论转化率 底纹引导搜索评论数/引导搜索PV 依赖开通数据采集功能，并且...
新建行为关系
自动解析 系统将根据任务血缘自动解析上游依赖节点并做关联，数据更新将依赖上游数据产出。说明 若自动解析的结果不符合预期，您可以单击 关闭生效按钮，关闭后表示不选择依赖该节点。默认本周期依赖。添加依赖 若 自动解析 无法解析出调度...
热搜报表
热搜引导搜索点赞数/引导搜索PV 依赖开通数据采集功能，并且上传了用户点赞(bhv_type=”like”)行为数据 衡量热搜引导点赞效果 引导搜索评论转化率 热搜引导搜索的评论转化率 热搜引导搜索评论数/引导搜索PV 依赖开通数据采集功能，并且...
下拉提示报表
说明 目前OpenSearch对下拉提示进行的数据统计指标包括：核心指标，流量指标，点击指标，引导搜索指标，Query分析指标，五个维度：核心指标 指标名 定义 计算公式 依赖 意义 下拉提示PV 请求下拉提示且返回成功的次数，不包括返回错误的...
开发前准备：绑定数据源或集群
数据建模：执行相关依赖于数据源的建模任务，例如，模型开发、模型发布等。详情请参见 概述。管理数据源：设置默认数据源：若同类型数据源存在多个，则可设置某个数据源为默认数据源，设置后，后续开发任务默认首选使用该数据源。说明 当同...
数据源管理概述
功能介绍 多数据源类型接入：Dataphin内置丰富的数据源类型，支持对接的数据源包括大数据存储型数据源、文件型数据源、消息队列型数据源、关系型数据源和NoSQL数据源。更多信息，请参见 Dataphin支持的数据源。自定义数据源类型：在内置的...
数据源管理概述
功能介绍 多数据源类型接入：Dataphin内置丰富的数据源类型，支持对接的数据源包括大数据存储型数据源、文件型数据源、消息队列型数据源、关系型数据源和NoSQL数据源。更多信息，请参见 Dataphin支持的数据源。自定义数据源类型：在内置的...
数据库画像
数据库画像是数据库评估的基础数据，可以帮助您更好地了解自己的源数据库，在数据库迁移、改造等阶段，可以快速查找源数据库信息，指导迁移与改造。新建画像 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 集成与开发（DTS）>异构数据库迁移...
临时查询
临时查询主要针对即席查询（Ad Hoc）的场景，面向数据科学家和数据分析师，其主要使用工具为SQL。运行临时查询作业时，将会在页面下方显示日志和查询结果。本文为您介绍如何在临时查询页面新建作业、设置作业、运行作业和编辑锁操作。背景...
冷热数据分层存储
不依赖冷热数据存储规则。背景知识 热数据：访问频次较高的数据，存储在热数据盘（即创建集群时所选的ESSD云盘或高效云盘）中，满足高性能访问的需求。冷数据：访问频次较低的数据，存储在较低价的冷数据盘中，满足高性价比的存储需求。...
轻应用概述
您可以根据需要选择依赖的数据源，轻应用中能够直接看到其中构建的数据模型、已定义的接口。具体操作，请参见 关联和管理依赖数据源。除了复用关联数据源里的数据模型之外，轻应用也支持开发者自定义应用内部的结构对象模型。具体操作，请...
任务运行成功没有数据
没有依赖产出该上游表数据的节点任务。有依赖产出表的节点，但是依赖的节点产生的表分区不是想要的，那就说明依赖的周期不对，可以在周期实例参数配置及日志详情里面查看一天的实例上下游参数替换情况。请重新设置节点依赖关系 查看上下游...
DROP OWNED
RESTRICT 如果有任何其他数据库对象依赖于一个受影响的对象，则拒绝删除一个角色所拥有的对象。这是默认值。说明 DROP OWNED 常常被用来为移除一个或者多个角色做准备。因为 DROP OWNED 只影响当前数据库中的对象，通常需要在包含将被移除...
示例：基于共享能力搭建轻应用
步骤二：关联数据源 说明 在依赖数据源页面添加依赖数据源后，您可以在服务方法的编排中使用关联的数据源的服务方法。在 应用列表 页面，单击目标轻应用名称。在目标轻应用导航栏中，选择 服务管理>依赖数据源。在 依赖数据源 页面，单击 ...
配置备份策略
说明 数据恢复一般依赖恢复时间点前最近的一次数据备份和之间的日志备份。为了保证保留天数范围内的数据可恢复，实际保留备份的天数可能会大于选择的天数。数据备份类型 全量 当前仅支持全量类型的数据备份。备份文件保存地域 本地 当不...
删除或变更节点输出的影响
当下游节点还未形成依赖，导致早于上游节点产出表数据，从而产生数据质量问题。因此，存在输出变更的场景请评估影响并谨慎操作。导致节点输出被删除或变更的操作 节点输出除了节点创建时自动生成两个节点输出外，您还可手动添加节点输出；...
未来规划
传统数据库架构依赖于高端硬件，每套数据库系统服务器少，架构相对简单，但无法支持新业务的扩展需求。云计算架构的核心逻辑就是通过虚拟化技术带来池化资源，云原生数据库采用分布式数据库架构，实现大规模扩展，每套数据库系统横跨多台...
提交节点报错：当前节点依赖的父节点输出名不存在
不是DataWorks每天调度产出的表数据，是不需要设置节点依赖关系的，这类表依赖可以删除，删除后提交节点时，会出现血缘关系与调度依赖配置不一致的提示，您可确认一下，是否除了删除的非周期性生成数据表的依赖关系外，有没有其他血缘与...
备份策略
说明 异地备份的数据恢复一般依赖恢复时间点前最近的一次数据备份和之间的日志备份。为了保证保留天数范围内的数据可恢复，实际保留备份的天数可能会大于选择的天数。Serverless 实例暂不支持异地备份。稀疏备份：稀疏备份支持您更灵活地...
数据类型转换
ENUM ENUM SET SET JSON 类型 MySQL 数据库 OceanBase 数据库 MySQL 租户 JSON 依赖于 OceanBase 数据库 MySQL 租户的版本：3.2.3 以下版本会转换为 TEXT，3.2.3 及以上版本会转换为 JSON。GIS 类型 重要 OceanBase 数据库 3.2.4 和 4.1.0 ...
开发前端界面
（可选）关联数据源 您可以选择关联一个或多个当前应用依赖的数据源，选择版本号及实现该数据源的中心应用版本。在关联数据源后，轻应用即可使用数据源中的结构对象及应用服务方法，实现能力的直接复用。单击页面右上角 图标或其文本框区域...
应用强弱依赖治理
应用强弱依赖治理提供应用层面的强弱依赖关系分析。用户可以选择单个治理应用，查看其依赖分析，并根据依赖验证结果操作演练，完成依赖治理，治理周期为30天。本文介绍应用强弱依赖治理的操作步骤。前提条件 需要安装探针才能识别到应用，...
配置任务流依赖检查节点
任务编排的任务流依赖检查节点可实现任务流自依赖或跨任务流间依赖，依赖的目标对象可以是某个任务流或任务节点。本文介绍配置任务流依赖检查节点的步骤。应用场景 跨任务流依赖：任务流A需要在任务流B运行成功后才能执行。例如，每周一...
运行及排错
DataWorks为您提供测试运行、补数据和周期运行三种触发方式，帮助您确认实例运行的定时时间、相互依赖关系、数据结果产出是否符合预期。测试运行：手动触发方式。如果您仅需要确认单个节点的定时情况和运行，建议您使用测试运行。详情请...
约束完整性检查
为保障数据迁移任务的顺利执行，DTS将在预检查阶段进行约束完整性...修复方法三 删除相关外键依赖 在源数据库中，删除约束完整性检查失败的子表的外键依赖。连接源数据库。通过命令删除约束完整性检查失败的子表的外键依赖。重新执行预检查。
查看并管理已生成实例
③ 第三层 补数据实例层：展示对任务执行补数据操作后生成的实例，同时您也可以查看该实例依赖的DAG图。每个业务日期下包含的补数据实例的DAG相同。第一层、第二层：单个补数据实例的支持的操作。操作 描述 一键终止 Dataphin自动选中当前...
查看并管理已生成实例
③ 第三层 补数据实例层：展示对任务执行补数据操作后生成的实例，同时您也可以查看该实例依赖的DAG图。每个业务日期下包含的补数据实例的DAG相同。第一层、第二层：单个补数据实例的支持的操作。操作 描述 一键终止 Dataphin自动选中当前...
基本概念
本文介绍数据资源平台的基本概念。任务实例说明 任务（Task）：数据处理作业单元，任务定义了...数据API：API的源头为数据表，可以是单表也可以是多表，请求后最终以类SQL的形式到数据库查询并返回符合条件的数据，将数据组装成报文格式返回。
查看并管理已提交实例
③ 第三层 补数据实例层：展示对任务执行补数据操作后生成的实例，同时您也可以查看该实例依赖的DAG图。每个业务日期下包含的补数据实例的DAG相同。第一层、第二层：单个补数据实例的支持的操作。操作 描述 一键终止 Dataphin自动选中当前...
访问MongoDB数据源
本文介绍如何使用 AnalyticDB MySQL版 湖仓版（3.0）Spark访问云数据库MongoDB数据。前提条件 已创建AnalyticDB MySQL湖仓版（3.0）集群。具体操作，请参见 创建湖仓版（3.0）集群。已创建数据库账号。如果您是通过阿里云账号访问，只需...
查看并管理已提交实例
③ 第三层 补数据实例层：展示对任务执行补数据操作后生成的实例，同时您也可以查看该实例依赖的DAG图。每个业务日期下包含的补数据实例的DAG相同。第一层、第二层：单个补数据实例的支持的操作。操作 描述 一键终止 Dataphin自动选中当前...
增强E-R
数据管理DMS 的增强E-R功能基于DMS自研的统一Catalog的元数据采集引擎、列算子血缘解析引擎（解析字段间关联、依赖和影响关系的引擎）和数据资产知识图谱构建等核心能力，可清晰地展现您名下某个数据库内资产之间的关联关系。本文介绍了...
文档修订记录
DataWorks新版数据源公告 2023年9月更新记录 时间 特性 类别 描述 产品文档 2023.9.25 更新功能 数据开发 调度依赖配置、预览依赖关系新版界面发布。配置同周期调度依赖 预览依赖关系 2023.9.20 新增功能 开放平台 新增表权限前置事件、...
管理数据标准待发布对象
导入的发布包文件中存在数据标准的变更对象时，将在数据标准待发布页面为您展示，您可以对数据标准对象进行管理和发布。数据标准待发布对象入口 请参见 发布包总览入口，进入发布包 总览 管理页面。单击 数据标准 页签，进入 数据标准 待...
管理数据标准待发布对象
导入的发布包文件中存在数据标准的变更对象时，将在数据标准待发布页面为您展示，您可以对数据标准对象进行管理和发布。数据标准待发布对象入口 请参见 发布包总览入口，进入发布包 总览 管理页面。单击 数据标准 页签，进入 数据标准 待...
什么是云原生应用组装平台BizWorks
云原生应用组装平台BizWorks是基于组装式理念和阿里巴巴中台实践构建的一体化云原生应用开发和组装平台，提供了业务建模、微服务开发、轻应用组装、能力开放等平台功能，致力于帮助企业快速设计、构建、组装和运营可复用的业务能力组件和...
配置任务调度
比如对上游产出的表数据进行进一步清洗，或者将上游清洗的结果表数据回流至其他数据库，但这些都需要等待上游节点执行成功（上游节点产出表数据）后才可以进行的操作，节点依赖关系的设置，保障的就是下游节点执行时，依赖的上游数据已经...
新增离线数据同步任务
参数 说明 依赖配置 支持配置上游依赖节点，可依赖同周期数据同步节点或数据开发节点。开启后将等待上游节点调度运行成功后，再运行当前节点。表结构变化 选择是否开启检测表结构变化。开启后，以天为单位，进行数据源端表结构检测。若发现...
新增离线数据同步任务
参数 说明 依赖配置 支持配置上游依赖节点，可依赖同周期数据同步节点或数据开发节点。开启后将等待上游节点调度运行成功后，再运行当前节点。表结构变化 选择是否开启检测表结构变化。开启后，以天为单位，进行数据源端表结构检测。若发现...
数据开发：开发者
本文以使用MaxCompute数据源，在DataWorks上运行MaxCompute作业任务为例，为您介绍开发人员如何使用数据开发（DataStudio）创建一个周期调度任务，帮助您快速了解数据开发（DataStudio）模块的基本使用。前提条件 已完成开发前的环境准备，...
- 产品推荐
- 这些文档可能帮助您