离线同步并发和限流之间的关系
在一些数据同步场景，脏数据的出现会导致任务同步效率下降，以关系数据库写出为例，默认是执行batch批量写出模式，在遇到脏数据时会退化为单条写出模式（以找出batch批次数据具体哪一条是脏数据，保障正常数据正常写出），但单条写出效率会...
操作流程
通过操作流程图，便于直观的了解到解决方案生成及使用需进行的一系列任务。...实例化解决方案 通过将导入的解决方案包实例化至工作组，以便当前工作组复用解决方案包中的数据。以整体解决方案为例，具体操作，请参见 实例化解决方案。
解决方案
本文介绍解决方案的相关问题。...在数据资源平台中，解决方案会在首次导入模型后生成快照，而在快照生成后再进行导入模型操作时，将不会对该解决方案中的内容产生影响。因此再次导入模型时，需要重新创建解决方案再做导出。
数据库可用性检查失败
解决方案 在RDS控制台的数据库管理页面中，检查相应的源和目标对应的数据库对象是否创建。如没有创建，请创建满足RDS规范的字符集的数据库，将读写权限赋予迁移账号，然后将要迁移的数据库映射到您创建的数据库，重新进行预检查。说明 针对...
到期、欠费说明
到期说明 包年包月的服务到期后，对实例的影响和解决方案如下：计费项 到期影响 解决方案 稳定变更模式 如果稳定变更模式的可用额度不足，稳定变更模式的实例会在DMS中被随机禁用。您可以选择以下任意一种解决方案：购买稳定变更模式服务后...
查看解决方案日志
解决方案日志包括实例化详情、创建日志、实例化日志和导入日志等，通过查看日志，方便定位操作中遇到的问题。本文介绍如何查看解决方案日志。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 ...
01创建解决方案
将应用、服务、数据源等资源生成整体解决方案包，便于在其他系统或工作组中快速部署。本文以按应用关联为例，介绍如何创建解决方案。前提条件 已创建“信息中心（xxzx）”工作组，具体操作，请参见 新建工作组并添加成员。线上场景已上线，...
会员中台概述
会员中台集中管理客户、订单、商品、相关权益及规则设置，对全域数据进行计算，提供对应的全域会员画像、营销数据基础等服务，并应用于各个业务系统。会员中台拥有五大版块，分别为：用户中心、订单中心、商品中心、促销中心、忠诚度系统。...
数据管理DMS解决方案系列
为了更好地指导您使用数据管理DMS（Data Management），DMS推出解决方案系列文档，旨在通过最佳实践（Step by Step）的形式向您介绍DMS研发流程、数据安全、数据开发的解决方案。研发流程解决方案 数据安全解决方案 数据开发解决方案 更多...
AnayticDB PostgreSQL版钉钉专属AI解决方案
本文为您介绍 AnalyticDB PostgreSQL版 联合钉钉推出的企业专属AI解决方案，包含ChatBI、ChatMemo解决方案及专属AI管理后台。方案概述 AnalyticDB PostgreSQL版 联合钉钉推出企业专属AI解决方案，由 AnalyticDB PostgreSQL版 提供企业私域...
解决方案
数据资源平台中的数据标准、数据模型、数据加工场景、数据服务API、云计算资源配置等资产，经过验证最终可沉淀为一个特定的解决方案。支持通过不同的创建方式，灵活的选择解决方案中包含的内容。依托数据资源平台中管理的大量元数据，确保...
功能简介
数据资源平台中的数据标准、数据模型、数据加工场景、数据服务API、云计算资源配置等资产，经过验证最终可沉淀为一个特定的解决方案。支持通过不同的创建方式，灵活的选择解决方案中包含的内容。依托数据资源平台中管理的大量元数据，确保...
创建解决方案
数据开发模式全面升级，包括工作空间>解决方案>业务流程三级结构，抛弃陈旧的目录组织方式。背景信息 DataWorks对数据开发模式进行全面升级，按照业务种类组织相关的不同类型的节点，让您能够更好地以业务为单元、连接多个业务流程进行开发...
增加或删除已运行任务的同步表
目前解决方案仅支持使用独享数据集成资源组，此处可配置为准备操作中已购买并配置的独享数据集成资源组，详情请参见 资源规划与配置。说明 如果您没有购买独享资源组，可单击+新建独享资源组，创建新的独享资源组。离线全量调度 参数 描述 ...
什么是DataWorks
从2009年起，DataWorks不断沉淀阿里巴巴大数据建设方法论，支撑数据中台建设，同时与数万名政务、央国企、金融、零售、互联网、能源、制造、工业等行业的客户携手，不断提升数据应用效率，助力产业数字化升级。产品架构 DataWorks十多年...
导入解决方案
将某个工作组中下载的解决方案导入到其他工作组或项目，可实现数据治理工作环境的初始化、跨平台的资产发布及迁移，支持通过本地上传和OSS添加的方式导入解决方案。本文介绍如何导入解决方案。前提条件 已在系统设置模块中创建需要导入解决...
数据归档至DBS内置OSS
在顶部菜单栏中，选择 解决方案>数据归档。在页面右上角，单击 数据归档。在 新建数据归档工单 页面，配置工单信息。配置项 说明 任务名 请输入明确、清晰的任务名，以减少沟通成本。归档目标 选中 DBS内置OSS。数据库 搜索并选择待归档的...
新建数据库网关
说明 若您使用的是极简模式的控制台，请单击控制台左上角的 图标，选择 全部功能>解决方案>数据库网关。在 网关列表 页面，单击 新建网关。在弹出的对话框中，填写 网关名称 和 备注 信息，单击 下一步。安装网关。您可以根据操作系统类型...
下载解决方案
下载解决方案，以备其他工作组或项目导入时使用。本文介绍如何下载解决方案。前提条件 已有解决方案，包括已新建解决方案或已导入解决方案。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 ...
实例化解决方案
实例化是指将解决方案包中的数据写入到当前工作组对应模块中，以便当前工作组复用解决方案包中的数据。本文介绍如何实例化解决方案。前提条件 已成功导入解决方案，具体操作，请参见 导入解决方案。操作步骤 登录 数据资源平台控制台。在...
管理数据库网关
说明 若您使用的是极简模式的控制台，请单击控制台左上角的 图标，选择 全部功能>解决方案>数据库网关。在 网关列表 页面，单击目标网关对应 操作 列的 详情。在 网关详情 页单击 添加网关节点。您可以根据操作系统类型，选择不同的下载...
什么是数据管理DMS
为什么选择数据管理DMS 全域数据资产：支持企业全域数据资产管理，提供贯穿数据生命周期的质量治理与安全治理，帮助企业快速地查找数据，高效地使用数据。数据集成：支持常见数据源的实时、离线数据集成，数据集成过程中支持灵活自定义数据...
新建解决方案
将工作组中已沉淀的数据标准、数据模型、数据加工场景、数据服务API配置、云计算资源配置等数据资产，进行版本化的解决方案创建及实例化，便于完成数据治理工作环境的初始化、跨平台的资产发布及迁移。本文介绍如何通过全新创建和根据已有...
创建高可用本地Agent集群
说明 若您使用的是极简模式的控制台，请单击控制台左上角的 图标，选择 全部功能>解决方案>数据库网关。在数据 网关列表 页面，选择待添加高可用节点的网关，单击其右侧的 详情。在 网关详情 页面，单击 添加网关节点。您可以根据操作系统...
客户案例
友盟+客户简介 友盟+是独立的第三方全域数据智能服务商，基于技术与算法能力，结合全域数据资源，挖掘标签及分析指标，帮助企业实现深度用户洞察、实时业务决策和持续业务增长。客户诉求 帮助企业和开发者解决数据系统独立，无法融合分析的...
02下载解决方案
下载解决方案，以备其他工作组或项目导入时使用，本文介绍如何下载解决方案。前提条件 已创建解决方案，具体操作，请参见 创建解决方案。操作步骤 登录 数据资源平台控制台。在页面左上角单击 图标，选择 协同。在顶部菜单栏，单击 图标，...
UpdateDIProjectConfig
调用UpdateDIProjectConfig修改当前工作空间中数据集成同步解决方案任务默认的全局配置。当前DataWorks仅支持为同步解决方案任务中的实时同步DDL消息处理策略设置默认的全局配置。如果您的同步解决方案任务包含实时同步任务，则配置 DDL...
04解决方案实例化
实例化是指将解决方案包中的数据写入到当前工作组对应模块中，以便当前工作组复用解决方案包中的数据。本文介绍如何进行解决方案实例化操作。前提条件 已成功导入解决方案，具体操作，请参见 新建工作组并导入解决方案。操作步骤 登录 数据...
Spark作业异常排查及处理
解决方案：已使用Spark导入的数据，如果需要被Hive或Impala使用，建议在EMR控制台中Spark服务配置页面的 spark-defaults.conf 页签下，增加 spark.sql.parquet.writeLegacyFormat=true 配置后重新导入数据。Shuffle报错 java.lang....
查询用户OSS或专属存储的归档数据
说明 若您使用的是极简模式的控制台，请单击控制台左上角的 图标，选择 全部功能>解决方案>数据归档。进入 数据归档工单列表 页面，视图 选择 归档视图。搜索目标数据归档工单。您可在搜索框中输入工单号、库名或表名等信息，单击 搜索，...
数据库迁移
数据库迁移功能通过产品化解决方案的封装，实现数据库迁移、校验和清理的闭环操作。本文介绍如何通过创建工单实现数据库迁移。前提条件 支持的数据库类型：RDS MySQL、PolarDB MySQL版 和ECS自建MySQL。说明 来源库和目标库的数据库类型...
发布为租户模板
当需要通过导入解决方案，实现对多个工作组进行批量更新时，支持您将已有解决方案发布为租户模板，通过导入租户模板，实现对多个工作组一键实例化后导入使用。本文介绍如何发布为租户模板。前提条件 已成功导入或者新建解决方案，具体操作...
使用应用程序访问本地或第三方云数据库
在顶部菜单栏中，选择 解决方案>数据库网关。说明 若您使用的是极简模式的控制台，请单击控制台左上角的 图标，选择 全部功能>解决方案>数据库网关。在 网关列表 页面，单击目标网关对应 操作 列的 详情。跳转至添加的数据库详情页，单击 ...
03新建工作组并导入解决方案
创建需要导入解决方案包的工作组，并导入解决方案，本文介绍如何新建工作组并导入解决方案。前提条件 已下载解决方案，具体操作，请参见 下载解决方案。操作步骤 登录 数据资源平台控制台。在页面左上角单击 图标，选择 协同。在顶部菜单栏...
资产质量概述
资产质量基于Dataphin平台，为数据的开发及使用提供全套的数据质量解决方案。数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。前提条件 已购买资产质量增值服务，详情请参见 开通Dataphin。背景信息 面对各行...
资产质量概述
资产质量基于Dataphin平台，为数据的开发及使用提供全套的数据质量解决方案。数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。前提条件 已购买资产质量增值服务并且当前租户已开通资产质量模块。背景信息 面对...
使用DMS和DG管理本地或他云数据库
说明 若您使用的是极简模式的控制台，请单击控制台左上角的 图标，选择 全部功能>解决方案>数据库网关。在页面上方选择数据库所属的地域（默认杭州），然后单击 新建网关 按钮。在弹出的对话框中，填写 网关名称 和 备注 信息，然后单击 下...
Dataphin支持的数据源
资产质量概述 数据服务 数据服务（OneService）是基于Dataphin建设数据中台的最后一步。数据服务作为统一的数据服务出口，实现了数据的统一市场化管理，有效地降低数据开放门槛的同时，保障了数据开放的安全。数据服务概述 标签工厂 标签...
ListDIProjectConfig
调用ListDIProjectConfig查看当前工作空间中数据集成同步解决方案任务默认的全局配置。当前DataWorks仅支持为同步解决方案任务中的实时同步DDL消息处理策略设置默认的全局配置。如果您的同步解决方案任务包含实时同步任务，则配置 DDL消息...
全增量实时同步至Hologres
步骤三：选择要同步的表 步骤四：目标表映射 步骤五：报警配置 步骤六：高级参数配置 步骤七：DDL能力配置 步骤八：资源组配置 步骤九：执行同步解决方案任务 步骤一：选择同步方案 在此步骤中，您需要进入数据集成页面配置同步解决方案。...
- 产品推荐
- 这些文档可能帮助您