UpdateDIProjectConfig
调用UpdateDIProjectConfig修改当前工作空间中数据集成同步解决方案任务默认的全局配置。当前DataWorks仅支持为同步解决方案任务中的实时同步DDL消息处理策略设置默认的全局配置。如果您的同步解决方案任务包含实时同步任务，则配置 DDL...
产品计费
服务类型 单价（元）计费单位 购买数量 备注 大数据技术架构方案咨询 30,000 每人日 1~20 每日8小时工作制 大数据搬站迁云方案咨询 30,000 每人日 1~20 每日8小时工作制 大数据解决方案POC 30,000 每人日 1~20 每日8小时工作制 跨地域迁移...
数据归档至用户OSS
在顶部菜单栏中，选择 解决方案>数据归档。在页面右上角，单击 数据归档。在 新建数据归档工单 页面，配置以下信息：配置项 说明 任务名 请输入明确、清晰的任务名，方便后续查询。归档目标 选中 OSS。OSS实例 选择存放归档数据的目标实例...
EMR+DLF数据湖解决方案
采用EMR+DLF数据湖解决方案，相对传统EMR数据湖方案有下列优点：DLF提供数据湖跨引擎的统一的，全托管免运维的元数据服务。支持可视化的元数据管理，以及多版本管理和回退。支持可视化一键元数据迁移。支持元数据全文检索。支持元数据...
错误码及解决方案
10622 错误描述 英文：native contract startup failed 中文：本地合约启动失败 问题原因 合约编译器使用的不对 解决方案 不同链版本，要求合约的编译器版本不同，查看使用的链对应的合约版本是否正确，通常链版本和合约编译器版本需要一一...
操作流程
流程图及说明 任务项 说明 创建解决方案 通过创建解决方案，将工作组内已加工完成的数据标准、数据模型、数据加工场景、数据服务API配置等信息，进行版本化解决方案封装。以整体解决方案为例，具体操作，请参见 新建解决方案。创建类型：...
实例化解决方案
实例化是指将解决方案包中的数据写入到当前工作组对应模块中，以便当前工作组复用解决方案包中的数据。本文介绍如何实例化解决方案。前提条件 已成功导入解决方案，具体操作，请参见 导入解决方案。操作步骤 登录 数据资源平台控制台。在...
ListDIProjectConfig
调用ListDIProjectConfig查看当前工作空间中数据集成同步解决方案任务默认的全局配置。当前DataWorks仅支持为同步解决方案任务中的实时同步DDL消息处理策略设置默认的全局配置。如果您的同步解决方案任务包含实时同步任务，则配置 DDL消息...
客户案例
解决方案 天弘基金基于阿里云MaxCompute构建了企业级一站式大数据解决方案。MaxCompute对于海量数据的存储、运维、计算能力强大且安全稳定。MaxCompute服务将原本需要清算8小时的用户交易数据缩短至1.5小时，同时减少了本地服务器部署压力...
常见问题
解决方案 查看区块链是否运行正常，是否主动关闭了与SDK之间的链接。SDK与链之间是否经过了SLB（负载均衡），且SDK进程中，是否启动了多个连接，如果是，可以重启SDK解决，并将SDK升级到0.10.2.24.5。查看是否建立多个链接：netstat-na|...
如何处理Tair集群数据倾斜
数据倾斜的临时方案 若实例已产生数据倾斜，您可以通过如下临时方案进行过渡，但以下临时方案无法解决数据倾斜的根源问题。同时，您也可以在短时间内可降低大Key、热Key的请求量，暂缓数据倾斜问题，但大Key、热Key问题只能通过业务上的...
如何处理Redis集群数据倾斜
数据倾斜的临时方案 若实例已产生数据倾斜，您可以通过如下临时方案进行过渡，但以下临时方案无法解决数据倾斜的根源问题。同时，您也可以在短时间内可降低大Key、热Key的请求量，暂缓数据倾斜问题，但大Key、热Key问题只能通过业务上的...
复制解决方案
基于原有解决方案，通过复制的方式生成新解决方案。本文介绍如何复制解决方案。前提条件 已有创建的解决方案。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 ...
与标准SQL的主要区别及解决方法
解决方案请参见 在执行MaxCompute SQL过程中，使用NOT IN后面接子查询，子查询返回的结果是上万级别的数据量，但当IN和NOT IN后面的子查询返回的是分区时，返回的数量上限为1000。在必须使用NOT IN的情况下，该如何实现此查询？如果业务上...
公交出行：启迪公交
所属行业：公交出行 网站地址：启迪公交 客户感言“启迪公交从市场上诸多数据库产品中选中成熟稳定、经历过多年双十一考验的阿里云 PolarDB-X 分布式数据库方案，解决了数据库高并发访问和水平扩展的需求”。客户介绍 启迪公交（北京）科技...
Davinci连接MaxCompute
背景信息 Davinci是面向业务人员、数据工程师、数据分析师及数据科学家，致力于提供一站式数据可视化的解决方案。您既可以在可视化界面上通过简单配置来分析数据，还可以实现高级交互、行业分析、模式探索、社交智能等可视化功能。更多...
资产质量概述
资产质量基于Dataphin平台，为数据的开发及使用提供全套的数据质量解决方案。数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。前提条件 已购买资产质量增值服务，详情请参见 开通Dataphin。背景信息 面对各行...
资产质量概述
资产质量基于Dataphin平台，为数据的开发及使用提供全套的数据质量解决方案。数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。前提条件 已购买资产质量增值服务并且当前租户已开通资产质量模块。背景信息 面对...
大数据用户画像解决方案
进入互联网，特别是移动互联网时代，用户随时随地都会在...多维度&复杂查询：原生全局二级索引、Lindorm Search满足多维度查询需求 方案详情&专家服务 解决方案详情参见：基于Lindorm的大数据用户画像解决方案 任何问题，欢迎联系 技术支持。
增加或删除已运行任务的同步表
同步数据至Kafka解决方案为您提供了一键增加及删除同步表功能，方便您为已成功配置运行的同步任务快速添加新表或删除已有同步表。本文为您介绍如何增加或删除已运行任务的同步表。前提条件 已创建并运行同步数据至Kafka解决方案的任务，...
数据迁移
数据迁移和脚本迁移遇到的问题及解决方案请参见 迁移自建Hadoop数据至MaxCompute实践。迁移Oracle数据至MaxCompute，详情请参见 迁移Oracle数据至MaxCompute。迁移消息队列for Apache Kafka集群数据至MaxCompute，详情请参见 迁移消息队列...
下线节点
解决方案：您可前往任务发布界面先 取消发布 当前任务，再去还原数据开发（DataStudio）的文件。报错：节点存在子节点，导致任务删除或下线失败 报错原因：为保障下游任务正常执行，DataWorks仅支持任务在开发环境和生产环境均无下游依赖的...
配置数据同步任务
数据同步功能帮助您实现数据源之间的数据实时同步，适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、云BI及实时数据仓库等多种业务场景。本文以 RDS MySQL 同步至 RDS MySQL 为例为您介绍在DTS专属集群中配置数据同步任务...
04解决方案实例化
实例化是指将解决方案包中的数据写入到当前工作组对应模块中，以便当前工作组复用解决方案包中的数据。本文介绍如何进行解决方案实例化操作。前提条件 已成功导入解决方案，具体操作，请参见 新建工作组并导入解决方案。操作步骤 登录 数据...
DeployDISyncTask
调用DeployDISyncTask接口，发布实时同步任务和同步解决方案任务。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 ...
AnayticDB PostgreSQL版钉钉专属AI解决方案
方案概述 AnalyticDB PostgreSQL版 联合钉钉推出企业专属AI解决方案，由 AnalyticDB PostgreSQL版 提供企业私域数据的存储、向量化、向量检索及召回服务，由钉钉提供上层AI应用解决方案，可应用于自然语言生成报表、文档查找、新人培训、...
常见问题
解决方案：由于数据清理由系统自行完成，可能会消耗很长时间。建议您通过以下方式加速数据的清理过程，待数据清理完成之后重新添加同名列。假设执行了删除列操作的表名为 dt：执行FLUSH操作，强制将内存中残留的数据刷到存储媒介上 ALTER ...
MySQL分库分表同步至Hologres（方案2.0）
步骤九：执行同步解决方案任务 在 数据集成 主站页面，单击左侧菜单栏的 同步任务 界面，找到已创建的同步方案。单击操作列的 启动/提交执行 按钮，启动同步的运行。单击操作列的 执行详情，查看任务的详细执行过程。后续步骤 完成任务配置...
MyBase MySQL迁移至RDS MySQL
如果源或目标数据库是阿里云数据库实例（例如 RDS MySQL、云数据库MongoDB版 等），DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单；如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到...
新建解决方案
将工作组中已沉淀的数据标准、数据模型、数据加工场景、数据服务API配置、云计算资源配置等数据资产，进行版本化的解决方案创建及实例化，便于完成数据治理工作环境的初始化、跨平台的资产发布及迁移。本文介绍如何通过全新创建和根据已有...
开发文档
合约消息推送服务可以帮助部署了跨链数据服务的不同区块链上的智能合约进行消息通信，满足跨链业务关联处理等场景。账本数据访问服务 目前，账本数据访问服务仅支持蚂蚁区块链合约访问蚂蚁区块链账本数据，同时支持 Solidity 和 C++ 语言...
RDS MySQL实例间的迁移
本文介绍如何使用数据传输服务（Data Transmission Service，简称DTS），实现 RDS MySQL 实例间的数据迁移。DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以实现在业务不停服的情况下，平滑地完成数据库的迁移...
下线任务
解决方案：您可前往任务发布界面先 取消发布 当前任务，再去还原数据开发（DataStudio）的文件。报错：节点存在子节点，导致任务删除或下线失败 报错原因：为保障下游任务正常执行，DataWorks仅支持任务在开发环境和生产环境均无下游依赖的...
知识库
DataWorks数据治理中心的知识库为您汇总了常见治理项问题及检查项事件的解决方案，您可以参考所给方案自主排查并处理相应待治理问题。本文为您介绍知识库的相关内容。背景信息 在数据治理中心的 治理工作台，您可以查看当前租户下存在的...
应用场景
解决方案 基于磁盘级CDR的数据复制，可做到秒级RPO、分钟级RTO的高性能容灾方案。ECS整机跨地域容灾，无需做应用级复制，配置简单，应用一键启动。方案价值 RPO分钟,RTO分钟。整机容灾操作简便，随时可演练正确性，完全不影响生产环境。OSS...
应用场景
本文介绍EMR Serverless Spark的应用场景以及相应的解决方案。建立数据平台 得益于其开放式架构设计，EMR Serverless Spark极大地简化并提升了在数据湖环境中对结构化和非结构化数据进行高效分析处理的能力。EMR Serverless Spark不仅集成...
03新建工作组并导入解决方案
创建需要导入解决方案包的工作组，并导入解决方案，本文介绍如何新建工作组并导入解决方案。前提条件 已下载解决方案，具体操作，请参见 下载解决方案。操作步骤 登录 数据资源平台控制台。在页面左上角单击 图标，选择 协同。在顶部菜单栏...
下载解决方案
下载解决方案，以备其他工作组或项目导入时使用。本文介绍如何下载解决方案。前提条件 已有解决方案，包括已新建解决方案或已导入解决方案。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 ...
应用场景
适用场景 OLAP多维分析 用户行为分析 用户画像、标签分析、圈人 高维业务指标报表 自助式报表平台 业务问题探查分析 跨主题业务分析 财务报表 系统监控分析 实时数仓 电商大促数据分析 教育行业的直播质量分析 物流行业的运单分析 金融行业...
Hive服务异常排查及处理
本文介绍Hive服务异常的排查方法和解决方案。异常排查 如果客户端遇到异常或性能等问题，您可以按照如下步骤进行排查：排查异常时间段机器CPU、内存、网络以及磁盘是否有异常。排查组件是否正常：检查访问集群的Hive组件中 HiveMetaStore ...
- 产品推荐
- 这些文档可能帮助您