数据管理DMS解决方案系列
为了更好地指导您使用数据管理DMS（Data Management），DMS推出解决方案系列文档，旨在通过最佳实践（Step by Step）的形式向您介绍DMS研发流程、数据安全、数据开发的解决方案。研发流程解决方案 数据安全解决方案 数据开发解决方案 更多...
什么是解决方案
物联网应用开发（IoT Studio）的解决方案是针对不同普通项目的功能特性定制发布的资源组合，包含项目中已发布的产品、应用、服务、硬件信息或说明文档等。您可根据实际需要添加所需资源，组合发布为个人解决方案、授权解决方案或公开解决...
入门实践
而数据建模新增定义数据形态的流程，为您提供一站式的模型管理解决方案和数据开发前的治理能力。在数据建模时，您可以根据对业务流程的理解和需求的调研，定义企业的业务标准和规范。同时，基于数据标准进行引用和实行，生成表结构，实现...
创建解决方案
数据开发模式全面升级，包括工作空间>解决方案>业务流程三级结构，抛弃陈旧的目录组织方式。背景信息 DataWorks对数据开发模式进行全面升级，按照业务种类组织相关的不同类型的节点，让您能够更好地以业务为单元、连接多个业务流程进行开发...
到期、欠费说明
您可以选择以下任意一种解决方案：购买敏感数据保护服务后，启用被禁用的实例。重要 此操作会变更实例之前的配置。将被禁用实例的敏感数据保护功能关闭后，启用被禁用的实例。将某个或多个实例的敏感数据保护功能关闭，释放敏感数据保护...
什么是云原生数据湖分析
云原生数据湖分析（简称DLA）是新一代大数据解决方案，采取计算与存储完全分离的架构，支持数据库（RDS\PolarDB\NoSQL）与消息实时归档建仓，提供弹性的Spark与Presto，满足在线交互式查询、流处理、批处理、机器学习等诉求，也是传统...
EncDB
当您的数据库中有数据需要被保护时，可以使用RDS MySQL全密态数据库功能，该功能提供的加密解决方案能够在遵守数据保护法规的前提下保障您的数据安全，使被保护数据免受未授权访问。详情请参见 全密态数据库。
客户案例
解决方案 天弘基金基于阿里云MaxCompute构建了企业级一站式大数据解决方案。MaxCompute对于海量数据的存储、运维、计算能力强大且安全稳定。MaxCompute服务将原本需要清算8小时的用户交易数据缩短至1.5小时，同时减少了本地服务器部署压力...
数据开发概述
进入数据开发 登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。数据开发主要功能 数据开发（DataStudio）的主要功能介绍如下。您可参考 数据开发相关概念 辅助理解。...
区域热力层
在数据配置的过程中，可能会出现区域文字标注有偏移的问题，解决方法请参考 基础平面地图 中 区域热力层 子组件内的 文字标注偏移解决方案。热力值数据接口 您可以通过配置热力值数据接口，自定义区域热力层的样式。区域热力层支持数据优先...
离线同步并发和限流之间的关系
同步速率：数据同步速率和任务期望最大并发数是比较强相关的参数，两者结合在一起可以保护数据来源和数据去向端的读写压力，以避免数据同步任务对数据源带来较大压力，影响数据源的稳定性。同步速率（不限流）是指按照用户配置的任务期望...
数据源配置常见问题
本文介绍在DataV中连接数据源时，遇到的常见问题及相应的解决方法。数据库连接不成功，如何解决...说明 需要长时间查询的解决方案：自建数据接口API 服务（需要支持跨域）。优化数据库查询：例如根据常用SQL查询条件，建立相关索引加速查询。
数据源配置常见问题
本文介绍在DataV中连接数据源时，遇到的常见问题及相应的解决方法。数据库连接不成功，如何解决...说明 需要长时间查询的解决方案：自建数据接口API 服务（需要支持跨域）。优化数据库查询：例如根据常用SQL查询条件，建立相关索引加速查询。
功能概述
当您的数据库中有数据需要被保护时，可以使用RDS MySQL全密态数据库功能，该功能提供的加密解决方案能够在遵守数据保护法规的前提下保障您的数据安全，使被保护数据免受未授权访问。本文介绍全密态数据库的概念、应用场景和安全分级。什么...
数据保护伞概述
数据保护伞是一款数据安全管理产品，为您提供数据发现、数据脱敏、数据水印、访问控制、风险识别、数据溯源等多种功能，帮助您快速梳理敏感数据并进行安全管控，保障数据安全。本文为您介绍数据保护伞的使用流程、使用限制等内容。使用流程...
配置任务时测试连接失败的排查及解决方法
如果数据库正常存活且连接信息没有问题，那么通过下面的方法解决问题：有公网IP的自建数据库 根据以下不同的测试结果，进行相应的处理。测试结果一 问题现象 测试连接时，使用 ping 命令测试网络不通，使用 telnet 命令测试端口不通，且...
删除数据开发项目
调用 DeleteFlowProject 接口删除数据开发项目。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String ...
与标准SQL的主要区别及解决方法
解决方案请参见 在执行MaxCompute SQL过程中，使用NOT IN后面接子查询，子查询返回的结果是上万级别的数据量，但当IN和NOT IN后面的子查询返回的是分区时，返回的数量上限为1000。在必须使用NOT IN的情况下，该如何实现此查询？如果业务上...
配置数据识别规则
进入数据识别规则 登录 DataWorks控制台 后，进入 数据保护伞 页面，操作详情请参见 数据保护伞概述。单击 开始体验，默认进入数据保护伞的 首页。单击左侧导航栏中的 规则配置>敏感数据识别，在 数据识别规则 页面您可以新增敏感字段类型...
数据接口配置说明
本文介绍区块内部的数据接口的配置的方法，帮助您理解区块的数据接口功能。在区块编辑器内，您可以单击区块编辑器右上角的 图标，在 数据接口设置 页签中支持如下数据接口配置操作。切换模式 在对话框上方可以切换数据接口模式，可选 视图...
数据分析
数据分析节点对接了物联网平台数据分析开发的接口。使用该节点，可调用物联网数据分析的API作为当前服务的中间逻辑功能，并将接口的返回值作为节点的输出。前提条件 已完成业务服务的创建。详细内容请参见 创建业务服务。重要 物联网数据...
功能发布记录（2023年）
2023-12 功能名称 功能描述 发布时间 发布地域 使用客户 相关文档 数据开发（DataStudio）绑定数据源 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发（DataStudio）...
什么是DataWorks
DataWorks基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎，为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台。从2009年起，DataWorks不断沉淀阿里巴巴大数据建设方法论，支撑数据中台建设，同时与...
收费常见问题
本文为您介绍数据集成收费相关问题及解决方案。数据集成是怎么收费的？数据集成收费包含三种途径，详情请参见 独享数据集成资源组计费说明：包年包月、公共数据集成（调试）资源组：按量计费、公网流量计费说明。
快速体验
数据治理：大数据开发治理平台 DataWorks数据质量（必选）、大数据开发治理平台 DataWorks数据地图（必选）、大数据开发治理平台 DataWorks数据保护伞（必选），基础版DataWorks已包含。数据展示：智能分析套件Quick BI（必选），您可根据...
API概览
查询数据开发中可用的集群列表 调用ListFlowClusterAll接口，查询数据开发可用的集群列表。获取提交代理节点列表 调用ListFlowClusterAllHosts接口，查询给定集群可在项目设置中设置到白名单中的主机列表，目前支持Master和Gateway节点。...
开发ODPS SQL任务
编辑代码：进阶示例 更复杂的ODPS SQL任务示例如下：与标准SQL的主要区别及解决方法 MaxCompute SQL中的关联操作 JSON数据从OSS迁移至MaxCompute 基于GitHub公开事件数据集的离线实时一体化实践 基于MaxCompute UDF将IPv4或IPv6地址转换为...
处理接口
根据时间轴的特性，如果您需要时间轴变化的同时，等值面的数据也发生变化，那么可以开发一个接口或者数据库，能根据时间参数来获取不同时间段的全国各个监测站点的数据。本文档为您介绍如何使用Node.js完成接口的开发和发布（您也可以使用...
DataWorks快速入门指引
DataWorks基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎，为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台，为了便于新用户快速了解DataWorks的数据开发治理操作全流程，DataWorks为您提供了...
API概览
删除数据开发项目 调用 DeleteFlowProject接口，删除数据开发项目 查询工作流信息 调用DescribeFlow接口，查询工作流信息。查询作业信息 调用DescribeFlowJob接口，查询作业信息。查询项目详情 调用 DescribeFlowProject 接口，查询项目...
云产品集成
大数据开发治理平台 DataWorks DataWorks 是一款为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台。您可以使用 DataWorks 添加 ApsaraDB For OceanBase 数据源，管理 OceanBase 数据库中的数据，通过数据集成...
一键MaxCompute任务出错恢复
详情请参见 实时同步任务延迟解决方案。如果上一周期的实例未运行或者运行失败，您可以解除对上一周期的依赖。详情请参见 查看周期实例。通过全量补数据方式恢复 恢复实时任务。进入 运维中心>实时同步任务 页面，找到目标任务，重启实时...
使用指南
业务合约开发 账本数据访问开发流程 用户智能合约使用账本数据访问 API 接口，开发流程如下：在 BaaS 平台上获取账本数据合约名称。获取账本数据访问 API 接口定义（ChainDataInterface.sol）。在用户合约中引入账本数据访问 API 定义。...
任务运行失败
解决方案：您可以进入 数据源管理 页面，检查所使用的数据源配置是否正确。进入 数据源管理 页面的操作，详情请参见 创建与管理数据源。如果没有可用的数据源，则您需要新建FTP数据源，详情请参见 配置FTP数据源。FTP Check节点任务，运行...
修改数据开发项目
调用 ModifyFlowProject 接口，修改数据开发项目。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String...
DeployFile
调用DeployFile接口，发布数据开发中的文件至生产环境。调用DeployFile接口后，您需要通过DeployFile返回的Data参数继续调用 GetDeployment 接口，轮询被触发的异步发布流程的状态。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您...
创建接口
前提条件 您已完成相关数据源和提交接口的开发。操作步骤 登录 mPaaS 控制台后，从左侧导航栏进入 智能搭建>接口管理 页面。单击 创建接口，在接口创建面板上，完成接口配置。配置信息 说明 接口名称 接口的名称 接口类型 支持两种类型的...
接口
接口来源 可选：数据分析服务：调用开发者在物联网平台数据服务中开发的API接口（包含 通用接口、用户接口），将返回数据作为组件数据源。通用接口 为数据服务的 预置指标API 和 产品数据API，用户接口 为数据服务的 自定义服务API。更多...
开发接入流程
开发人员编写表单提交接口和数据源接口，参见 接口开发。在智能搭建控制台的 接口管理 模块中，创建接口，录入已编写的接口，并指定该接口适用的组件。然后对接口进行校验，测试接口配置是否可用。在智能搭建控制台的 页面管理 模块中，...
安全配置常见问题
因涉及项目数据保护，无法将MaxCompute数据导出至MySQL，如何解决？如何找回被删除的表？MaxCompute如何保证数据安全？MaxCompute拥有完备的措施来保证用户的数据安全：多用户场景，除项目所有者（Project Owner）或项目管理员之外，未经...
- 产品推荐
- 这些文档可能帮助您