什么是DataWorks
推荐配置 推荐原因 功能：推荐购买 专业版，专业版满足企业专业的数据仓库构建需求，覆盖数据开发、任务运维、数据地图、数据质量等绝大部分功能。资源：推荐购买 独享数据集成资源组，以支持更好的同步体验，支持离线同步、实时同步、全...
DLF中数据入湖功能停止更新公告
停止更新功能 数据湖构建（DLF）产品，数据入湖功能。说明 数据湖构建（DLF）产品其他功能正常使用，不受此功能停止更新影响。停止更新说明 停止更新时间 2023年02月15日 停止更新影响 数据入湖功能停止更新及新用户使用，未使用数据入湖的...
管理问题数据
目前仅部分数据质量监控规则支持配置保留问题数据功能，支持保存问题数据的规则，详情请参见：附录：支持保留问题数据的规则列表与问题数据口径。问题数据采集最终将基于您的规则生成数据采集SQL，并在MaxCompute引擎侧执行，此过程将产生...
基于模型生成ETL代码
维度表、明细表、汇总表等模型表发布后，DataWorks智能数据建模的模型开发功能支持快速生成代码框架，帮助您提高后续数据开发效率。本文为您介绍如何通过模型开发功能生成代码框架。前提条件 模型表已发布，操作详情请参见 发布模型至引擎...
创建Oracle数据源
通过创建Oracle数据源能够实现Dataphin读取Oracle的业务数据或向Oracle写入数据。本文为您介绍如何创建Oracle数据源。背景信息 Oracle是一款可移植好、可靠性好、适应高、功能强大的关系型数据库。如果您使用的是Oracle，在对接Dataphin...
创建Oracle数据源
通过创建Oracle数据源能够实现Dataphin读取Oracle的业务数据或向Oracle写入数据。本文为您介绍如何创建Oracle数据源。背景信息 Oracle是一款可移植好、可靠性好、适应高、功能强大的关系型数据库。如果您使用的是Oracle，在对接Dataphin...
周期任务补数据
周期任务补数据功能用于对周期任务在指定的历史业务日期内进行数据回刷。周期任务开发完成并提交发布后，任务会按照调度配置定时运行，如果您希望在指定时间段运行周期任务或回刷历史一段时间区间的数据，可以使用补数据功能。节点使用的...
冷热分层
背景信息 在海量大数据场景下，随着业务和数据量的不断增长，性能和成本的权衡成为大数据系统设计面临的关键挑战。Delta Lake是新型数据湖方案，推出了数据流入、数据组织管理、数据查询和数据流出等特性，同时提供了数据的ACID和CRUD操作...
配置数据质量规则去噪
当任务触发质量规则校验时，您可以使用去噪管理功能，对当前工作空间内，数据质量规则校验异常的数据不触发报警，且不阻塞任务运行（任务不会因为数据质量校验不通过而失败退出）。前提条件 已创建数据质量校验规则，详情请参见 配置规则：...
DataWorks on EMR数据安全方案
数据安全能力：任务管理 DataWorks提供了大数据开发运维等能力，其中工作空间、安全中心等功能模块可实现对大数据计算任务的管理。工作空间：通过DataWorks的工作空间规划可以实现工作空间的人员管理、设置大数据作业可见性和可运维性。...
JindoTable表或分区的访问热度收集
您可以通过JindoTable表或分区的访问热度收集功能来区分冷热数据，从而节约整体的存储成本，提高缓存利用效率。数据收集 JindoTable支持收集访问Hive表的记录，目前支持的引擎有Spark和Hive。收集的数据保存在集群SmartData服务的Namespace...
关联数据
本文介绍如何使用关联数据功能。背景信息 在 关联数据 页面定义了关联数据后，在自定义规则时您可以直接选择对应的数据组。管理IP组 IP组功能可以帮您管理IP集合。如果自定义的规则需要对某个固定的IP集合生效，您可以通过新增IP组定义该IP...
JindoTable表或分区访问热度收集
您可以通过JindoTable表或分区的访问热度收集功能来区分冷热数据，从而节约整体的存储成本，提高缓存利用效率。前提条件 已创建集群，详情请参见 创建集群。背景信息 JindoTable支持收集访问Hive表的记录，收集的数据保存在SmartData服务的...
JindoTable表或分区访问热度收集
您可以通过JindoTable表或分区的访问热度收集功能来区分冷热数据，从而节约整体的存储成本，提高缓存利用效率。前提条件 已创建集群，详情请参见 创建集群。背景信息 JindoTable支持收集访问Hive表的记录，收集的数据保存在SmartData服务的...
JindoTable表或分区访问热度收集
您可以通过JindoTable表或分区的访问热度收集功能来区分冷热数据，从而节约整体的存储成本，提高缓存利用效率。前提条件 已创建集群，详情请参见 创建集群。背景信息 JindoTable支持收集访问Hive表的记录，收集的数据保存在SmartData服务的...
JindoTable表或分区访问热度收集
您可以通过JindoTable表或分区的访问热度收集功能来区分冷热数据，从而节约整体的存储成本，提高缓存利用效率。前提条件 已创建集群，详情请参见 创建集群。背景信息 JindoTable支持收集访问Hive表的记录，收集的数据保存在SmartData服务的...
JindoTable表或分区访问热度收集
您可以通过JindoTable表或分区的访问热度收集功能来区分冷热数据，从而节约整体的存储成本，提高缓存利用效率。前提条件 已创建集群，详情请参见 创建集群。背景信息 JindoTable支持收集访问Hive表的记录，收集的数据保存在SmartData服务的...
JindoTable表或分区访问热度收集
您可以通过JindoTable表或分区的访问热度收集功能来区分冷热数据，从而节约整体的存储成本，提高缓存利用效率。前提条件 已创建集群，详情请参见 创建集群。背景信息 JindoTable支持收集访问Hive表的记录，收集的数据保存在SmartData服务的...
备份恢复
恢复功能 数据可恢复性是判断数据库运维可靠性的关键指标。MongoDB提供如下恢复功能：按备份点将备份数据恢复至新建实例：从实例中的某个备份点来创建新的实例，新建的实例中的数据将恢复至选择的备份点，可用于数据恢复或数据验证场景。按...
我是安全管理员
数据追踪 由于误操作等原因导致数据不符合预期时，可以通过数据追踪将数据快速恢复到正常状态。测试数据构建 测试数据结构可以在频繁的数据准备过程中确保数据安全、保障数据离散型、提高生产效率。数据库克隆 数据库克隆功能提供MySQL数据...
2021年
字符串函数 2021-03-16 新增OSS外部表支持处理压缩格式数据功能。新功能 如果OSS上的数据为LZO或SNAPPY压缩格式，您需要在创建OSS外部表时，指定压缩格式相关信息。创建OSS外部表 2021-03-16 新增作业超时报警功能。新功能 MaxCompute支持...
HBase Replication
HBase可以基于Replication功能将实时写入的数据从主集群复制到备份集群，从而提高HBase数据的可靠性和数据访问的扩展性。HBase目前支持异步Replication、串行Replication和同步Replication。本文为您介绍如何开启HBase的异步Replication...
购买指引
场景1：新用户推荐配置 推荐配置 推荐原因 功能：推荐购买 专业版，专业版满足企业专业的数据仓库构建需求，覆盖数据开发、任务运维、数据地图、数据质量等绝大部分功能。资源：推荐购买 独享数据集成资源组，以支持更好的同步体验，支持离...
我是DBA
数据追踪 由于误操作等原因导致数据不符合预期时，可以通过数据追踪将数据快速恢复到正常状态。测试数据构建 测试数据结构可以在频繁的数据准备过程中确保数据安全、保障数据离散型、提高生产效率。SQL审核 SQL审核功能帮助您避免无索引SQL...
敏感数据保护概览
功能特性 提供敏感数据资产大盘，解决企业敏感数据分布的统一纳管问题。数据自动化扫描。自定义数据扫描触发周期。自动识别企业敏感数据和对敏感数据进行分类分级，解决企业资产中的敏感数据及时发现、有效管理的问题。内置和自定义分类...
管理敏感数据
如果您需要对RDS实例中的敏感数据进行管控和脱敏，可以使用数据管理DMS提供的敏感数据保护功能。费用 请参见 敏感数据保护功能定价。功能介绍 数据管理DMS的敏感数据管理提供如下功能：提供敏感数据资产大盘，解决企业敏感数据分布的统一纳...
概述
阿里云DataWorks联合建模工具DDM（Datablau Data Modeler）为您提供一体化的数据建模解决方案（DATABLAU），将数据模型设计管控、引标落标等能力融入DataWorks规范化开发流程，助力用户实现数据资产价值化输出，在数据全生命周期上夯实数据...
管理控制台功能概览
功能模块 您可通过控制台了解DataWorks各模块的功能及使用流程，并快速进入指定工作空间的 数据集成、智能数据建模、数据开发、运维中心、数据质量、数据分析、数据地图、安全中心、数据治理中心、数据服务、管理中心 模块执行相关操作。...
数据治理中心概述
量化评估：健康分 健康分是依据数据资产在数据生产、数据流通及数据管理中的用户行为、数据特性、任务性质等元数据，使用数据处理及机器学习等技术，对各类型数据进行综合处理和评估，通过个人、工作空间维度客观呈现数据资产状态的综合...
管理中心功能概览
例如，在配置数据集成任务前，可先在DataWorks数据源管理页面，配置好需同步的源端和目标端数据库或数据仓库的相关信息，并在同步过程中，通过数据源名称来控制读取和写入的数据库或数据仓库。开源集群 在 开源集群 处，可管理已绑定至...
开启和使用冷数据分层存储
本文介绍如何开启冷数据分层存储功能，以及开启功能后的使用方式。使用限制 仅 PolarDB PostgreSQL版 14.9.13.0 及以上版本支持冷数据分层存储功能。开启冷数据分层存储功能后，无法关闭该功能，只能删除冷数据。如果没有存储数据，开启该...
开启和使用冷数据分层存储
本文介绍如何开启冷数据分层存储功能，以及开启功能后的使用方式。使用限制 仅 PolarDB PostgreSQL版（兼容Oracle）2.0.14.13.0 及以上版本支持冷数据分层存储功能。开启冷数据分层存储功能后，无法关闭该功能，只能删除冷数据。如果没有...
开启和使用冷数据分层存储
本文介绍如何开启冷数据分层存储功能，以及开启功能后的使用方式。使用限制 仅 PolarDB PostgreSQL版（兼容Oracle）2.0.14.13.0 及以上版本支持冷数据分层存储功能。开启冷数据分层存储功能后，无法关闭该功能，只能删除冷数据。如果没有...
新功能发布记录
2021-12-21 模型查看器 v6.0 DataV发布全新V6.0版本 发布五大新功能 适用用户：数据集及BI映射：企业版及以上用户 区块管理：专业版及以上用户 设计资产：企业版及以上用户 空间构建平台：需线下咨询购买 数据映射系统；BI分析功能帮助用户...
资产大盘
说明 若您使用的是极简模式的控制台，请单击控制台左上角的 图标，选择 全部功能>数据资产>资产大盘。查看实例、数据库及表的分布占比或数量趋势。引擎：指数据资产的引擎类型。例如 RDS MySQL、Redis。详细信息，请参见 DMS支持的数据库。...
数据可视化
说明 数据可视化功能即将下线，建议您在功能下线前将数据集、图表和仪表盘迁移到数据分析功能。更多信息，请参见【通知】数据可视化（老）功能下线通知 和 数据分析。准备工作 本示例已提前创建 student_courses 表，并插入部分测试数据，...
产品概述
产品介绍 DataV是一款数据可视化应用搭建产品，让数据可视、价值可见。DataV数据可视化应用搭建平台以丰富的图表组件和二三维时空地理组件为特色，搭配强大的低代码可视化搭建编排能力，可以高效、低成本地完成可视化大屏、PC数据看板、...
功能概览
1.4 生态融合 系出飞天，与阿里云大数据系统深度整合，无缝对接MaxCompute、实时计算、交互式分析等产品，打通整个大数据体系。2.产品功能 2.1 数据接入 提供多种SDK、API和Flume、Logstash等第三方插件，让您高效便捷的把数据接入到数据...
Tair小版本发布日志
为提升用户体验，云原生内存数据库Tair 会不定期地发布小版本，用于丰富云产品功能或修复已知缺陷。您可以参阅本文了解Tair小版本的更新说明。查询或升级实例的小版本 您可以通过控制台查看当前的小版本，具体操作及升级小版本的其注意事项...
开放API（OpenAPI）
使用限制 版本要求：DataWorks为您提供不同功能模块的OpenAPI，如租户、元数据、数据开发、运维中心等功能模块。各功能模块的OpenAPI对DataWorks的版本要求与功能本身对DataWorks版本的要求一致。各版本的OpenAPI有相应的调用限制，详情请...
- 产品推荐
- 这些文档可能帮助您