应用场景
输出主题式数据服务，提高数据化运营效率 场景：某公司是一家大型跨省直营餐饮品牌公司，具有线上线下多个客户触达渠道，以爆款思维策划公司品牌。痛点：因业务扩张快，用户数据丰富，拉新留存效率、营销及转化效果急需提高。但各个获客...
范围选择器功能介绍
范围选择器是一款自定义快速选择并生成区域范围数据连接的小工具，本文介绍范围选择器的详细功能。进入范围选择器 单击 DataV.GeoAtlas地理小工具系列，打开范围选择器工具页面。范围选择器功能详解 功能 说明 选择地图数据版本 单击页面...
应用场景
大型促销类业务 大型促销秒杀系统，系统整体访问压力非常大。一般的数据库根本无法承载这样的读取压力，可选用云数据库 Memcache 版存储。带有计数器的库存系统 云数据库 RDS 与云数据库 Memcache 版搭配使用。RDS 存储具体数据信息，数据...
索引优化
大数据集场景下优先考虑稀疏索引：如果您的数据量非常地大，并且您的查询限定条件为<、、=、>=、>，需要从大数据量的表中取出少于50%的数据，那么使用稀疏索引（BRIN Index或者AOCS表的metascan）可以极大地减少无效数据的加载。...
文档修订记录
数据保护伞默认提供了 数据开发/数据地图展示脱敏、数据集成静态脱敏 等多种一级脱敏场景，若该类场景生效的数据范围及用户范围无法满足您更细化的脱敏需求，则也可基于一级场景自定义二级脱敏场景使用。创建数据脱敏场景 2023.11.20 新增...
常见问题
数据安全中心DSC根据为不同行业预先定义的敏感数据关键字段，扫描MaxCompute、OSS、阿里云数据库服务（RDS、PolarDB-X、PolarDB、OceanBase、表格存储等）和自建数据库中的数据，通过敏感数据规则，判断和打标敏感数据，为数据安全审计、...
数据标准
数据是由特定的环境产生的，这些环境因素包括生产者、时间、系统等，从而造成了同一个语义的数据，有多种不同的定义方法，给后期进行数据汇集和整合带来障碍。因此，数据处理的前奏就是数据标准化，数据标准作为一个统一的数据共识，在标准...
云产品集成
您可以使用 DMS 录入云数据库 OceanBase 的数据，通过 DMS 的全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。什么是数据管理DMS 支持的数据库...
蜂窝热力层
数据源 单击 配置数据源，可在 设置数据源 页面中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。详情请参见 配置组件数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
计算引擎审批策略
背景信息 您可以从 MaxCompute项目 维度或 数据保护伞分级分类 维度定义审批流程适用的数据范围，详情可参见 选择配置范围。使用限制 仅空间管理员、被授权 AliyunDataWorksFullAccess 的子账号有权限进行审批策略的操作。企业版的...
质量规则参数配置
填写数据过滤内容，例如：id=12-单表 T1.id=12 and T2.name="张三"-双表 及时性 时间函数比较：校验字段、校验表数据过滤：详情请参见 完整性/唯一性 大类的描述。比较项：比较时间的表达式，内置${column}、${bizdate} 参数。基于比较字段...
质量规则参数配置
填写数据过滤内容，例如：id=12-单表 T1.id=12 and T2.name="张三"-双表 及时性 时间函数比较：校验字段、校验表数据过滤：详情请参见 完整性/唯一性 大类的描述。比较项：比较时间的表达式，内置${column}、${bizdate} 参数。基于比较字段...
Hints
但是对于一些大规模的ETL，比如 INSERT INTO SELECT FROM 这类语句，如果数据量大的话，它的执行时间很长。如果服务端长时间不返回任何数据给客户端，连接可能会中断，因此就有了异步执行的概念。异步执行的场景下，用户提交一个SQL，服务...
基本概念
数据范围 数据范围是指存储在数据订阅任务中的增量数据的时间戳范围。默认情况下，数据订阅任务会保留最近24小时的数据。DTS会定期清理过期的增量数据，并更新数据订阅任务的数据范围。说明 增量数据对应的时间戳是指这条增量数据在源库中...
概述
解决方案 T+1全量同步一键建仓是指通过DLA控制台配置数据源（RDS、PolarDB for MySQL、MongoDB数据源、ECS自建数据库数据）和目标OSS数据仓库，系统按照您设定的数据同步时间自动、无缝的帮您把数据源中的数据同步到目标数据仓库OSS中，...
支持识别的行业模板
内置金融分类分级模板 业务类 客户类 经营管理类 内置阿里巴巴及蚂蚁集团数据安全分类分级模板 内置能源分类分级模板 内置车联网行业分类分级模板 内置金融分类分级模板 内置金融分类分级模板参考JRT 0197-2020金融数据和安全数据安全分级...
数据资产管理
背景信息 AnalyticDB MySQL版 中包含了大量对内对外极具价值或核心的数据（这里不仅指数字，还包含业务逻辑、业务定义等可以勾画整个企业经营的信息），这类数据统称为企业数据资产。数据资产是企业在数字世界的投影，对企业经营或者数字化...
数据脱敏能力概述
若该类场景指定生效的数据范围及用户范围无法满足您更细化的脱敏需求，则您可基于一级场景自定义二级脱敏场景使用。脱敏场景的介绍及创建，详情请参见 创建数据脱敏场景。创建数据脱敏规则。您可根据需要创建脱敏规则以适用不同场景下的...
审批中心概述
审批中心提供自定义审批策略和权限申请及查询功能，您可以便捷地对表数据、数据服务API、扩展程序等进行权限或策略的管控，或查询各权限的申请及审批记录。功能介绍 在DataWorks上进行数据开发管理的过程中，您可以便捷地对表数据、数据...
风险识别管理（新版）
具体如下：易用性好 包含 数据访问风险、数据导出风险、数据操作风险、其他风险类型 等4类风险类型，并支持 访问时间、敏感类型、访问量 等多种维度组合识别各类风险。精准度高 增加事件聚合统计比较，通过比较时间窗口内事件发生次数的...
识别任务说明
文件或表扫描限制 为了避免数据源中文件或表过大影响整体扫描进度，数据安全中心对可以扫描的文件大小或表的字段大小做了限制，请您在进行敏感数据扫描前了解以下规则：结构化数据（RDS MySQL、RDS PostgreSQL、PolarDB等）、大数据...
冷热分层
Delta Lake是新型数据湖方案，推出了数据流入、数据组织管理、数据查询和数据流出等特性，同时提供了数据的ACID和CRUD操作。通过结合Delta Lake和上下游组件，您可以搭建出一个便捷、易用、安全的数据湖架构。在数据湖架构设计中，通常会...
配置数据识别规则
背景信息 DataWorks支持您按照数据的敏感级别和所属分类定义数据识别规则，帮助您识别组织内的敏感数据，对于识别结果不准确的数据，您可以 手动修正数据，并在 敏感数据概况 模块为您展示最近的通过数据识别规则命中的、按照项目细分的...
购买数据安全中心
阿里云 数据安全中心DSC（Data Security Center）为您提供以数据为中心视角的安全风险治理能力，包括数据梳理、数据脱敏、数据风险审计等。本文介绍如何购买 DSC 服务。购买指导视频 支持的地域和数据库类型 购买数据安全中心前，您需要先...
功能特性
配置管理 数据保护 敏感数据管理 DMS的敏感数据保护能力能根据所选的敏感数据扫描模板、敏感数据识别模型以及脱敏算法对数据进行脱敏处理，以避免敏感数据滥用，有效保护企业的敏感数据资产，防止数据泄露造成企业经营资金损失或罚款。...
数据集成支持的数据源
实时集成 适用于将来源端数据源中整库或全部表的数据变化实时集成至目标端数据源中，实现 来源端数据源与目标端数据源 实时地保持数据同步。离线集成支持的数据源 数据源 读取 写入 大数据存储型数据源 MaxCompute 支持 支持 Hive 支持 ...
购买指引
场景1：新用户推荐配置 推荐配置 推荐原因 功能：推荐购买 专业版，专业版满足企业专业的数据仓库构建需求，覆盖数据开发、任务运维、数据地图、数据质量等绝大部分功能。资源：推荐购买 独享数据集成资源组，以支持更好的同步体验，支持离...
混合存储型（已停售）
与 Redis社区版 不同，Tair 混合存储型整合了内存和磁盘二者的优势，在提供高速数据读写能力的同时满足了数据持久化的需求。说明 混合存储型已停止售卖，更多信息，请参见【通知】Redis混合存储型实例停止售卖。推荐选择 持久内存型 实例。...
数据保护伞概述
数据保护伞是一款数据安全管理产品，为您提供数据发现、数据脱敏、数据水印、访问控制、风险识别、数据溯源等多种功能，帮助您快速梳理敏感数据并进行安全管控，保障数据安全。本文为您介绍数据保护伞的使用流程、使用限制等内容。使用流程...
轮播饼图
图表样式 轮播饼图是饼图的一种，与其他类别的饼图相比，轮播饼图支持以轮播的方式展示各类别的占比或数值，支持自定义展示百分比值或实际数值，能够更加形象地在数据看板中展示数据的占比或变化情况。样式面板 搜索配置：单击 样式 面板右...
备份策略
OceanBase 数据库支持对备份策略进行修改，您可以根据业务需求修改备份周期、备份时间、备份保留天数、是否开启归档备份、是否开启异地备份等参数。集群实例创建时会默认创建本地一级备份策略，同时开启日志备份。概念介绍 归档备份：对于...
Tablestore数据源
表格存储Tablestore是构建在阿里云飞天分布式系统之上的NoSQL数据存储服务，Tablestore数据源为您提供读取和写入Tablestore双向通道的功能，本文为您介绍DataWorks的Tablestore数据同步的能力支持情况。使用限制 Tablestore Reader和Writer...
IoT数据源
类型分类 物联网平台存储表数据类型 数据集成配置类型 整数类 BIGINT BIGINT 布尔类 BOOLEAN BOOLEAN 日期时间类 TIMESTAMP BIGINT 浮点类 DOUBLE DOUBLE 字符串类 VARCHAR STRING 支持的存储表 数据表 表标识符 描述 产品表 system.iotx_...
功能发布记录（2023年）
2023-12 功能名称 功能描述 发布时间 发布地域 使用客户 相关文档 数据开发（DataStudio）绑定数据源 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发（DataStudio）...
数据洞察
DataWorks数据洞察是指通过深度数据分析和解读来获取深刻的数据理解和发现，它支持数据探索和可视化。您可以通过数据洞察了解数据分布，创建数据卡片，并组合成数据报告。此外，数据洞察结果能够通过长图形式的报告进一步分享。该功能利用...
数字型
如果列的数据类型是带有范围的NUMBER类型，那么会强制把输入值的范围转换为指定范围。（SQL标准中要求缺省的范围值为0，例如：强制指定数值的精度为整数的精度，从最方便使用的角度考虑，最好明确地指定精度和范围）。如果数值的精度或者...
Tablestore Stream数据源
类型分类 Tablestore Stream数据类型 整数类 INTEGER 浮点类 DOUBLE 字符串类 STRING 布尔类 BOOLEAN 二进制类 BINARY 数据同步任务开发：Tablestore增量同步流程引导 操作流程请参见 通过向导模式配置离线同步任务、通过脚本模式配置离线...
用户价值
数据资源平台为用户提供了一站式数据资产定义、生产、管理与服务平台，提供企业级数据资产构建能力和一致性使用体验，助力客户快速构建数据智能平台，实现数据资源统一管理，挖掘潜在规律，优化业务决策，让大数据真正的驱动客户业务。...
功能发布记录（2024年）
2024.2.21 所有地域 所有DataWorks用户 DataWorks On CDP/CDH使用说明 数据服务支持实例模式的StarRocks数据源 开通E-MapReduce Serverless StarRocks集群后，您可在DataWorks中通过实例模式新增StarRocks数据源，DataWorks数据服务支持...
配置数据脱敏
数据脱敏可以对实时同步的单表数据进行脱敏，然后存储到指定的数据库位置。前提条件 配置数据脱敏节点前，您需要先配置好相应的输入节点，详情请参见 实时同步支持的数据源。操作步骤 进入 数据开发 页面。登录 DataWorks控制台。在左侧...
- 产品推荐
- 这些文档可能帮助您