管理敏感数据
本文介绍设置敏感列、脱敏规则，以及申请查看敏感数据的步骤。前提条件 用户角色为管理员、DBA和安全管理员。说明 鼠标移动到界面右上角的，查看您的角色。支持的数据库：关系型数据库：MySQL、SQL Server、PostgreSQL、MariaDB、Oracle、...
数据保护伞概述
数据保护伞是一款数据安全管理产品，为您提供数据发现、数据脱敏、数据水印、访问控制、风险识别、数据溯源等多种功能，帮助您快速梳理敏感数据并进行安全管控，保障数据安全。本文为您介绍数据保护伞的使用流程、使用限制等内容。使用流程...
如何对JSON类型进行高效分析
半结构化数据通常存在于Web页面、XML、JSON、NoSQL数据库等场景中，其灵活性和易扩展性使其成为大数据时代中不可或缺的一部分。PolarDB MySQL版 本身是一个关系型数据库管理系统，其存储的数据通常是结构化数据，但也原生支持存储和查询半...
数据组织优化
Clustering 当前痛点 Transactional Table 2.0支持分钟级近实时增量数据导入，高流量场景下可能会导致增量小文件数量膨胀，从而引发存储访问压力大、成本高，并且大量的小文件还会引发meta更新以及分析执行慢，数据读写IO效率低下等问题，...
通用数据开发
通常数据开发的总体流程包括数据产生、数据收集与存储、数据分析与处理、数据提取和数据展现与分享。说明 上图中，虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示：数据产生：业务系统每天会产生大量结构化的...
GRANT LABEL
参数说明 参数名称 是否必填 说明 number 是 指定用户或角色可访问的最高数据敏感等级。取值范围为0~9，与数据敏感等级标签相对应。table_name 是 指定目标表或视图的名称。您可以通过 MaxCompute客户端 执行 show tables;命令获取表或视图...
数据安全监控和审计
数据安全监控和审计有利于事前发现风险和事后审计，面向云的数据安全监控和审计需要考虑的维度如下：安全监控的维度 监控特征 特征描述 流转异常 异常地理位置下载敏感数据 来自异常地理位置的数据下载可能是由于账号访问权限被外部攻击者...
账单数据订阅及查询分析
DataWorks及MaxCompute：DataWorks基于MaxCompute等大数据引擎，支持您在线进行SQL分析、业务洞察、编辑和分享数据，以及将查询结果保存为可视化图表卡片，快速搭建可视化数据报告。订阅账单数据后，用户中心会将相关账单数据同步至指定...
数据标准
数据是由特定的环境产生的，这些环境因素包括生产者、时间、系统等，从而造成了同一个语义的数据，有...说明 目前使用DDM进行数据建模可以进行逻辑建模和物理建模，但物理建模仅支持MaxCompute和Hive两种大数据引擎，不支持自定义数据源类型。
管理敏感数据
当您需要调整敏感列的安全级别、脱敏算法、授予或回收指定用户查询、导出或变更敏感列数据的权限时，您可参考本文进行操作。前提条件 用户角色为管理员、DBA和安全管理员。说明 鼠标移动到界面右上角的，查看您的角色。支持的数据库：关系...
云产品集成
您可以使用 DMS 录入云数据库 OceanBase 的数据，通过 DMS 的全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。什么是数据管理DMS 支持的数据库...
标准版-单副本
使用场景 纯缓存类业务场景 单副本架构不能提供数据可靠性，如果发生节点故障，您需要重新对业务进行预热，因此，在对数据可靠性要求较高的敏感性业务中，建议选用双副本架构。对Redis协议兼容性要求较高的业务 标准版完全兼容Redis协议，...
大小写不敏感
内核小版本（V1.1.24）（发布时间：2022年7月）之前创建的集群，当无法确保数据库中不存在同名不同大小写的数据库对象（database、schema、table、column）时，请勿手动开启大小写不敏感功能，否则可能导致查询不正确。为每个对象赋予合理...
大小写不敏感
内核小版本（V1.1.24）（发布时间：2022年7月）之前创建的集群，当无法确保数据库中不存在同名不同大小写的数据库对象（database、schema、table、column）时，请勿手动开启大小写不敏感功能，否则可能导致查询不正确。为每个对象赋予合理...
到期、欠费说明
敏感数据保护功能 如果敏感数据保护功能的可用额度不足，开启敏感数据保护功能的实例会在DMS中被随机禁用。您可以选择以下任意一种解决方案：购买敏感数据保护服务后，启用被禁用的实例。重要 此操作会变更实例之前的配置。将被禁用实例的...
概述
解决方案 T+1全量同步一键建仓是指通过DLA控制台配置数据源（RDS、PolarDB for MySQL、MongoDB数据源、ECS自建数据库数据）和目标OSS数据仓库，系统按照您设定的数据同步时间自动、无缝的帮您把数据源中的数据同步到目标数据仓库OSS中，...
受众与核心能力
产品定位 DataWorks致力于为数据开发者、数据分析师、数据资产管理者，打造一个具备开放自主开发与全栈数据研发能力的一站式、标准化、可视化、透明化的智能大数据全生命周期云研发平台。DataWorks赋予用户仅通过单一平台，即可实现数据...
数据集成支持的数据源
离线集成支持的数据源 数据源 读取 写入 大数据存储型数据源 MaxCompute 支持 支持 Hologres 支持 支持 IMPALA 支持 支持 TDH Inceptor 支持 支持 StarRocks 支持 支持 Hudi 支持 支持 Doris 支持 支持 GreenPlum 支持 支持 TDengine 不...
典型场景
基于湖构建数据平台，支持BI、挖掘等业务 对象存储OSS可以作为湖存储，DLA基于OSS构建一站式的大数据平台。具体包括构建数据湖、数据ETL、交互式查询、机器学习等功能。构建数据湖 实时数据湖：支持DB的CDC与消息数据（如Kafka）入湖，构建...
管理识别模型
识别模型是 DMS 敏感数据识别能力的升级，在敏感数据识别能力的基础上，扩充了内置的模型数量，同时，也支持自定义识别模型，您可以通过使用内置和自定义模型构建专属的敏感数据识别能力。本文介绍如何查看识别模型、添加、编辑和删除...
API概览
本产品（敏感数据保护/2019-01-03）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，可...
ModifyRule-修改自定义的敏感数据识别规则
调用ModifyRule接口修改数据安全中心DSC（Data Security Center）中自定义的敏感数据识别规则。接口说明 调用本接口时，您必须输入规则名称、规则 ID、规则内容的参数。QPS 限制 本接口的单用户 QPS 限制为 10 次/秒。超过限制，API 调用将...
系统配置
您可在数据保护伞的系统配置页面，设置数据保护伞的识别内容、识别范围，水印文件保存时间，是否展示风险识别的数据安全等级，以及告警信息的接收邮件及WebHook地址，以便及时发现并处理潜在安全风险。进入系统配置页面 进入数据开发页面。...
数据集成支持的数据源
离线集成支持的数据源 数据源 读取 写入 大数据存储型数据源 MaxCompute 支持 支持 Hive 支持 支持 Hologres 支持 支持 IMPALA 支持 支持 TDH Inceptor 支持 支持 Kudu 支持 支持 StarRocks 支持 支持 Hudi 支持 支持 Doris 支持 支持 ...
数据导入概览
从阿里云对象存储OSS导入数据至图数据库GDB实例 图数据库GDB服务端集成有数据导入模块，可以获取您提供的.csv格式的OSS数据文件，并将其解析为图中的点数据和边数据，然后将点数据和边数据导入至图数据库GDB实例。步骤 步骤说明 ① 将需要...
创建GreenPlum数据源
通过创建GreenPlum数据源能够实现Dataphin读取GreenPlum的业务数据或向GreenPlum写入数据。本文为您介绍如何创建GreenPlum数据源。背景信息 Greenplum是一款大数据分析引擎，作用于分析、机器学习和AI等领域。其架构主要针对管理大规模分析...
DescribeRiskLevels-查询风险等级列表
风险等级名称和默认风险等级描述的映射关系如下：NA：未识别到敏感数据 S1：1 级敏感数据 S2：2 级敏感数据 S3：3 级敏感数据 S4：4 级敏感数据 S5：5 级敏感数据 S6：6 级敏感数据 S7：7 级敏感数据 S8：8 级敏感数据 S9：9 级敏感数据 S...
创建GreenPlum数据源
通过创建GreenPlum数据源能够实现Dataphin读取GreenPlum的业务数据或向GreenPlum写入数据。本文为您介绍如何创建GreenPlum数据源。背景信息 Greenplum是一款大数据分析引擎，作用于分析、机器学习和AI等领域。其架构主要针对管理大规模分析...
敏感数据访问及导出情况
数据访问页面为您展示基于配置规则识别出的敏感数据的访问量、访问趋势、导出量和导出明细等，帮助您掌控每一次访问敏感数据的情况。该页面E-MapReduce计算引擎的操作数据展示暂只支持上海region。前提条件 阿里云主账号已授权开通数据保护...
敏感数据保护费用
在OSS数据初次接入扫描时，敏感数据保护对授权的数据源执行全量扫描并收取全量扫描费用。初次扫描任务完成后，敏感数据保护仅对该数据源中新增或修改的文件收取扫描费用。说明 本文仅说明相关计费项及付费方式。有关计费项的定价详情，请...
支持识别的原子模型
数据安全中心（DSC）可识别的敏感数据包括敏感图片信息、个人敏感信息、企业敏感信息、行业敏感信息等，并且支持添加自定义识别模型，可以根据字段名、正则来匹配。本文介绍数据安全中心支持识别的敏感数据类型。目前支持的原子模型如下所...
行级管控
说明 若您使用的是极简模式的控制台，请单击控制台左上角的 图标，选择 全部功能>安全与规范>敏感数据管理>敏感数据资产。单击页面右上角的 全域敏感数据列表，进入设置行级管控的页面。说明 您也可以在 实例列表 区域的 已开启 页签下，...
集成概览
OpenAPI集成 数据安全中心 提供敏感数据识别、异常事件脱敏等功能的OpenAPI，您可在业务系统中进行集成。关于如何使用阿里云OpenAPI，请参见 使用OpenAPI。版本说明 版本号 说明 2019-01-03 支持使用数据安全中心提供的敏感数据识别、数据...
冷热分层
背景信息 在海量大数据场景下，随着业务和数据量的不断增长，性能和成本的权衡成为大数据系统设计面临的关键挑战。Delta Lake是新型数据湖方案，推出了数据流入、数据组织管理、数据查询和数据流出等特性，同时提供了数据的ACID和CRUD操作...
DescribeOssObjectDetailV2-查询OSS存储对象的详细...
调用本接口查询数据安全中心连接授权的OSS的单个存储对象的详细信息。接口说明 本接口一般用于对 OSS 存储对象详细信息的查询，便于对 OSS 敏感资产信息准确定位。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。...
开通全密态数据库
全密态数据库默认被 PolarDB PostgreSQL版 数据库集成，但仍需要您进行一些操作才能使用全密态数据库。本文档介绍了开通全密态数据库的步骤。...下一步 在开始使用全密态数据库前，您需要基于业务需要，先定义敏感数据，请参见 定义敏感数据。
GetSensitiveData
调用GetSensitiveData，获取租户下所有DataWorks工作空间的最新敏感数据识别结果。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否...
产品更名公告
为了帮助阿里云用户更好地应对不断加剧的数据安全挑战，2021年01月28日，阿里云整合敏感数据保护（SDDP）等产品提升了数据安全防护能力，正式发布数据安全中心。原产品名称由敏感数据保护（SDDP）正式变更为数据安全中心（DSC）。如给您...
深度解析Lindorm搜索索引（SearchIndex）特性
强一致性 数据在多个引擎间流转必然会涉及到一致性问题，通常只能提供最终一致性的语义，数据的正确性和访问延迟无法有效保障。Lindorm SearchIndex提供了最终一致性和强一致性两种语义，对于访问量大、数据延迟性要求不高的场景采用最终...
行级管控
数据管理DMS行级管控可实现所有已接入DMS的非NoSQL数据库类型的统一行级权限管控，可以解决不同人员只允许访问不同数据行的问题。例如，销售经理只能查看本人所负责地域的数据，不能查看全部地域数据。前提条件 实例的管控模式为安全协同。...
- 产品推荐
- 这些文档可能帮助您