配置数据保护规则
在使用全密态功能之前，您需要配置数据保护规则。RDS MySQL支持通过配置文件的方式管理数据保护规则，本文介绍配置数据保护规则的方法及相关API的使用说明。全密态数据库会将您配置的数据保护规则内容持久化到数据库内的系统表上（简称全密...
互联网行业实时BI分析
本文以某互联网公司为例，介绍如何将DB...客户价值 1小时短平快即可实现实时数据分析平台建设，无需掌握Hadoop\Spark\Flink\Presto\Impala等复杂的大数据技术。操作简单快捷，全程拖拽式配置，无需编码。业务实时指标数据延时在1分钟以内。
产品优势
Hologres兼容PostgreSQL生态，支持快速查询分析MaxCompute的数据、实时查询实时写入的数据、联邦分析实时数据与离线数据，帮助您快速搭建企业实时数据仓库。Hologres专注实时数仓需求，从以下几个方面创新，提高数仓开发效率，降低应用门槛...
数据传输与迁移概述
类型 典型场景 数据库Binlog采集 数据集成-数据库实时数据同步。DTS。日志采集 数据集成-实时数据同步（SLS）。SLS数据投递。日志采集客户端LogStash。流计算任务写入 Flink写入MaxCompute结果表。流数据同步任务写入 DataHub数据同步...
敏感数据保护概览
如果您有对敏感数据进行管控和脱敏的需求，可以使用 数据管理DMS 的敏感数据保护功能对数据库进行扫描，识别、脱敏和管理敏感数据。背景信息 通过敏感数据保护功能，可帮助企业及时有效地发现与识别敏感数据资产，避免敏感数据滥用，有效...
数据导入与迁移
添加实时数据同步任务。HBase增强版迁移至HBase 使用阿里云BDS数据同步服务可以将HBase增强版历史和增量数据迁移到阿里云HBase标准版或开源HBase，具体操作请参见 LTS服务。数据导入（历史数据迁移）开通 LTS服务。在BDS中添加HBase集群和...
数据保护规则简介
在使用全密态功能之前，您需要配置数据保护规则，规则包括：指定目标数据列为被保护数据、声明数据保护方法（例如加密、脱敏）、授权指定用户访问数据等。本文介绍数据保护规则格式及说明。规则格式及说明 {"version":20230830,"rules":[{...
开通全密态功能
注意事项 在使用全密态功能前，建议您先配置数据保护规则，详情请参见 数据保护规则。为了更严密地保护您的落盘数据，建议您同时开启数据库TDE加密能力，开启方式请参见 设置透明数据加密TDE。开通全密态功能以及配置数据保护规则的账号...
Hudi概述
Trade-off Snapshort Queries Read Optimized Queries Data Latency 低 高 Query Latency 对于MOR类型，高 低 应用场景 近实时数据摄取 Hudi支持插入、更新和删除数据的能力。您可以实时摄取消息队列（Kafka）和日志服务SLS等日志数据至...
系统配置
您可在数据保护伞的系统配置页面，设置数据保护伞的识别内容、识别范围，水印文件保存时间，是否展示风险识别的数据安全等级，以及告警信息的接收邮件及WebHook地址，以便及时发现并处理潜在安全风险。进入系统配置页面 进入数据开发页面。...
数据使用诊断
数据保护伞服务 此安全检测项为您检测是否已在数据保护伞设置分级分类规则。分类分级配置详情请参见：配置敏感数据分类分级。敏感数据识别 说明 从企业纷繁复杂的数据体系中找出重要、敏感的数据是敏感数据防护的关键，DataWorks支持管理员...
使用DataHub（实时数据传输）
本文为您介绍流式数据处理服务...DataHub实时数据通道的详情请参见 DataHub文档。DataHub提供了多种语言的SDK，可供您使用。详情请参见下述文档：DataHub Java SDK介绍。DataHub C++ SDK介绍 DataHub Go SDK介绍 DataHub Python SDK介绍。
ProjectProtection
开启或关闭项目空间的数据保护机制。您只能在项目空间中访问数据。数据只能在项目空间内流动，不允许流出到项目空间之外，以提高数据的安全性。使用限制 本文中的命令您需要在 MaxCompute客户端 执行。本命令为CMD命令，仅支持在客户端...
查看实时性能
说明：上图中的区域1是实时数据区域，显示各项指标的实时监控数据；区域2是与数据区域对应的指标图表，体现指标的变化趋势；页面数据从打开页面的时刻开始采集，每8秒刷新一次，刷新周期不可更改。单击实时监控开关可以开启或暂停数据刷新...
实时数据订阅概述
云原生多模数据库 Lindorm 支持实时数据订阅功能，实时数据订阅功能帮助您获取Lindorm的实时增量数据，您可以根据自身业务需求自由消费增量数据，搭建或实现多种业务场景。背景信息 云原生多模数据库 Lindorm 数据订阅功能支持任何一个表的...
配置敏感数据分类分级
进入数据分类分级 进入数据保护伞，详情请参见 进入数据保护伞。单击左侧导航栏的 规则配置>数据分类分级，进入数据分类分级配置页面。配置数据分类分级 数据保护伞为您提供了内置的分类分级模板，该模板包含4类分级和4大类分类，您可直接...
计费项
说明 您可以随时关闭实例的敏感数据保护功能，或退订按量付费的敏感数据保护商品以节省开支。具体操作，请参见 关闭敏感数据保护 和 退款说明。Copilot体验版 仅支持按月购买。60元/月 付费实例在Copilot体验期（截至2024年04月15日）内可...
数据脱敏能力概述
单击左上方的 图标，选择 全部产品>数据治理>数据保护伞，单击 立即体验，进入数据保护伞。说明 若阿里云主账号已授权，则直接进入数据保护伞的首页。若阿里云主账号未授权，则进入数据保护伞的授权页面。授权后才可使用保护伞的相关功能。...
查看实时同步任务详情
实时同步任务是由实时数据同步时发起的任务，运维监控支持查看实时同步任务及其详情。本文介绍查看实时同步任务的详情。前提条件 已上线实时同步任务，具体操作，请参见 上线实时任务。操作步骤 登录 数据资源平台控制台。在页面左上角，...
查看实时同步任务详情
实时同步任务是由实时数据同步时发起的任务，运维监控支持查看实时同步任务及其详情。本文介绍查看实时同步任务的详情。前提条件 已上线实时同步任务，具体操作，请参见 上线实时任务。操作步骤 登录企业数据智能平台。在页面左上角，单击 ...
查看实时同步任务详情
实时同步任务是由实时数据同步时发起的任务，运维监控支持查看实时同步任务及其详情。本文介绍查看实时同步任务的详情。前提条件 已上线实时同步任务，具体操作，请参见 上线实时任务。操作步骤 登录企业数据智能平台。在页面左上角，单击 ...
实时同步数据库的数据至Hologres
常见的支持实时数据同步的数据库包括：Oracle、Polar DB、PolarDB MySQL等。说明 如需查看更多支持的数据库，请参见 支持的数据源及同步方案。相关原理：MySQL Reader、Oracle数据源、PolarDB Reader、SQL Server Reader、Hologres数据源。...
FineBI
需要下载支持实时数据的版本（实时数据版本支持直联 AnalyticDB MySQL版 引擎）。更多详情，请参见 实时数据（直连）。如果您是第一次安装FineBI，需要安装MySQL服务器（例如阿里云RDS MySQL），用于导入FineBI的元数据，更多详情，请参见 ...
购买指引
产品版本 入门版 标准版 高级版 版本选择建议 小型数据团队 中小型数据团队 中型数据团队 功能规格 数据同步 离线数据同步 离线数据同步 实时数据同步 配置化数据同步 离线数据同步 实时数据同步 配置化数据同步 多引擎数据计算任务编排 ...
质量规则模板类型
实时元表模板类型 模板详情分类 描述 一致性 实时离线对比 当实时数据与离线数据使用相同的统计逻辑时，用于数据的最终值差异的校验。如果差异较大，可能存在较大数据质量的问题需要进行确认和修复。实时多链路对比 高可用场景下，需要构建...
质量规则模板类型
实时元表模板类型 模板详情分类 描述 一致性 实时离线对比 当实时数据与离线数据使用相同的统计逻辑时，用于数据的最终值差异的校验。如果差异较大，可能存在较大数据质量的问题需要进行确认和修复。实时多链路对比 高可用场景下，需要构建...
什么是数据传输服务DTS
数据传输服务DTS（Data Transmission Service）是阿里云提供的实时数据流服务，支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，助您构建...
功能特性
基于DLA+DTS同步RDS数据来构建实时数据湖 DLA Serverless Presto DLA Serverless Presto是云原生数据湖团队基于Presto打造的交互式分析引擎，Presto开发的初衷就是为了解决使用Hive来进行在线分析速度太慢的问题，因此它采用全内存流水线化...
DataV读取数据源超时
问题描述 阿里云DataV数据可视化产品主要用于动态、实时数据展示场景，需要对数据高频实时查询，对数据访问性能有一定要求，您的数据源访问经常出现超时的情况。问题原因 查询超时的原因如下：使用SQL查询的业务数据表数量太大。API接口...
产品概述
既提供高性能离线数据处理，也支持高并发在线分析查询，是各行业有竞争力的PB级实时数据仓库方案。主要功能 易适配，免调优 支持SQL 2003，部分兼容Oracle语法，支持PL/SQL存储过程。新一代SQL优化器，实现复杂分析语句免调优。PB级数据秒...
数据质量：全流程的质量监控
数据质量以数据集（DataSet）为监控对象，支持监控MaxCompute数据表和DataHub实时数据流。当离线MaxCompute数据发生变化时，数据质量会对数据进行校验，并阻塞生产链路，以避免问题数据污染扩散。同时，数据质量提供历史校验结果的管理，...
实时性能
云数据库MongoDB支持查看实例的读写延迟、QPS、操作统计、连接统计、网络流量等性能指标的实时数据，帮助您实时了解数据库性能情况。前提条件 实例为单节点实例、副本集实例或协议类型为MongoDB的分片集群实例。操作步骤 登录 MongoDB管理...
快速搭建实时数仓分析大屏
背景信息 Hologres是阿里云的实时交互式分析产品，通过内置的实时数据API（详情请参见 实时数据API）直接对接实时计算，实现高并发实时写入或查询实时数据，速度达到秒级。Hologres兼容PostgreSQL，将查询到的数据直接对接BI分析工具，使用...
独享数据集成资源组
例如，单表实时数据同步、整库实时数据同步。详情请参见 实时同步能力说明。提供一系列同步解决方案。例如，整库离线数据同步，单表或整库全增量实时数据同步。详情请参见 同步解决方案能力说明。说明 独享数据集成资源组保障的是数据同步...
使用流程
通过一键建仓和多仓合并建仓（仅支持数据库）、实时数据湖（支持数据库和消息日志）功能来构建数据湖。具体操作请参见 一键建仓 多库合并建仓 和 实时数据湖。连接数据源：您也可以通过DLA直接连接其他数据源或者OSS来进行数据分析与计算。...
命令行工具、DMS
已配置数据保护规则，并授予用户访问全密态数据库权限。具体操作请参见 配置数据保护规则。操作步骤 本文以abc.test表为例，对a列已加密保护，对b列没有加密保护，通过命令行工具和DMS查询数据库，用户在a列只能看到密文，在b列可以看到...
集成与开发概览
通过可视化拖拉拽操作、SQL语句（100%兼容Flink）两种方式配置流式加工任务，实现流式数据的抽取、数据转换和加工、数据装载能力，适用于日志、在线数据实时加工处理、实时统计报表等各类实时数据开发场景。数据开发 任务编排。更多信息，...
实时同步能力说明
DataWorks为您提供的实时数据同步功能，方便您使用单表或整库同步方式，将源端数据库中部分或全部表的数据变化实时同步至目标数据库中，实现目标库实时保持和源库的数据对应。使用限制 实时同步不支持在数据开发界面运行任务，您需要保存、...
退款说明
如果您不需要使用 数据管理DMS 新版的稳定变更模式、安全协同模式和敏感数据保护付费服务，请根据本文操作进行退订。注意事项 退订包年包月或按量付费的敏感数据保护服务，不会清理实例上已有的数据分类分级信息（含配置的脱敏规则）。说明...
查看数据风险（新版）
单击左上方的 图标，选择 全部产品>数据治理>数据保护伞，单击 立即体验，进入数据保护伞。说明 若阿里云主账号已授权，则直接进入数据保护伞的首页。若阿里云主账号未授权，则进入数据保护伞的授权页面。授权后才可使用保护伞的相关功能。...
- 产品推荐
- 这些文档可能帮助您