安全基线检查
了解安全基线检查 数据安全中心以GB/T 37988-2019《信息安全技术数据安全能力成熟度模型》为依据，针对云上复杂的数据库应用环境和不同类型的数据（结构化数据和非结构化数据），制定了7类基线检查策略以及40+具体的检查项，并提供不同类型...
快速实现数据分类分级
前提条件 已规划好要接入数据安全中心的数据库。DSC支持的数据库类型和地域，请参见 支持的数据库类型 和 支持的地域。使用RAM用户购买并使用数据安全中心时，需要为RAM用户完成授权。具体操作，请参见 为RAM用户授权DSC。步骤一：购买DSC...
同步节点
逻辑表 输入表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中提供数据的数据表的结构。当选择数据表时，。当选择星号（*）时，表示数据结构为任意结构，用于对未创建数据模型的表进行操作，此时物理表必须选择已经存在的...
品牌升级
无论是数据湖中的非结构化或半结构化数据，还是数据库中的结构化数据，您都可使用 AnalyticDB for MySQL 构建企业的数据分析平台，同时完成高吞吐离线处理和高性能在线分析，实现降本增效。此次品牌升级，存量分析型数据库MySQL版（ADS）...
同步节点
逻辑表 输入表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中提供数据的数据表的结构。当选择数据表时，。当选择星号（*）时，表示数据结构为任意结构，用于对未创建数据模型的表进行操作，此时物理表必须选择已经存在的...
库表结构优化
要做好库表结构设计和优化，用户通常需要关注以下信息：数据库引擎架构 用户需要了解数据库引擎的存储和计算架构特点，才能结合业务的数据分布特征与业务场景特征，进行数据建模，从而设计出符合引擎架构特点的数据表结构。SQL特征差异 ...
功能特性
数据安全中心 功能集 功能 功能描述 参考文档 数据分类分级 数据资产接入 支持自动发现并接入阿里云上的数据资产。支持通过一键连接或账密连接方式连接数据库，一键接入支持：RDS、PolarDB、PolarDB-X（原DRDS）、Redis、OSS、TableStore、...
从ECS上的自建Redis同步至Redis实例
如果配置Redis集群间的数据同步，请勿在源集群中执行 FLUSHDB 和 FLUSHALL 命令，否则将导致源和目标的数据不一致。若目标数据库内存不足，触发数据逐出时，由于 云数据库Redis版 的默认数据逐出策略（maxmemory-policy）为 volatile-lru，...
导出结构和数据
导出任务生成后会自动弹出 工单 面板，在 导出 列表中可以查看任务审批状态、任务信息并下载导出的数据结构文件。导出 任务列表中包含如下信息：信息项 说明 编号 导出任务编号。类型 显示新建任务时指定的任务类型。工单描述 显示发起任务...
如何对JSON类型进行高效分析
当业务需求变更时，业务系统只需要针对新JSON列数据动态增删改相关属性即可，而不需要修改表结构，有效降低维护和管理表结构的成本。但业务查询时需要读取完整JSON列数据并进行实时解析，不仅占用大量IO资源，而且可能存在重复解析和计算...
管控模式
支持在SQLConsole进行各类数据与结构的SQL变更或可视化编辑操作。数据管理功能存在一定限制。具体功能，请参见 各管控模式支持的功能。数据库实例无需严格管控。单一用户使用。实例未开启安全托管 管理员、DBA或普通用户都需要申请数据库...
互联网教育：尚学博志（上海）教育科技有限公司
PolarDB 采用存储和计算分离的架构，提供分钟级的配置升降级、秒级的故障恢复、全局数据一致性和免费的数据备份容灾服务，既融合了商业数据库稳定可靠、高性能、可扩展的特征，又具有开源云数据库简单开放、自我迭代的优势。本文介绍尚学博...
冷热分层
海量结构化数据Delta Lake架构 针对结构化冷热分层的数据场景，阿里巴巴集团推出了海量结构化数据的Delta Lake架构。基于Tablestore的通道服务，原始数据可以利用变更数据捕获CDC（Change Data Capture）技术写入多种存储组件中。示例 本...
概述
向量数据库简介 在现实世界中，绝大多数的数据都是以非结构化数据的形式存在的，如图片，音频，视频，文本等。这些非结构化数据随着智慧城市、短视频、商品个性化推荐、视觉商品搜索等应用的出现而爆发式增长。为了能够处理这些非结构化...
支持的地域
本文介绍数据安全中心的主要功能模块（数据洞察、数据脱敏、数据审计、数据安全态势）所支持的地域列表。您的数据库资产只有在支持的地域内，才能使用数据安全中心对应的功能。说明 本文用到的标识说明：表示当前地域不支持该功能。表示...
基本概念
地域 地域指数据中心所在的地理区域，通常按照数据中心所在的城市划分。例如，华北2（北京）地域表示数据中心所在的城市是北京。可用区 可用区是指在同一地域内，电力和网络互相独立的物理区域。例如，华北2（北京）地域支持12个可用区，...
新建同步节点并运行后上线
逻辑表 输入表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中提供数据的数据表的结构。当选择数据表时，需保证输入的模型与上游节点的输出数据模型相同，物理表名可以自定义。当选择星号（*）时，表示数据结构为任意结构...
内存型
数据结构模块集成 集成多个自研的数据模块，包括 exString（包含 Redis String命令增强）、exHash、GIS、Bloom、Doc、TS、Cpc、exZset、Roaring、Vector 和 Search，扩展了Redis的适用性，使业务无需再关心存储的结构和时效性，能够极大...
数据治理中心概述
权限限制 使用数据治理中心的用户角色主要分为空间管理员和普通用户，其权限限制如下。角色 权限说明 相关参考 空间管理员 可使用 工作空间视角 查看治理评估报告。如您需使用该视角查看某工作空间的治理评估报告，需被授权为该空间的空间...
数据集成调度策略说明
DTS的数据集成功能可根据调度策略的配置，定期地将源库中的结构和存量数据迁移至目标库中。通过该功能可以帮助您构建更加灵活的数据仓库（例如构建T+1的周期性数仓），本文介绍数据集成的策略、限制及适用场景。支持的数据库 支持全量数据...
应用场景
精准营销 该场景通过实时的数据统计，监测不同渠道用户的增长、活跃、留存状况，让企业快速分析出投资回报率。提高营销效果数据时效性，便于改进产品体验和优化营销方案，提高整体收益。该场景可实现：实时多源数据同步 支持多业务数据源，...
Redis命令概览
云数据库Redis存在多个版本、系列和架构，各种类型的实例对于Redis命令的支持度有所不同。根据本章节的导航信息，您可以快速找到云数据库Redis各版本支持的命令和限制使用的命令。命令支持概览 文档标题 简介 Redis社区版命令支持 云数据库...
功能概述
实现原理 分析型数据库MySQL版的向量分析旨在帮助您实现非结构化数据的近似检索和分析，其实现原理是通过AI算法提取非结构化数据的特征，然后利用特征向量唯一标识非结构化数据，向量间的距离用于衡量非结构化数据之间的相似度。...
从ECS上的自建Redis同步至云数据库Redis实例
警告 选择为 忽略报错并继续执行 后，如果在同步过程中遇到目标端的Key与源端中的Key相同，会将源端的数据覆盖写入目标端中，从而可能会导致目标端原有的数据丢失，请谨慎选择。源库对象 在 源库对象 框中单击待同步对象，然后单击 将其...
从ECS上的自建Redis同步至云数据库Redis实例
警告 选择为 忽略报错并继续执行 后，如果在同步过程中遇到目标端的Key与源端中的Key相同，会将源端的数据覆盖写入目标端中，从而可能会导致目标端原有的数据丢失，请谨慎选择。源库对象 在 源库对象 框中单击待同步对象，然后单击 将其...
数据源中心
EMR Workflow的数据源中心支持配置数据源，以满足不同的数据存储和访问需求。本文为您介绍如何创建、编辑和删除数据源。使用限制 数据源所在的集群和运行工作流时选择的集群需要在同一VPC下。创建数据源 进入数据源中心页面。使用阿里云...
常见问题
在云上有数据分析和机器学习需求，希望构建云上的数据湖架构，降低运维和管理成本。如何使用Spark读取DLF数据湖数据？目前DLF支持与阿里云E-MapReduce产品组合实现Spark数据的读取，详细请参考：EMR+DLF数据湖解决方案，暂不支持与自建...
应用场景
实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线，您可以实时接入APP、WEB、IoT和数据库等产生的异构数据，统一管理，并投递到下游的分析、归档等系统，构建清晰的数据流，让您更好的释放数据的价值。...
创建数仓分层
各个分层的功能介绍如下：数据引入层 ODS（Operational Data Store）ODS层用于接收并处理需要存储至数据仓库系统的原始数据，其数据表的结构与原始数据所在的数据系统中的表结构一致，是数据仓库的数据准备区。ODS层对原始数据的操作具体...
应用场景
灵活多变的业务场景 云数据库MongoDB采用No-Schema的方式，免去您变更表结构的痛苦，非常适用于初创型的业务需求。您可以将模式固定的结构化数据存储在 RDS（Relational Database Service）中，模式灵活的业务存储在MongoDB中，高热数据...
从ECS上的自建Redis同步至Tair实例
警告 完成数据同步作业的配置后，请勿变更源数据库或目标数据库的架构类型，否则会导致数据同步失败。前提条件 已创建源自建Redis实例和目标 云原生内存数据库Tair。目标 云原生内存数据库Tair 实例的创建方式，请参见 步骤1：创建实例。...
数据库迁移
一致性校验 迁移完成后，对迁移前后的数据进行对比，以确定迁移后的数据与源数据相同。不校验：不校验迁移后的数据是否与源数据相同。迁移完成，自动校验：迁移完成后，自动开始校验迁移后的数据是否与源数据相同。选中 迁移完成，自动校验...
数据脱敏
洗牌脱敏：不可逆算法，适用于结构化数据列级别的数据脱敏场景。在源数据表抽取数据并确认数值范围后，对该字段（在范围内）进行列级别的打散重排和随机选择，实现混淆脱敏。什么情况下需要进行数据脱敏：生产库向测试库转移生产数据并用于...
通过DSC实现DMS数据分类分级
本文旨在介绍如何将数据安全中心的分类分级能力应用于DMS实践，为客户提供敏感数据保护的联动方案。准备工作 在 RDS管理控制台 申请一个RDS实例，并创建数据库、表，构建测试数据。具体操作，请参见 快速创建RDS MySQL实例、创建数据库和...
从自建Redis迁移至MyBase Redis
对于List列表，由于DTS在调用 psync 或 sync 传输数据时，不会对目标端已有的数据执行 Flush 操作，所以可能出现重复的数据。迁移期间，如自建Redis发生扩缩容（如增加或者减少分片）、规格变配（如扩大内存），则您需重新配置任务。且为...
产品优势
无论是数据湖中的非结构化或半结构化数据，还是数据库中的结构化数据，您都可使用 AnalyticDB MySQL 构建企业的数据分析平台，同时完成高吞吐离线处理和高性能在线分析，实现降本增效。弹性能力和扩展性 AnalyticDB MySQL版 采用云原生技术...
数据库克隆
数据管理DMS的数据库克隆功能支持将源数据库的表结构和表数据复制至目标数据库中，实现全部表或部分表备份，适用多环境数据库初始化，例如将开发环境复制到测试环境。前提条件 源数据库与目标数据库类型相同，且都为MySQL。数据库实例的...
功能发布记录（2024年）
2024.4.24 当前仅华北2（北京）、华东2（上海）、华东1（杭州）和华南1（深圳）地域的数据治理中心支持Hologres数据源。所有DataWorks用户 数据治理中心概述 数据治理中心新增物化视图功能 当您在面对大数据计算任务频繁且存在大量相似子...
DataWorks On CDP/CDH使用说明
开始使用：数据建模与开发 DataWorks提供数据建模服务，将无序、杂乱、繁琐、庞大且难以管理的数据，进行结构化有序的管理。还提供 数据开发（DataStudio）功能，用于调度任务的开发，并与运维中心配合使用，进行调度任务的监控运维。开始...
非结构化分析
AnalyticDB PostgreSQL版 向量检索分析基于MPP查询架构构建，帮助用户实现基于SQL接口进行非结构化数据检索，并支持同结构化数据的关联分析。典型应用场景 通过 AnalyticDB PostgreSQL版 向量分析，您可以非常容易地搭建各种智能化应用。以...
- 产品推荐
- 这些文档可能帮助您