同步节点
逻辑表 输入表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中提供数据的数据表的结构。当选择数据表时，。当选择星号（*）时，表示数据结构为任意结构，用于对未创建数据模型的表进行操作，此时物理表必须选择已经存在的...
库表结构优化
要做好库表结构设计和优化，用户通常需要关注以下信息：数据库引擎架构 用户需要了解数据库引擎的存储和计算架构特点，才能结合业务的数据分布特征与业务场景特征，进行数据建模，从而设计出符合引擎架构特点的数据表结构。SQL特征差异 ...
白皮书合集
SOFAStack 提供了针对金融企业转型云原生架构以及单元化架构的解决方案：SOFAStack 白皮书（2021 版）SOFAStack 解决方案白皮书 单元化解决方案白皮书 Forrester 分析师报告：Forrester-SOFAStack 总体经济影响报告（TEI）-202006 ...
概述
向量数据库简介 在现实世界中，绝大多数的数据都是以非结构化数据的形式存在的，如图片，音频，视频，文本等。这些非结构化数据随着智慧城市、短视频、商品个性化推荐、视觉商品搜索等应用的出现而爆发式增长。为了能够处理这些非结构化...
支持的地域
本文介绍数据安全中心的主要功能模块（数据洞察、数据脱敏、数据审计、数据安全态势）所支持的地域列表。您的数据库资产只有在支持的地域内，才能使用数据安全中心对应的功能。说明 本文用到的标识说明：表示当前地域不支持该功能。表示...
Redis命令概览
云数据库Redis存在多个版本、系列和架构，各种类型的实例对于Redis命令的支持度有所不同。根据本章节的导航信息，您可以快速找到云数据库Redis各版本支持的命令和限制使用的命令。命令支持概览 文档标题 简介 Redis社区版命令支持 云数据库...
数据源中心
EMR Workflow的数据源中心支持配置数据源，以满足不同的数据存储和访问需求。本文为您介绍如何创建、编辑和删除数据源。使用限制 数据源所在的集群和运行工作流时选择的集群需要在同一VPC下。创建数据源 进入数据源中心页面。使用阿里云...
功能概述
实现原理 分析型数据库MySQL版的向量分析旨在帮助您实现非结构化数据的近似检索和分析，其实现原理是通过AI算法提取非结构化数据的特征，然后利用特征向量唯一标识非结构化数据，向量间的距离用于衡量非结构化数据之间的相似度。...
应用场景
实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线，您可以实时接入APP、WEB、IoT和数据库等产生的异构数据，统一管理，并投递到下游的分析、归档等系统，构建清晰的数据流，让您更好的释放数据的价值。...
创建数仓分层
各个分层的功能介绍如下：数据引入层 ODS（Operational Data Store）ODS层用于接收并处理需要存储至数据仓库系统的原始数据，其数据表的结构与原始数据所在的数据系统中的表结构一致，是数据仓库的数据准备区。ODS层对原始数据的操作具体...
需求阶段
作为承接业务方数据需求的数据产品经理，在需求阶段需要规范首次需求流程和迭代需求流程。首次需求流程 对于业务方首次提出的需求，重点工作在于评估完成该需求的技术、数据、合规的可行性后，以细化需求的方式完成产品需求文档，并组织...
数据库导出
当您需要进行数据库备份、导出数据库表进行数据分析等操作时，您可使用 数据管理DMS 的数据导出功能，该功能可通过提交工单的方式导出数据库。前提条件 数据库类型如下：MySQL系列：自建MySQL、RDS MySQL、PolarDB MySQL版、AnalyticDB ...
非结构化分析
AnalyticDB PostgreSQL版 向量检索分析基于MPP查询架构构建，帮助用户实现基于SQL接口进行非结构化数据检索，并支持同结构化数据的关联分析。典型应用场景 通过 AnalyticDB PostgreSQL版 向量分析，您可以非常容易地搭建各种智能化应用。以...
外部表概述
MaxCompute支持使用外部表功能查询和分析存储于OSS等外部存储系统的数据。该机制使得用户可以无需将数据导入到MaxCompute内部存储，直接对外部数据进行操作，从而提供了数据处理的灵活性和方便性。背景信息 MaxCompute SQL作为分布式数据...
生成测试数据
下载模拟数据 在 任务中心 的模拟数据列表中，单击操作列中的 查看 按钮弹出目标任务的任务详情面板，在面板的右下角单击 下载 按钮下载创建的模拟数据到本地磁盘，用户可以从本地磁盘中查看导出的数据结构文件。相关文档 SQL 编辑和执行 ...
概述
DataWorks的安全中心，帮助您快速构建平台的数据内容、个人隐私等相关的安全能力，满足企业面向高风险场景的各类安全要求（例如，审计），无需您额外配置即可直接使用该功能。DataWorks的安全中心作为云上大数据体系的安全门户，致力于向您...
通过Reindex API迁移自建Elasticsearch数据
如果您需要迁移数据，且源索引的数据不需要进行复杂的转换和处理，您可以按照本文提供的步骤，使用Reindex API将数据从自建Elasticsearch集群迁移至Lindorm搜索引擎。前提条件 自建Elasticsearch（简称ES）集群为7.0.0~7.10.1版本。已开通...
从自建Db2迁移至RDS MySQL
在将业务切换至目标实例前，请务必先结束或释放该任务，避免该任务被自动恢复后，源端数据覆盖目标实例的数据。DTS基于Db2的CDC复制技术将自建Db2数据库的增量更新数据同步到目标库中，但是CDC复制技术自身具有限制，请参见 CDC复制技术所...
从自建Db2迁移至RDS MySQL
在将业务切换至目标实例前，请务必先结束或释放该任务，避免该任务被自动恢复后，源端数据覆盖目标实例的数据。DTS基于Db2的CDC复制技术将自建Db2数据库的增量更新数据同步到目标库中，但是CDC复制技术自身具有限制，请参见 CDC复制技术所...
从自建SQL Server全量迁移至RDS SQL Server
DTS会自动地在阿里云RDS SQL Server中创建数据库，如果待迁移的数据库名称不符合阿里云RDS的定义规范，您需要在配置迁移任务之前在阿里云RDS SQL Server中创建数据库。说明 关于阿里云RDS的定义规范和创建数据库的操作方法，请参见 创建...
大数据专家服务
大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户构建和持续优化的大...
产品架构
通过数据导入工具，云数据库 SelectDB 版 可从多种数据源（阿里云数据源、自建数据源）进行数据导入，提供稳定、高效、简单易用的数据集成方案。具体操作，请参见 数据导入工具。通过数据可视化集成，云数据库 SelectDB 版 可与MySQL协议...
JindoFS实战演示
Flume高效写入OSS Flume高效写入OSS 2021-06-01 Flume是一个分布式、可靠、高可用的系统，支持从不同数据源高效地收集、聚合、迁移大量日志数据，聚合到中心化的数据存储服务，被广泛用于日志收集场景中。由于OSS本身不支持Flush功能，而...
数据库上云服务内容说明
按对应服务规格提供《项目调研报告》《数据库架构与容量设计方案》、《数据库与应用改造方案》、《数据库迁移方案》、《【客户名称】Oracle（或其他数据库产品）对象兼容性改造实施清单列表》、《数据迁移问题清单列表》、《【客户名称】...
数据迁移
MaxCompute为您提供了完善的数据迁移方案以及多种经典的分布式计算模型，能够快速地解决海量数据存储和计算问题，有效降低企业成本。DataWorks 为MaxCompute提供一站式的数据集成、数据开发、数据管理和数据运维等功能。其中：数据集成 为...
整库离线同步至OSS
同步解决方案支持的数据源及其配置详情请参见 支持的数据源与读写能力。说明 数据源相关能力介绍详情请参见：数据源概述。已购买合适规格的独享数据集成资源组。详情请参见：新增和使用独享数据集成资源组。已完成数据集成资源组与数据源的...
方案背景
本文介绍了表格存储结合实时计算Flink实现大数据分析的样例场景、架构设计等。背景信息 云数据库RDS MySQL基于阿里巴巴的MySQL源码分支，经过双十一高并发、大数据量的考验，拥有优良的性能。RDS MySQL支持实例管理、账号管理、数据库管理...
Slowly Changing Dimension
G-SCD解决方案的优势如下：流批一体：不需要增量表和基础表两张表。存储资源节省：不需要按时间粒度保留历史全量数据。查询性能高：借助Delta Lake的Optimize、Zorder和DataSkipping的能力，提升查询性能。SQL使用兼容性高：保留原来实现的...
堆表结构
结构 说明 table files 表文件，由一个或多个数据文件组成，文件数量与文件大小有关，超过1 GB就会生成一个新的数据文件。file 数据文件，由多个数据块组成。page 数据块，由多个数据行组成。page header 数据块头，详细信息请参见 数据...
管理数据架构待发布对象
前提条件 数据架构对象所在的数据板块已经发布。待发布数据架构对象入口 请参见 发布包总览入口，进入发布包 总览 管理页面。单击 数据架构 页签，进入待发布 数据架构 对象页面。管理数据架构待发布对象 待发布数据架构页面主要由搜索与...
常见问题
扫描MaxCompute、OSS、阿里云数据库服务（RDS、PolarDB-X、PolarDB、OceanBase、表格存储等）和自建数据库中的数据，通过敏感数据规则，判断和打标敏感数据，为数据安全审计、数据脱敏、智能异常检测等数据安全解决方案提供基础。...
功能优势
为了让您对非结构化数据拥有更多的自主控制权，您可以把非结构化数据保存在OSS或者图片服务器上（下图使用OSS），非结构化数据的保存地址即URL存储在分析型数据库MySQL版中，整体架构如下所示。通过分析型数据库MySQL版控制台注册特征提取...
什么是PolarDB MySQL标准版
PolarDB MySQL版 的标准版是 PolarDB 全新推出的数据库集群类型，采用阿里云全新一代高性能低成本的计算和存储基础设施，用户使用较低的成本即可享受到 PolarDB 的核心能力。PolarDB MySQL版 的标准版采用计算与存储分离的架构，数据库代理...
创建与释放全球多活数据库集群
对于表级别的数据同步，如果除DTS以外的数据没有写入目标库，您可以使用数据管理DMS（Data Management Service）来执行在线DDL变更，请参见 不锁表结构变更。警告 如果有除DTS外的数据写入目标库，请勿使用DMS执行在线DDL变更，否则可能...
数据管理DMS解决方案系列
为了更好地指导您使用数据管理DMS（Data Management），DMS推出解决方案系列文档，旨在通过最佳实践（Step by Step）的形式向您介绍DMS研发流程、数据安全、...研发流程解决方案 数据安全解决方案 数据开发解决方案 更多信息，请参见 概览。
管理数据架构待发布对象
前提条件 数据架构对象所在的数据板块已经发布。待发布数据架构对象入口 请参见 发布包总览入口，进入发布包 总览 管理页面。单击 数据架构 页签，进入待发布 数据架构 对象页面。管理数据架构待发布对象 待发布数据架构页面主要由搜索与...
基本概念
所以为保障数据一致性，迁移期间请勿在源库中写入新的数据。说明 为保证数据一致性，建议迁移期间不要往源数据库中写入新的数据。如需实现不停机迁移，您需要在配置数据迁移任务时，同时选择结构迁移、全量数据迁移和增量数据迁移。增量...
结构比对
背景信息 ODC 的结构比对功能支持将同一项目下、同类型数据源的数据库对象结构进行对比分析，并生成变更脚本。本文档旨在介绍如何通过 ODC 提交结构比对工单以对比分析两个数据库对象结构。注意事项 链路支持：OceanBase MySQL 到 ...
规格查询导航
云数据库 Redis 版 具备多种类型、系列和架构，您可以通过本文的导航信息快速找到相关类型实例的规格文档。Redis经济版 云数据库 Redis 版 推出 经济版 实例，满足您低成本使用Redis的需求，更多信息请参见 经济版实例。Redis社区版 实例...
产品架构
存储访问加速层方便您可以像操作HDFS上的数据一样访问OSS上的数据。目前，Databricks数据洞察提供了两种执行Spark作业的方式，包括通过Notebook或者在项目空间里新建Spark作业。同时，Databricks数据洞察还提供了监控告警、元数据管理、...
- 产品推荐
- 这些文档可能帮助您