典型场景
基于湖构建数据平台，支持BI、挖掘等业务 对象存储OSS可以作为湖存储，DLA基于OSS构建一站式的大数据平台。具体包括构建数据湖、数据ETL、交互式查询、机器学习等功能。构建数据湖 实时数据湖：支持DB的CDC与消息数据（如Kafka）入湖，构建...
使用SQL管理外部项目
基于数据湖构建DLF和对象存储OSS的外部项目操作 基于Hadoop外部数据源的外部项目操作 创建与外部数据源中表结构相同的表 基于数据湖构建DLF和对象存储OSS的外部项目操作 在创建External Project后，您可以通过 MaxCompute客户端 进入创建的...
非结构化分析
AnalyticDB PostgreSQL版 向量检索分析基于MPP查询架构构建，帮助用户实现基于SQL接口进行非结构化数据检索，并支持同结构化数据的关联分析。典型应用场景 通过 AnalyticDB PostgreSQL版 向量分析，您可以非常容易地搭建各种智能化应用。以...
什么是数据传输服务DTS
支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，助您构建安全、可扩展、高可用的数据架构。DTS视频简介 为什么选择DTS 相对于传统数据迁移...
产品优势
无论是数据湖中的非结构化或半结构化数据，还是数据库中的结构化数据，您都可使用 AnalyticDB MySQL 构建企业的数据分析平台，同时完成高吞吐离线处理和高性能在线分析，实现降本增效。弹性能力和扩展性 AnalyticDB MySQL版 采用云原生技术...
数据资源平台
阿里云数据资源平台是构建数据智能的全流程平台，提供数据汇聚、规范设计、指标与标签体系构建、数据质量管控、数据资产管理、数据资产服务与共享、智能分析等核心功能，支持行业知识内容沉淀，帮助金融、政府及企业客户快速构建智能数据中...
概述
数据湖构建可以帮助用户快速构建云上数据湖，采用统一的管理视角治理数据湖。本产品目前处于公测阶段，您可以随时开通使用，目前数据湖构建所有功能均为免费使用阶段。用户使用流程 数据湖构建将帮助您快速简洁抽取源数据到统一数据湖的...
数据方案概览
DMS的数据方案提供数据变更、数据导出、数据追踪、环境构建的功能，通过本文您可以了解数据方案的各项功能详情。一级功能 二级功能 功能描述 结构变更 结构设计 可以对目标库、表进行符合研发规范的表结构设计，保障多套环境（例如开发环境...
功能概述
实现原理 分析型数据库MySQL版的向量分析旨在帮助您实现非结构化数据的近似检索和分析，其实现原理是通过AI算法提取非结构化数据的特征，然后利用特征向量唯一标识非结构化数据，向量间的距离用于衡量非结构化数据之间的相似度。...
工单管理
本文为您介绍如何在DMS中创建数据变更、结构变更和数据导出等不同类型的工单，以及如何关闭工单、查看工单详情等。注意事项 DMS不支持删除已创建的工单。创建工单 登录 数据管理DMS 5.0。将鼠标悬浮在页面左上角的 图标上，选择 全部功能，...
什么是自动驾驶开发平台
数据管理提供自动驾驶采集数据在云上数据预处理、预标注、管理、检索、重组、回放、输出到仿真或训练系统中的能力：非结构化数据处理针对非结构化数据处理提供DAG调度和并行计算能力，构建自动调度的10倍加速的自动驾驶数据工作流 多模态...
持久内存型性能白皮书
本文介绍 云原生内存数据库Tair 持久内存型性能测试的测试环境、测试工具、测试方法与测试结果。产品概述 Tair 持久内存型，基于持久内存技术，为您提供大容量、兼容Redis的内存数据库产品。单实例成本对比云数据库Redis社区版最高可降低30...
持久内存型性能白皮书
command_group 测试的数据结构，本案例中，依次测试下述数据结构：String Hash List Set Zset fieldcount 字段或元素个数，本案例中，String数据结构配置为1，其他数据结构配置为10。fieldlength 值长度，根据测试需求配置。threads YCSB...
产品简介
阿里云数据湖构建（Data Lake Formation，简称 DLF）是一款全托管的快速帮助用户构建云上数据湖及Lakehouse的服务，为客户提供了统一的元数据管理、统一的权限与安全管理、便捷的数据入湖能力以及一键式数据探索能力。DLF可以帮助用户快速...
构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
数据湖构建之MaxCompute湖仓一体最佳实践
MaxCompute+DLF湖仓一体方案打破数据湖与数据仓库割裂的体系，架构上将数据湖的灵活性、生态丰富与数据仓库的企业级能力进行融合，构建数据湖和数据仓库融合的数据管理平台。本文介绍湖仓一体的具体方案。背景信息 大数据计算服务...
数据集成调度策略说明
DTS的数据集成功能可根据调度策略的配置，定期地将源库中的结构和存量数据迁移至目标库中。通过该功能可以帮助您构建更加灵活的数据仓库（例如构建T+1的周期性数仓），本文介绍数据集成的策略、限制及适用场景。支持的数据库 支持全量数据...
消息通知管理
导出成功 导出失败 数据追踪 获取文件失败 待提交审批 待审批 审批通过 审批拒绝 日志处理成功 日志处理失败 数据库克隆 待审批 审批通过 审批拒绝 克隆成功 克隆失败 测试数据构建 待审批 审批通过 审批拒绝 构建成功 构建失败 结构设计 ...
名词解释
在配置/修改应用结构、数据源后需要索引重建。配额管理 名称 说明 文档容量 实例中各个表的总文档大小累加值（不考虑字段名，字段内容按照string来计算容量）。QPS 每秒查询请求数。LCU LCU（逻辑计算单元）是 衡量搜索计算能力的单位，...
功能发布记录
新增 提供Oracle在线迁移到各目标库的结构迁移与订正，方便用户快速构建目标数据库。2020年4月2日 线上改造迁移综述 数据库画像增加数据库兼容性选型。新增 提供Oracle迁移到各目标库兼容性对比，并支持按照Schema纬度筛选。2020年1月19日 ...
实施步骤
通过DTS实时同步PolarDB for MySQL数据到分析型数据库MySQL版需要以下几个步骤：步骤一：创建DTS同步作业 步骤二：配置同步链路 步骤三：查看同步数据 步骤一：创建DTS同步作业 创建DTS同步作业需要用户支付一定的费用，DTS支持两种付费...
表格问答
6、构建完毕后在数据配置页会新增一张辅表并展示对应表的数据结构。数据查询 1、数据上传成功后可在 问答测试 页面进行测试，文档总数可在数据查询下查看。2、API查询数据可参考：问答文档查询。相关限制 辅表最多只能添加5张。每个辅表最...
Schema约束
无论是在APM领域，还是IoT领域，或者是更偏传统的工业领域，时序数据所表现出的数据模型更像是一个半结构化数据——有其遵循结构化定义的一面、也有可灵活扩展的一面，而不是完全等同于关系型数据库的纯结构化。而在实际应用中，随着设备的...
全量数据索引构建
对于HBase表中的存量历史数据，需要手工执行一次全量构建才可以完成数据同步。全量数据构建 在HBase Shell中执行 build_external_index 为HBase表中的历史数据构建索引，该命令是异步执行的。重要 全量构建索引过程中，会阻塞HBase表的DDL...
快速使用TPC-DS测试数据集
TPC-DS是一套决策支持系统测试基准，提供99个SQL查询（SQL99或2003），分析数据量大，测试数据与实际商业数据高度相似，同时具有各种业务模型（分析报告型，数据挖掘型等等）。使用DLF数据探索，可以便捷地快速创建TPC-DS数据集，便于用户...
Tair自研数据结构最佳实践
本文介绍 Tair 自研数据结构的最佳实践。基于Tair与LLM构建企业专属Chatbot TairVector混合检索实践 基于Tair Vector实现图文多模态检索 基于Tair Vector实现分子结构近似检索 基于TairHash实现用户多设备登录管理 基于TairGIS实现电子围栏...
测试数据构建
数据管理DMS的测试数据构建功能拥有强大的算法引擎，支持批量生成各类随机值、地区名、虚拟IP地址等信息，可以大大减轻准备测试数据的负担。本文介绍构建测试数据的方法。前提条件 支持的数据库类型：MySQL：RDS MySQL、PolarDB MySQL版、...
btree_gist
btree_gist插件提供了一种使用GIST索引结构来模拟B树（B-tree）索引行为的方法。GIST允许用户为新的数据类型自定义索引策略，常用于处理复杂数据类型（多维数据、地理信息系统数据）的索引需求，并提供高效的搜索性能。功能简介 btree_gist...
概览
为了更好地指导您使用数据管理DMS（Data Management），DMS推出解决方案系列文档，旨在通过最佳实践（Step by Step）的形式向您介绍DMS研发流程、数据安全、数据开发的解决方案。研发流程解决方案 DMS为在线流程化系统，可统一管理企业内...
支持的数据库类型
数据安全中心DSC（Data Security ...PolarDB O引擎 非关系型数据库 MongoDB Redis 大数据 TableStore（仅政务云）MaxCompute AnalyticDB MySQL版 AnalyticDB PostgreSQL版 非结构化数据库 OSS 自建数据库 MySQL SQL Server PostgreSQL Oracle
MaxCompute湖仓一体概述
MaxCompute提供湖仓一体方案，该方案可以打破数据湖与数据仓库割裂的体系，并将数据湖的灵活性、生态丰富能力与数据仓库的企业级部署能力进行融合，助力构建数据湖和数据仓库相融合的数据管理平台。本文介绍如何通过MaxCompute和异构数据...
名词解释
构建表时需要定义表的Schema结构，包括表的列名和列类型。在宽表引擎中创建的表称为 宽表，在时序引擎中创建的表称为 时序表。PRIMARY KEY 〇 〇 Primary Key（主键）用于唯一标识表中每个记录的一列或一组列。主键的值在表中是唯一的，且...
表
MaxCompute的表类似于传统关系型数据库中的表，可以存储结构化数据，并且使用SQL进行查询和分析。MaxCompute中不同类型计算任务的操作对象（输入、输出）都是表。您可以 创建表、删除表以及向表中导入数据。说明 DataWorks的数据开发模块...
数据集成
数据源支持情况 数据集成目前支持40种以上的数据源类型（包括关系型数据库、非结构化存储、大数据存储、消息队列等），通过定义来源与去向数据源，并使用数据集成提供的数据抽取插件（Reader）、数据写入插件（Writer），实现任意结构化、...
空间数据管理概览
本文为您介绍空间数据管理页面的结构与功能，帮助您快速使用空间构建平台。进入空间构建平台 空间构建平台可以从 创建三维城市 组件时的 选择空间数据项目 对话框进入或在当前场景图层后单击，然后单击 选择数据 进入。在 选择空间数据项目...
空间数据管理概览
本文为您介绍空间数据管理页面的结构与功能，帮助您快速使用空间构建平台。进入空间构建平台 空间构建平台可以从添加 三维城市构建器 组件时的 选择空间数据项目 对话框进入或在当前场景图层后单击，然后单击 选择数据 进入。在 选择空间...
创建三维城市场景项目
三维城市构建器项目，支持通过使用 官方基底数据 和 空间构建数据 两种方式添加多个城市基底子组件和数据映射子组件。本文介绍两种创建三维城市构建器场景的方法。使用官方基底数据方式创建 在控制台内，单击切换到 三维城市构建器 页面，...
创建三维城市场景项目
三维城市构建器项目，支持通过使用 官方基底数据 和 空间构建数据 两种方式添加多个城市基底子组件和数据映射子组件。本文介绍两种创建三维城市构建器场景的方法。使用官方基底数据方式创建 在控制台内，单击切换到 三维城市构建器 页面，...
创建安全规则
安全规则针对不同功能模块提供了不同的检测点，具体信息请参见：SQL窗口-关系型数据库 SQL窗口-MongoDB数据库 SQL窗口-Redis数据库 SQL变更 权限申请 数据导出 结构设计 库表同步 数据追踪 敏感列变更 测试数据构建 数据库克隆 应用安全...
配置RDS MySQL间的数据集成任务
背景信息 DTS的数据集成功能可根据调度策略，定期地将源库中的结构和存量数据迁移至目标库中，通过该功能可以帮助您构建更加灵活的数据仓库。更多详情，请参见 数据集成调度策略说明。注意事项 如果源数据库没有主键或唯一约束，且所有字段...
- 产品推荐
- 这些文档可能帮助您