方案背景
本文介绍了表格存储结合实时计算Flink实现大数据分析的样例场景、架构设计等。背景信息 云数据库RDS MySQL基于阿里巴巴的MySQL源码分支，经过双十一高并发、大数据量的考验，拥有优良的性能。RDS MySQL支持实例管理、账号管理、数据库管理...
数据存储目录结构说明
本章介绍文件引擎(LindormDFS)默认的数据存储目录结构。目录 说明/${实例ID}-global/${实例ID}_xxx 宽表引擎数据存储目录/solr 搜索引擎数据存储目录/tsdb 时序引擎数据存储目录 说明${实例ID}：lindorm实例ID。xxx：实例所在的区域，如...
概述
适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。更多信息，请参见 什么是表格存储。云原生大数据计算服务（MaxCompute）是一...
概述
表格存储 表格存储（Tablestore）是阿里云自研的结构化数据存储，提供海量结构化数据存储以及快速的查询和分析服务，具备PB级存储、千万TPS以及毫秒级延迟的服务能力。云存储网关 云存储网关（Cloud Storage Gateway）是一款可以部署在用户...
UTL_RAW
UTL_RAW内置包提供了用于操作RAW类型数据的函数。UTL_RAW子程序总览 子程序 说明 BIT_AND Function 对RAW r1和RAW r2的值按位进行逻辑“与”运算，并返回RAW类型的计算结果。BIT_COMPLEMENT Function 对输入的RAW类型数据的值按位进行逻辑...
云数据库 Memcache 版支持的数据结构？
云数据库 Memcache 版目前仅支持 Key-Value 的数据结构，暂不支持 List 等数据结构。
恢复下载后的备份数据
MySQL逻辑备份下载数据的目录结构与示例文件如下：建表语句示例 CREATE TABLE `rds_db`.`orders`(`order_id` bigint(20)COMMENT '',`product_name` varchar(32)CHARSET `utf8` COLLATE `utf8_general_ci` COMMENT '',`price` double ...
概述
为应对数据爆炸式增长的挑战，PolarDB分布式版本基于对象存储设计了一套列存索引（Clustered Columnar Index，CCI）功能，支持将行存数据实时同步到列存存储上，并支持以下功能：在线事务处理和实时数据分析的一体化能力，满足OLTP和OLAP...
数据服务集群
Apache HBase支持海量数据存储，具有很高的存储和计算扩展性，以及很好的读写性能，支持动态列、数据多版本存储，以及数据的生命周期管理等特点。适用场景 基于Apache HBase的优势和特点，DataServing适用于以下场景：风控或画像等需要支持...
缓存分析
数据库自治服务DAS支持缓存分析功能，通过分析Redis的备份文件，可以快速发现实例中的大Key，帮助您掌握Key在内存中的占用和分布、Key过期时间等信息，为您的优化操作提供数据支持，帮助您避免因Key倾斜引发的内存不足、性能下降等问题。...
X-Engine性价比优势
背景信息 RDS MySQL提供阿里云自研存储引擎X-Engine，相比InnoDB，X-Engine在磁盘空间占用和数据库整体成本上有比较明显的优势，X-Engine使用了层次化的存储结构，并结合ZSTD压缩算法实现了更高的数据压缩率。下文将详细对比X-Engine、...
概述
使用场景 数据架构变化 随着业务的变化，如果现有业务对数据库并发读写需求、扩展性和可用性需求较高，或需要复杂的检索，原有MySQL数据库的数据架构已经不能满足现在的业务需求，您可以选择将MySQL数据库中的数据迁移到表格存储中。...
概述
AnalyticDB PostgreSQL版 向量分析可以通过AI算法提取非结构化数据的特征，并利用特征向量作为非结构化数据的唯一标识，帮您快速且低成本地实现对非结构化数据检索和对结构化数据关联分析。向量数据库简介 在现实世界中，绝大多数的数据都...
宽表模型设计
数据表结构 假设存储车辆元数据的数据表名称为vehicles_metadata，表结构请参见下表。说明 关于表设计的更多信息，请参见 表设计。字段名称 类型 描述 vin_id（主键列）String 车辆识别代码，即车架号，用于唯一标识车辆。v_color String ...
基本概念
中文 英文 释义 实例 instance 实例是数据访问代理的集群，相当于一个逻辑的物理数据库实例。实例基于 MySQL 标准接口，作为统一的 SQL 请求入口，所有 SQL 都需要请求给实例进行处理，实例会负责将访问请求发到正确的物理数据库上。数据库...
什么是数据库存储DBFS
数据库文件存储（DBFS），是一款针对数据库场景的云原生共享文件存储服务。它基于共享存储架构设计，通过文件协议提供数据库定制功能，具备企业级存储特性。主要服务于云上自建数据库，基于传统SAN的应用等，为用户提供高IO性能和高可用性...
企业版产品系列
2种产品系列的适用场景对比如下表所示：系列 说明 适用场景 集群版 使用计算与存储分离的架构，提供更快的弹性扩缩容、更大的存储容量、更低的主备延迟。大中型企业的生产数据库。互联网、物联网、零售电商、物流、游戏等行业的数据库。对...
时序模型介绍
时序模型提供了数据生命周期、时间线索引、冷热存储、数据压缩等功能以满足时序数据的低成本存储以及高性能查询分析的需求。时序模型在车联网场景中主要用于车辆轨迹数据的存储、查询和分析。说明 关于时序模型的更多信息，请参见 时序模型...
新功能发布记录
2022-02-11 华东1（杭州）、华东2（上海）、华南1（深圳）、华北2（北京）数据库文件存储DBFS产品详情页 表 2.2020年06月 功能名称 功能概述 发布时间 支持地域 相关文档 数据库文件存储标准版公测发布 数据库文件存储（DBFS）是一款针对...
产品架构
数据库分层架构 在数据库分层架构中，使用 Tablestore 配合MySQL来完成应用系统的业务需求，利用MySQL的事务能力来处理对事务强需求的写操作与部分读操作，利用 Tablestore 的数据检索能力和大数据存储来实现数据存储、查询与分析。...
名词解释
术语 宽表引擎 时序引擎 说明 DATABASE 〇 〇 Database（数据库）是一个结构化的、用于存储和管理相关数据的集合。TABLE 〇 〇 Table（表）是一种结构化的数据对象，用于存储和组织相关的数据记录。构建表时需要定义表的Schema结构，包括表...
产品优势
简单易用 PolarDB 兼容多款流行的关系型数据库引擎，完全兼容MySQL和PostgreSQL，高度兼容Oracle语法，代码/应用无需修改或只需少量修改。降低成本 计算节点和存储分离：多个计算节点共享存储，新增只读节点时只需支付计算节点费用，大大...
功能概述
实现原理 分析型数据库MySQL版的向量分析旨在帮助您实现非结构化数据的近似检索和分析，其实现原理是通过AI算法提取非结构化数据的特征，然后利用特征向量唯一标识非结构化数据，向量间的距离用于衡量非结构化数据之间的相似度。...
数据总览
项目存储量除表存储量外，还会计算包括资源存储量、回收站存储量及其它系统文件存储量等在内，因此会大于表存储量。表的存储计费计算的是表的逻辑存储而非物理存储。热门表 根据数据地图表详情页访问PV，为您展示表访问量的排行榜。为实时...
表格存储建表注意事项
表格存储支持半结构化的表，即建表时只需要指定主键列（1至4列），不需要在创建表的时候指定属性列。表格存储表中包含的属性列个数无限制，且每一行数据可以拥有不同数量不同类型的属性列。在应用程序写入数据时，表格存储需要应用程序指定...
申请与创建
本文主要说明如何创建阿里云数据库文件存储服务DBFS。申请创建DBFS的步骤：进入“阿里云控制台”->“登录数据库文件系统控制台”。如果未开通服务，需要先点击“立即开通”开通数据库文件存储服务后，才能进入购买页面。单击“创建数据库...
新建虚拟维度逻辑表
虚拟维度逻辑表的用于规范化没有具体业务实体承载、没有可固化数据范围逻辑定义的维度对象，例如访客、URL。本文为您介绍如何新建虚拟维度逻辑表。前提条件 已完成虚拟业务对象的创建，具体操作请参见 创建并管理业务实体。步骤一：新建...
新建虚拟维度逻辑表
虚拟维度逻辑表的用于规范化没有具体业务实体承载、没有可固化数据范围逻辑定义的维度对象，例如访客、URL。本文为您介绍如何新建虚拟维度逻辑表。前提条件 已完成虚拟业务对象的创建，具体操作请参见 创建并管理业务实体。步骤一：新建...
分区表命令列表
删除 ALTER TABLE…DROP PARTITION 删除分区结构和存储在这个分区上的数据。ALTER TABLE…DROP SUBPARTITION 删除子分区结构及存储在子分区内的数据。ALTER TABLE…TRUNCATE PARTITION 删除指定的分区中数据，保留完整的分区结构。ALTER ...
产品架构
分布式链路跟踪产品总体架构如下图所示：Trace 数据采集通道 目前支持 3 种数据的采集通道，分别是阿里云底座的 SLS 通道，Antstack 底座的 ALS 通道，以及应用主动上报的通道。前两种是基于 Trace 日志收集的方式，后一种是 Trace 数据...
配置逻辑表基本信息
您可以在逻辑表编辑器属性对话框中查看逻辑表的基本信息，包括逻辑表的表类型、业务对象、数据板块，主题域、数据时效等基本信息，同时可配置对应责任人。本文为您介绍逻辑表属性的基本信息参数配置。操作步骤 请参见 离线任务属性入口，...
配置逻辑表基本信息
您可以在逻辑表编辑器属性对话框中查看逻辑表的基本信息，包括逻辑表的表类型、业务对象、数据板块，主题域、数据时效等基本信息，同时可配置对应责任人。本文为您介绍逻辑表属性的基本信息参数配置。操作步骤 请参见 离线任务属性入口，...
表结构发布流程化
数据库实例与结构设计各节点的对应关系：结构设计节点 设计结构（Dev）测试（Test）生产发布（Product）对应数据库实例名称 Schema_Design-dev Schema_Design-test Schema_Design-product 环境类型 dev test product 数据库名称 dev_...
品牌升级
无论是数据湖中的非结构化或半结构化数据，还是数据库中的结构化数据，您都可使用 AnalyticDB for MySQL 构建企业的数据分析平台，同时完成高吞吐离线处理和高性能在线分析，实现降本增效。此次品牌升级，存量分析型数据库MySQL版（ADS）...
基本概念
逻辑库（数据库）逻辑库，是数据库在逻辑上的组织结构，包括表、视图、索引等。CREATE DATABASE创建的就是逻辑数据库。一个 AnalyticDB for MySQL 集群最多可创建256个逻辑数据库。AnalyticDB for MySQL 文档中提到的数据库，都是指逻辑库...
数据结构设计
由于数据的灵活性以及通用性，在设计数据结构时也需要根据数据之间的关系来决定如何存储。以电商平台为例。通常电商平台的核心数据包含产品、用户、购物车和订单。订单是由用户购买产品产生的，订单就可以认为是产品和用户之间的关联关系...
产品架构
Databricks数据洞察构建在ECS之上，使用阿里云对象存储服务（OSS）为核心存储。本文介绍Databricks数据洞察的产品架构。存储访问加速层方便您可以像操作HDFS上的数据一样访问OSS上的数据。目前，Databricks数据洞察提供了两种执行Spark作业...
大数据用户画像解决方案
方案总览 作为面向大数据场景的半结构化、结构化存储系统，Lindorm可以很好的满足用户画像：没有强事务要求，大数据量、高并发读写场景这样的业务特征。其架构如下图所示：方案优势 1.低成本：集群内单表冷热分离能力、独有的压缩优化能力...
数据集成调度策略说明
DTS的数据集成功能可根据调度策略的配置，定期地将源库中的结构和存量数据迁移至目标库中。通过该功能可以帮助您构建更加灵活的数据仓库（例如构建T+1的周期性数仓），本文介绍数据集成的策略、限制及适用场景。支持的数据库 支持全量数据...
通道服务概述
背景信息 表格存储适合元数据管理、时序数据监控、消息系统等服务应用，这些应用通常利用增量数据流或者先全量后增量的数据流来触发一些附加的操作逻辑，支持的附加操作如下：数据同步：将数据同步到缓存、搜索引擎或者数据仓库中。...
- 产品推荐
- 这些文档可能帮助您