块存储
数据持久性和服务可用性 在同一可用区中，您的业务数据以多副本的形式分布存储在块存储集群中，保证读写过程中的数据稳定性，为ECS实例实现99.9999999%（9个9）的数据可靠性保证。为进一步提升块存储的可靠性，建议您定期创建快照，为云盘...
归档存储服务等级协议
即，用户每月归档存储的数据持久性为99.99999999%。意为存储在归档存储上一百亿个用户文件，每月最多只有1个文件发生数据丢失的可能性。2.2.数据可销毁性 2.2.1.在用户主动删除数据或用户服务期满后需要销毁数据的，阿里云将自动清除对应...
使用ossimport迁移数据
ossimport支持将任意地域的本地存储数据、第三方存储数据、对象存储OSS数据迁移至任意地域的OSS中。本文介绍如何使用ossimport将数据从第三方存储迁移到OSS。背景信息 某用户的数据存储于腾讯云COS广州（华南）区域，数据大小约500TB。现...
缓冲区管理
主节点Buffer Pool中的数据页，根据是否包含未来数据（即只读节点的回放位点之后新产生的数据），可以分为两类：可以写入存储的数据页和不能写入存储的数据页。该判断依赖以下两个位点：Buffer最近一次修改对应的LSN，即Buffer Latest LSN...
创建存储空间
本地冗余存储 采用单可用区（AZ）内的数据冗余存储机制，将用户的数据冗余存储在同一个可用区内多个设施的多个设备上，确保硬件失效时的数据持久性和可用性。同城冗余存储（推荐）采用多可用区（AZ）内的数据冗余存储机制，将用户的数据...
CREATE TYPE
main 策略虽然允许压缩，但不鼓励将数据移出主表行，只有在没有其他方式能使行大小合适的情况下，带有这种存储策略的数据才会被移出，而它会优先于 extended 和 external 策略的数据保留在行内。除了 plain 之外，所有的 storage 选项都...
CREATE TYPE
main 策略虽然允许压缩，但不鼓励将数据移出主表行，只有在没有其他方式能使行大小合适的情况下，带有这种存储策略的数据才会被移出，而它会优先于 extended 和 external 策略的数据保留在行内。除了 plain 之外，所有的 storage 选项都...
功能特性
Hudi存储 数据导入与导出 功能集 功能 功能描述 参考文档 大数据数据源 Maxcompute数据源 AnalyticDB for MySQL支持通过外表、DataWorks两种方式将MaxCompute数据导入至数仓版或湖仓版集群，也支持通过外表将AnalyticDB for MySQL数仓版...
新功能发布记录
功能发布更新 2024年 03月 功能名称 变更类型 功能描述 相关文档 数据工作站 新增 支持以文档形式交付查询的数据和数据变化趋势等信息，并支持在交付后使用智能工具解答数据相关问题。使用数据工作站功能可以提高数据交付效率和数据自助...
使用云数据库Redis版实现即时通信场景中的多端同步
消息、会话、会话与消息组织关系的实现方式在业界各主流IM系统中都不尽相同，但无外乎两种形式：写扩散读聚合、读扩散写聚合。读、写扩散是消息在群组会话中的存储形式，其详细说明如下。在读扩散场景中，消息归属于会话，相当于数据库中...
管理Logstore
删除Logstore必须提前删除所有Logtail配置，删除日志是通过设置更短的保存时间，本文介绍Logstore选型、创建及升级Logstore、删除Logstore与日志等操作。基本概念 日志库（Logstore）是日志服务中日志数据的采集、存储和查询单元。每个...
常见问题（FAQ）
说明 详情请参考Databricks官网文章...为了确保正确更新事务日志并执行正确的验证，写操作必须通过Databricks Runtime 外部读取：增量表存储以开放格式（Parquet）编码的数据，允许其他了解此格式的工具读取数据。有关如何读取Delta表的信息。
pg_type
typcategory char typcategory 是一种任意的数据类型分类，它被分析器用来决定哪种隐式转换“更好”。typispreferred bool 如果此类型在它的 typcategory 中是一个更好的转换目标，此列为真。typisdefined bool 如果此类型已被定义则为真。...
管理共享
本文介绍如何在云存储网关控制台上管理共享，包括创建共享、设置NFS共享、设置SMB共享、删除共享等操作。前提条件 已创建云存储网关。更多信息，请参见 创建文件网关。已添加缓存。更多信息，请参见 添加缓存。已创建OSS Bucket，更多信息...
DataWorks On Hologres使用说明
二、数据建模与开发 模块 描述 相关文档 数据建模 数据建模是全链路数据治理的第一步，沉淀阿里巴巴数据中台建模方法论，从数仓规划、数据标准、维度建模、数据指标四个方面，以业务视角对业务的数据进行诠释，让企业内部实现“数同文”的...
SQL 编辑和执行
执行计划 查看选中的或当前光标所在的 SQL 语句在执行前系统预估的执行计划（EXPLAINPLAN 操作的结果），展示的执行数据可能与实际执行语句后的数据略有不同，您可以使用该功能评估 SQL 语句。单击 执行计划 按钮，在 计划详情 页签中，...
术语
硬件压缩盘（Smart-SSD）硬件压缩盘使用阿里巴巴自研的Aliflash Smart-SSD技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。硬件压缩盘的压缩引擎集成在盘片内部，通过FPGA/ASIC...
冷热分层存储
并不是所有OSS-HDFS中存储的数据都需要频繁访问，但基于数据合规或者存档等原因，部分数据仍然需要继续保存。针对以上问题，OSS-HDFS服务支持数据的冷热分层存储，对于经常需要访问的数据以标准类型进行存储，对于较少访问的数据以低频、...
管理存储过程
概述 在 OceanBase 开发者中心（OceanBase Developer Center，ODC）首页单击连接名进入连接后，在左导航栏中单击 存储过程 标签可查看存储过程列表，在存储过程列表中显示当前连接的数据库中存在的存储过程对象。在存储过程列表中，可查看...
PolarDB HTAP实时数据分析技术解密
该执行器框架充分利用列式存储的优势，例如，以一个4096行的Batch为单位访问存储层的数据，使用SIMD指令提升CPU单核处理数据的吞吐量，所有关键算子均支持并行执行。对比MySQL原有的行存执行器，性能有数量级的提升。支持行列混合执行的...
表设计最佳实践
因为天气信息的数据量巨大，在对天气日志表按照地域进行分区后，可以按照时间（例如，天）进行二级分区。此种分区方式可避免发生因某一个地点或某一个时间的天气变化而造成其他无关数据变化。建议采集终端上使用DataHub进行数据汇聚，然后...
多元索引介绍
例如当数据需要保留6个月时，可以将每个月的数据保存在一张数据表中，例如table_1、table_2、table_3、table_4、table_5、table_6，并为每个数据表创建一个多元索引，每个数据表和多元索引中只会保存一个月的数据，只需要每个月把6个月前的...
规划工作空间
工作空间规划实践 工作空间规划可按照公司部门、公司业务或数仓层次进行规划，或综合三种维度进行混合规划：细分 按部门划分 按业务划分 按数仓层次划分 划分依据 工作空间的划分可以与公司的组织架构相一致。例如：生产部、营销部、人力...
DLA Lakehouse实时入湖
Workload（⼯作负载）是围绕湖仓⼀体化而展开的核心工作的编排调度（由DLA Lakehouse统⼀调度），包括如下功能特点：入湖建仓 为了将其他源头的数据，汇总到整个湖仓内构建⼀个统⼀的数据平台，例如有DB类型的⼊湖建仓，也有Kafka的入湖建...
云存储网关
如何沟通两种业务之间的数据是一个比较麻烦的事情，云存储网关可以起到一个桥梁的作用，便捷的沟通新旧业务，进行数据交换。替代ossfs和ossftp ossfs和ossftp都是基于文件协议的开源工具，您可以通过它们直接上传文件到OSS。但是这两个开源...
JindoFS介绍和使用
JindoFS提供兼容对象存储的纯客户端模式（SDK）和缓存模式（Cache），以支持与优化Hadoop和Spark生态大数据计算对OSS的访问；提供块存储模式（Block），以充分利用OSS的海量存储能力和优化文件系统元数据的操作。JindoFS纯客户端模式（SDK...
术语
硬件压缩盘（Smart-SSD）硬件压缩盘使用阿里巴巴自研的Aliflash Smart-SSD技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。硬件压缩盘的压缩引擎集成在盘片内部，通过FPGA/ASIC...
定价公式及退费说明
按量付费 包年包月 总计算节点价格=目录单价*节点个数/3*时长【存储】数据盘 即：购买页的“存储大小”数据盘是指数据文件、索引文件和临时文件等占用的空间。被占用的存储空间会产生费用。存储空间的费用与集群所在的地域、部署方案、预购...
什么是EMR Serverless StarRocks
数据湖分析 StarRocks不仅能高效的分析本地存储的数据，也可以作为计算引擎直接分析数据湖中的数据，支持Apache Hive、Apache Iceberg、Apache Hudi等数据组织结构；支持Parquet、ORC、CSV等文件格式；也支持HDFS、S3、OSS等存储方式。在...
Kafka集群的数据存储格式
数据存储格式 DTS支持将写入至Kafka集群的数据存储为如下三种格式：DTS Avro：一种数据序列化格式，可以将数据结构或对象转化成便于存储或传输的格式。Shareplex Json：数据复制软件 Shareplex 读取源库中的数据，将数据写入至Kafka集群时...
Kafka集群的数据存储格式
数据存储格式 DTS支持将写入至Kafka集群的数据存储为如下三种格式：DTS Avro：一种数据序列化格式，可以将数据结构或对象转化成便于存储或传输的格式。Shareplex Json：数据复制软件 Shareplex 读取源库中的数据，将数据写入至Kafka集群时...
产品概述
全密态数据库采用机密计算能力，使得数据在用户侧（客户端）加密后，在非受信的服务器端 全程只需要以密文形式存在，但是仍然支持所有的数据库事务、查询、分析等操作。避免云平台软件、管理人员（如DBA）、以及其他非授权人员接触到明文...
分析数据
DataWorks的电子表格为您提供丰富、便捷的数据分析操作，其操作与Office Excel高度一致，大大降低您的学习成本。前提条件 已创建并导入数据至电子表格。详情请参见 创建电子表格 和 导入数据至电子表格。背景信息 您可以在电子表格的编辑...
资产全景
资产全景介绍 资产全景页面仅为您展示生产环境中的元数据及加工所得的应用数据，包括以下三种模式：全局模式：以星球形式为您展示存储数据量大于0的业务板块及其概要信息。流动模式：展示数据的流入、整合与输出过程，更直观的体现数据加工...
按时间戳冷热分离
Lindorm(main):018:0>scan 'chsTable'，{STARTROW=>'row1',STOPROW=>'row9'，HOT_ONLY=>true} 带 TimeRange 的查询，系统会将设置的 TimeRange 与 COLD_BOUNDARY 冷热分界线进行比较来决定查询哪个区域的数据。Lindorm(main):019:0>scan '...
简介
您可以通过本文档提供的简单的REST接口，在任何时间、任何地点、任何互联网设备上进行上传和下载数据。基于OSS，您可以搭建出各种多媒体分享网站、网盘、个人和企业数据备份等基于大规模数据的服务。使用限制 您使用的OSS资源和相关功能，...
产品概述
全密态数据库采用机密计算能力，使得数据在用户侧（客户端）加密后，在非受信的服务器端 全程只需要以密文形式存在，但是仍然支持所有的数据库事务、查询、分析等操作。避免云平台软件、管理人员（如DBA）、以及其他非授权人员接触到明文...
数据源管理常见问题
CSV文件上传完成后，您可以在画布编辑器添加组件，以 基本折线图 组件为例，选中组件，在组件右侧的 数据 面板中的 设置数据源 模块，单击 数据源类型，选择已经配置好的CSV文件，选择已有数据源 处将选择CSV进行配置。说明 X轴需要在 配置...
SPL概述
支持如下2种参数类别：键值参数-option=<option>：使用指令时以键值对的形式输入。开关参数-option：指令定义中默认均为关闭状态，添加该参数即表示打开开关。expression 指令对数据源执行处理逻辑，必填。使用时，无需指定参数名，但参数...
资产全景
资产全景介绍 资产全景页面仅为您展示生产环境中的元数据及加工所得的应用数据，包括以下三种模式：全局模式：以星球形式为您展示存储数据量大于0的业务板块及其概要信息。流动模式：展示数据的流入、整合与输出过程，更直观的体现数据加工...
- 产品推荐
- 这些文档可能帮助您