环境准备
通过为数据表建立数据通道，您可以通过流式计算的方式对表中历史存量和新增数据进行消费处理。使用实时计算Flink服务 首次使用实时计算Flink时，请根据如下步骤开通实时计算Flink服务以及创建Flink全托管实例。开通实时计算Flink服务。具体...
INTERVAL RANGE简介
如果您尝试为2021年12月10日插入数据，那么将创建2021年9月15日至12月15日所需的3个分区，并将数据插入该分区。使用限制 INTERVAL RANGE分区使用COLUMNS只能指定单个分区键，该键必须是数字或日期范围。必须定义至少一个RANGE分区。...
何时选择间隔（Interval）分区
如果您尝试为2021年12月10日插入数据，那么将创建2021年9月15日至12月15日所需的3个分区，并将数据插入该分区。下列情况下建议您使用间隔分区：数据按时间维度维护。维护滚动的数据窗口。不希望手动运维增加新的分区。以下示例将 orde_time...
计费常见问题
据统计分析，大部分用户文件系统中80%的数据均为冷数据，按80/20定律进行成本估算，使用低频存储后，原性能型NAS文件系统的有效存储成本可降低至0.49元/月/GiB，原容量型NAS文件系统的有效存储成本可降低至0.19元/GiB/月。购买了资源包什么...
数据总览
存储趋势图 为当前租户本地域下，MaxCompute项目的逻辑存储总和趋势图，此数据包含调度任务的临时文件、删除表后尚未释放的存储空间。此数据为离线统计，有T+1的延迟。项目占用存储Top 为您展示当前租户本地域下，MaxCompute项目的逻辑存储...
概述
高性能版（推荐使用）：基于基础版Spark全密态引擎提供的数据加密能力，高性能版的Spark全密态计算引擎结合Gluten和Velox，提供了向量化计算的能力，在保证数据传输与存储过程安全的同时，提升了数据处理效率。基础版和高性能版Spark全密态...
使用DMS进行数据归档
说明 如果您需要使用时间变量，例如，归档6个月前的数据，可以先进行 变量配置。归档表映射 否 您可以单击表名操作列下的 编辑，编辑源表归档到目标库后的表名、列信息、分库键和分区键。变量配置 否 配置时间变量，请参见 配置时间变量。...
概述
同一份数据以不同的格式保存，数据所占用的存储空间不同，使用DLA扫描数据时所花费的时间和费用也不同。通常情况下，同一份数据以ORC格式和PARQUET格式存储时，其数据扫描性能要优于普通文本CSV格式。因此，您可以将文本类型的数据转换为...
功能特性
用于对文件系统的数据进行备份 创建快照 DBFS策略快照 自动快照策略可以为数据库文件存储周期性地创建快照备份数据，合理利用自动快照能提高数据安全和操作容错率 自动快照概述 快照创建DBFS 基于快照克隆出与快照状态一致的数据库文件存储...
车联网数据存储处理方案
根据对车联网的业务特征的分析给出了为什么Lindorm作为一个数据存储为什么是车联网业务的合适选择。方案总览 Lindorm是一款适用于任何规模、多种模型的云原生数据库服务，支持海量数据的低成本存储处理和弹性按需付费，提供宽表、时序、...
审计配置
管理存储空间 查看并管理存储容量 购买数据安全中心企业版后，数据安全中心默认为每个数据库实例提供200 GB日志存储空间，为每TB的OSS存储容量提供50 GB日志存储空间。您可以在 数据安全中心控制台 安全审计>审计配置 页面的 存储管理 页签...
CREATE CQ
每当流表中有数据插入，如果符合预设的查询条件，则可以将该数据存储下来，作为实时计算的数据来源。本文介绍如何通过DML语句创建持续查询。语法 CREATE CQ cq_name INSERT INTO[catalog_name.][db_name.]table_name[column_list]select_...
产品功能
高效压缩存储 TSDB 使用高效的数据压缩技术，将单个数据点的平均使用存储空间降为1~2个字节，可以降低90%存储使用空间，同时加快数据写入的速度。时序数据计算能力 TSDB 提供专业全面的时序数据计算函数，支持降采样、数据插值和空间聚合...
什么是OSS-HDFS服务
OSS-HDFS服务（JindoFS服务）是一个云原生数据湖存储功能。基于统一的元数据管理能力，完全兼容HDFS文件系统接口，满足大数据和AI等领域的数据湖计算场景。注意事项 警告 当您为某个Bucket开通OSS-HDFS服务后，通过该服务写入的数据将保留...
数据归档至AnalyticDB PostgreSQL版
说明 如果您需要使用时间变量，例如，归档6个月前的数据，可以先进行 变量配置。归档表映射 否 您可以单击表名操作列下的 编辑，编辑源表归档到目标库后的表名、列信息、分库键和分区键。变量配置 否 配置时间变量，请参见 配置时间变量。...
时序模型介绍
每行代表一个时间线在某个时间点的数据，该行的主键部分为时间线标识和时间戳，该行的数据列部分为该时间线在该时间戳下的数据点，可以有多个数据列。主键结构和数据列的结构无须用户进行预先定义，用户仅需要在写入时指定数据列的列名即可...
数据存储
根据采集到的不同数据类型，AnalyticDB采用不同的后台存储系统来进行监控数据的存储。时序数据存储 时序数据库对时序数据的写入、聚合以及检索都做了特定优化，AnalyticDB采集到的时序数据主要存在时序数据库中。目前每个AnalyticDB实例有...
概述
Federated表结构如下：当在本地 PolarDB MySQL版 集群的Federated表上执行SQL时，通常会从本地 PolarDB MySQL版 集群插入数据文件，更新或删除数据文件的操作被发送到远程 PolarDB MySQL版 集群或社区MySQL服务器执行，在远程集群或服务器...
如何选择备份方式
逻辑备份与物理备份的区别 参照项 逻辑备份 物理备份 概念 数据库对象级备份，备份内容是表、索引、存储过程等数据库对象，常见工具为MySQL mysqldump、Oracle exp/imp等。数据库文件级备份，备份内容是操作系统上数据库文件，常见工具为...
数据服务系统配置
运维监控统计数据可帮助您查看最近...例如当天日期为2023-04-30，配置了统计数据存储周期最近为30天，且单次查询跨度小于等于7天，即可选择的日期为2023-03-31至2023-04-30且单次最多查询7天的数据，即开始时间和结束时间的长度不能大于7天。
写入时序数据
数据源 产生时间线的数据源标识，可以为空。标签 时间线的标签信息。您可以自定义多个字符串类型的key-value对。属性 时间线的属性列，用于记录该时间线的一些属性信息。单击 确定。插入数据。单击 插入数据。在 插入数据 对话框，设置时间...
导出、分享和下载电子表格
新建MaxCompute表并插入数据 如果您选择的插入模式为 新建MaxCompute表并插入数据，请新建MaxCompute表，并粘贴已复制的SQL语句。详情请参见 创建并使用MaxCompute表。分别单击 提交到开发环境 和 提交到生产环境。如果您使用的是简单模式...
冷热数据分层存储
当热数据存储量达到业务使用阈值时，自动将当前热数据盘中占用空间最大的part数据文件移动到冷数据盘存储，从而释放热数据盘存储空间。TTL存储策略 在默认存储策略基础上，添加TTL语句，实现将间隔时间之前的所有数据自动转移到冷数据盘中...
常见问题
DAS企业版 V3超出最近7天的数据，采用的存储方式是冷数据存储，相较DAS企业版 V1数据的存储方式，数据没有全文索引等信息，并且底层采用snappy对数据进行高效压缩，所以数据量最多可降低为旧版的30%，从而极大降低了存储成本。如何查看企业...
备份集下载功能概览
数据库备份DBS 为云数据库、ECS自建数据库提供灵活的备份与恢复功能，同时也支持将云上备份集下载到本地，进一步增强数据的安全性。您可通过手动或自动模式进行数据下载，下载的备份集可用于恢复到本地数据库、Excel分析与审计、备份到本地...
业务过程
创建业务过程 DataWorks的数据建模已为您创建好一个默认的业务过程（英文名为 default，中文名称为 默认），如果您的业务比较简单，无需明细多个业务过程，那您无需再创建新的业务过程，在后续建模配置过程中，直接使用此默认业务过程即可...
查看结果
本文档为您介绍验证数据同步结果的方法。在源数据表（mytable）中插入三行数据，验证数据同步结果。可以看到，在源表中插入三条数据后，销售目标达成率由原来的2%变成了5%。使用同样的方式，配置其他组件的数据。配置完成后，参考 发布可视...
新建函数
存储过程可有 0 个或多个返回，适合做批量插入、批量更新。可以直接通过 SELECT 语句调用函数，而存储过程的调用需要使用 CALL 语句。如上图所示，创建函数包含以下 6 个步骤：1.输入函数名称。2.选择函数返回值的数据类型。3.添加参数。4....
数据集成服务
且需要使用复杂的检索或大数据分析时，如果原有数据库的数据架构不能满足现在的业务需求或改造成本较大，则您可以通过DataWorks数据集成服务将现有数据库中的数据迁移到Tablestore表中存储和使用。您还可以通过DataWorks数据集成服务实现...
HBase Shell使用介绍
通过Shell工具可以对云数据库HBase进行数据管理，包括建表、插入数据、删除数据和删除表等操作，本文介绍Shell的基本使用命令。访问配置 如果使用的是云数据库HBase标准版，基本环境的配置操作请参见 使用HBase Shell访问HBase标准版。如果...
分析业务过程
为梳理数据之间的逻辑关系和流向，需要理解用户的业务过程及数据系统。您可以采用过程分析法，列出整个业务过程涉及的每个环节，包括技术、数据、系统环境等。分析完企业的工作职责范围（部门）后，借助工具通过逆向工程抽取业务系统的真实...
生命周期管理介绍
功能说明 您可以通过生命周期管理对数据湖中的数据库、数据表配置数据管理规则，可以基于数据最后访问时间、分区值、分区/表最后修改时间、分区/表创建时间四种规则类型，对数据定期进行存储类型转换，从而节省数据存储成本。同时，可以...
管理Logstore
按需配置热存储数据保存时间，并选择后续 自动转换 为 低频存储 时，数据保存超出配置的保存时间后，将自动转入低频存储层。若配置低频存储时间后选择 自动删除，则数据保存在低频存储层超出配置的保存时间后将自动删除。按需配置热存储...
INTERVAL RANGE分区
如果您尝试为2019年5月10日插入数据，那么将创建2019年4月15日至5月15日所需的分区，并将数据插入该分区。将跳过2019年2月15日至2019年3月15日和2019年3月15日至2019年4月15日的分区。使用限制 INTERVAL RANGE分区限制为单个分区键；该键...
商品属性提取和多模搜索
插入数据 应用端通过以下步骤向商品库中插入数据。应用端调用OSS服务，将图片插入OSS，获得对应的URL。说明 当前只支持HTTP和HTTPS协议的URL。应用端调用特征提取服务，获得图片抽象后的特征向量。应用端调用分析型数据库MySQL版服务将步骤...
管理EventStore
按需配置热存储数据保存时间，并选择后续 自动转换 为 低频存储 时，数据保存超出配置的保存时间后，将自动转入低频存储层。若配置低频存储时间后选择 自动删除，则数据保存在低频存储层超出配置的保存时间后将自动删除。按需配置热存储...
逻辑备份、物理备份与快照
常用的数据备份方式为逻辑备份、物理备份与快照：逻辑备份：数据库对象级备份，备份内容是表、索引、存储过程等数据库对象，常见工具为MySQL mysqldump、Oracle exp/imp等。物理备份：数据库文件级备份，备份内容是操作系统上数据库文件，...
数据模型架构规范
数据处理流程架构 数据划分及命名空间约定 请根据业务划分数据并约定命名，建议针对业务名称结合数据层次约定相关命名的英文缩写，这样可以给后续数据开发过程中，对项目空间、表、字段等命名做为重要参照。按业务划分：命名时按主要的业务...
按扫描量付费
如何节省费用 您可以先通过以下3种方式对原始数据进行处理，然后再使用DLA扫描数据，可以节省一定的费用。格式转换：把原始数据的格式转换为高性能格式。DLA支持多种高性能数据格式，例如Apache ORC、Apache Parquet、Avro格式。您可以根据...
表格存储
消息数据 表格存储自研的Timeline模型主要用于消息数据，能够抽象出支撑海量Topic的轻量级消息队列，可以存储大量社交信息，包括IM聊天，以及评论、跟帖和点赞等Feed流信息。目前表格存储Timeline模型已被应用在众多IM系统中，例如支撑钉钉...
- 产品推荐
- 这些文档可能帮助您