DML操作
目录 插入单条数据 插入多条数据 单值分区表插入数据 修改数据-单条数据 修改数据-用查询结果批量修改 说明 若您需对Dataphin中逻辑表进行DML操作，请参见 逻辑表DML操作。插入单条数据 INSERT INTO<table_name>VALUES(value1,value2,value...
产品优势
表格存储 可支持不少于10 PB数据存储量，单表可支持不少于1 PB数据存储量或1万亿条记录。高可靠 表格存储 将数据的多个备份存储在不同机架的不同机器上，并会在备份失效时进行快速恢复，提供99.999999999%（11个9）的可靠性。数据一致性强 ...
查询机制
INSERT 当您使用INSERT插入一条数据时，具体过程如下：从数据文件中读取一个数据块到内存中，并将这行数据写入这个数据块，系统生成一条INSERT的WAL日志。当执行COMMIT命令后，系统会产生一条COMMIT的WAL日志。INSERT WAL日志和COMMIT WAL...
数据集成服务
数据导入的迁移方案包括同步MySQL数据到表格存储、同步Oracle数据到表格存储、同步Kafka数据到表格存储、同步HBase数据到表格存储、同步MaxCompute数据到表格存储、同步表格存储数据表中数据到另一个数据表和同步表格存储时序表中数据到另...
表格存储
表格存储可支持不少于10 PB数据存储量，单表可支持不少于1 PB数据存储量或1万亿条记录。安全性 表格存储提供表级别和API级别的鉴权和授权机制，支持STS临时授权和自定义权限认证及主子账号功能，实现用户级别资源隔离。详情请参见 RAM 和 ...
常见问题
表格存储 可支持不少于10 PB数据存储量，单表可支持不少于1 PB数据存储量或1万亿条记录。高可靠 表格存储 将数据的多个备份存储在不同机架的不同机器上，并会在备份失效时进行快速恢复，提供99.999999999%（11个9）的可靠性。数据一致性强 ...
按时间戳冷热分离
优先查询热存储中的数据，若热存储中的数据查完了，用户仍然在调用获取下一条数据，则会开始查询冷数据。false：否。不开启优先查询热数据功能。方式二：HBase Java API scan=new Scan();scan.setAttribute(AliHBaseConstants.COLD_HOT_...
新建存储过程
概述 存储过程是一条或多条语句的集合，对数据库进行一系列复杂操作时，存储过程可以在数据库内将这类复杂操作封装成一个代码块，以便重复使用，从而减少数据库开发人员的工作量。存储过程旨在完成特定功能的 SQL 语句集，经编译创建并保存...
查看集群日报与分析
每条数据包含以下信息。参数 说明 任务名 任务的名称。引擎类型 任务的引擎类型。SQL语句 仅SQL类才有。APP IDS 对于Hive on MR，一个语句可能有多个APP ID。用户名 提交任务的用户。评分 任务得分。健康状态 标记任务是否需要治理。建议 ...
物联网存储介绍
基于物联网场景中多源异构数据存储、高并发吞吐、海量数据高性价比存储、多维度数据处理与分析等需求，表格存储推出了一站式物联网存储IoTstore解决方案，为物联网设备元数据、消息数据、时序轨迹等海量数据提供存储、查询、检索、分析、...
归档为IBD格式
调用存储过程，向表 toss1 中插入数据。CALL populate(5000);执行如下命令，将数据归档至OSS。ALTER TABLE `toss1` STORAGE_TYPE OSS;查询 toss1 表中的数据。SELECT COUNT(*)FROM `toss1`;执行如下命令，删除OSS上的 toss1 表。DROP TABLE...
测试数据构建
操作步骤 本示例通过测试数据构建功能在 big_table 表中批量生成100万条测试数据。登录 数据管理DMS 5.0。在顶部菜单栏中，选择 数据库开发>环境构建>测试数据构建。说明 若您使用的是极简模式的控制台，请单击控制台左上角的 图标，选择 ...
搭建订单系统
说明 控制台 项目样例 中插入了1亿条数据，您可以通过控制台插入少量测试数据。步骤四：读取数据 数据读取分为两类：主键读取 基于原生表格存储的主键列获取，例如getRow、getRange、batchGetRow等。主键读取用于索引（自动）反查，用户也...
验证数据压缩能力
概念介绍 存储过程是一条或多条语句的集合，对数据库进行一系列复杂操作时，存储过程可以在数据库内将这类复杂操作封装成一个代码块，以便重复使用，从而减少数据库开发人员的工作量。存储过程旨在完成特定功能的 SQL 语句集，经编译创建并...
方案实现
步骤三：导入数据 控制台 项目样例 中插入了1亿条数据，您可以通过控制台插入少量测试数据。步骤四：读取数据 数据读取包括如下两种方式：主键读取 通过getRow,getRange,batchGetRow等接口基于原生表格存储的主键列读取数据。主键读取用于...
数据集成概述
单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。例如，源端是VARCHAR类型的数据写到INT类型的目标列中，导致因为转换不合理而无法写入的数据。您可以在同步任务配置时，控制同步...
计费方式
11,000条SQL/秒 150 Mbps数据库流量峰值 4亿条在线SQL语句存储 默认1 TB存储空间 默认150 MB带宽 实例数与存储支持弹性扩容 10~19个数据库实例 吞吐量峰值：12,000条SQL/秒 350 Mbps数据库流量峰值 6亿条在线SQL语句存储 默认1.5 TB存储...
Iceberg概述
对比项 子项目 开源Clickhouse实时数仓 开源Hive离线数仓 阿里云Iceberg数据湖 系统架构 架构 计算存储一体 计算存储分离 计算存储分离 多计算引擎支持 不支持 支持 支持 数据存储在对象存储 不支持 支持不完善 支持 数据存储在HDFS 不支持...
离线同步能力说明
单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。例如，源端是VARCHAR类型的数据写到INT类型的目标列中，导致因为转换不合理而无法写入的数据。您可以在同步任务配置时，控制同步...
图扑案例
建设效果 目前图扑软件联合阿里云端支撑泛在电力物联网及智能楼宇行业客户实现终端设备传感器云端数据采集、存储、检索，实现并发量100万TPS以上的传感器采集数据的并发写入，最高存储时序时间线40万能力，节约数据存储和系统维护成本达6成...
创建同步任务
单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。例如，源端是VARCHAR类型的数据写到INT类型的目标列中，则会因为转换不合理导致脏数据不会成功写入目的端。您可以在同步任务配置...
通过向导模式配置离线同步任务
单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。例如，源端是VARCHAR类型的数据写到INT类型的目标列中，则会因为转换不合理导致脏数据不会成功写入目的端。您可以在同步任务配置...
存储过程
存储过程（SQL stored procedures），通常指数据库中存放在一起的一系列SQL。您在使用存储过程时，可以指定存储过程的名字并使用参数（parameters），并在合适的时候调用存储过程实现相同或者不同的业务。本文将介绍存储过程的使用方法。...
通过脚本模式配置离线同步任务
单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。例如，源端是VARCHAR类型的数据写到INT类型的目标列中，则会因为转换不合理导致脏数据不会成功写入目的端。您可以在同步任务配置...
二级分区表（2.0版）
如果二级分区过少，会降低用户导入数据的频率，从而影响数据的实时性，所以需要合理选择二级分区数：单表二级分区数小于等于90，每个一级分区下的二级分区包含的数据条数在300万到2000万之间。如果单个分区每日增量数据超过300万，则推荐按...
管理存储过程
概述 在 OceanBase 开发者中心（OceanBase Developer Center，ODC）首页单击连接名进入连接后，在左导航栏中单击 存储过程 标签可查看存储过程列表，在存储过程列表中显示当前连接的数据库中存在的存储过程对象。在存储过程列表中，可查看...
升级步骤
如果关闭存储热备集群，则仅保留主集群（3副本数据），存储单价是开启存储热备集群单价的1/2。集群的SLA也会降低。备可用区 目标集群的备可用区。子系列 选择目标集群的子系列。企业版支持 通用规格 和 独享规格 两种子系列：独享规格：每...
参考：渐进式计算
可以看出，第n+1天执行过程中有6天的数据是被重复计算的。如下图所示：渐进式计算方式：第n（n>=7）天执行需要处理[n-6,n]区间的数据；第n+1天执行需要处理[n,n+1]区间的数据。即第n+1天执行只需要处理当天的增量数据，再和之前6天计算好的...
管理从集群
如果关闭存储热备集群，则仅保留主集群（3副本数据），存储单价是开启存储热备集群单价的1/2。集群的SLA也会降低。筛选 选择集群计算节点规格。说明 关于计算节点规格的详情，请参见 企业版计算节点规格。仅当 计费类型 为 包年包月 或 ...
JindoFS实战演示
如何将HDFS海量文件归档到OSS 如何将HDFS海量文件归档到OSS 2021-05-18 如果您的数据存储在HDFS集群内，随着业务的发展，数据不断增长，可能导致存储空间不足、存储成本不断上升等问题，此时您可以将访问频率较低的HDFS数据归档到OSS中。...
功能特性
数据库文件存储 功能集 功能 功能描述 参考文档 DBFS特性 原子写 支持DIRECT IO的原子写，需按4K，8K，16K对齐-共享读写 一份数据可共享式多点挂载并进行读写，读写可线性扩展-存储加密 通过对数据库文件存储实施加密，可以确保数据库文件...
新建函数
函数是一种与存储过程十分相似的过程式数据库对象。与存储过程一样，都是由 SQL 语句和过程式语句组成的代码片段，并且可以被应用程序和其他 SQL 语句调用。自定义函数与存储过程的区别：函数有且仅有一个返回，适合做处理数据后返回一个...
DROP PROCEDURE
PolarDB PostgreSQL版（兼容Oracle）允许重载存储过程名称，因此在 PolarDB PostgreSQL版（兼容Oracle）中，重载存储过程的 DROP PROCEDURE 命令需要使用输入参数数据类型给定的存储过程特征。使用 IFEXISTS、CASCADE 或 RESTRICT 与 ...
DBMS_LOB
表 1.DBMS_LOB函数/存储过程 函数/存储过程 类型 返回类型 描述 APPEND(dest_lob IN OUT,src_lob)存储过程 N/A 将一个大对象附加在另外一个大对象上。COMPARE(lob_1,lob_2[,amount[,offset_1[,offset_2]]])函数 INTEGER 在给定的长度和偏移...
配置ClickHouse输出组件
同步其他数据源的数据至ClickHouse数据源的场景中，完成源数据的信息配置后，需要配置ClickHouse输出组件写入数据的目标数据源。本文为您介绍如何配置ClickHouse输出组件。前提条件 在开始执行操作前，请确认您已完成ClickHouse数据源及...
配置ClickHouse输出组件
同步其他数据源的数据至ClickHouse数据源的场景中，完成源数据的信息配置后，需要配置ClickHouse输出组件写入数据的目标数据源。本文为您介绍如何配置ClickHouse输出组件。前提条件 在开始执行操作前，请确认您已完成ClickHouse数据源及...
DBMS_PROFILER
表 1.DBMS_PROFILER函数/存储过程 函数/存储过程 类型 返回类型 描述 FLUSH_DATA 函数、存储过程 Status code、exception 刷新当前会话中收集的性能数据。GET_VERSION(major OUT,minor OUT)存储过程 N/A 返回 DBMS_PROFILER 版本信息。...
账号权限列表
CREATE PROCEDURE 为用户创建任意存储过程的权限。CREATE SYNONYM 为用户创建同义词的权限。CREATE SEQUENCE 为用户创建序列的权限。CREATE TRIGGER 为用户创建触发器的权限。CREATE TYPE 创建类型的权限。CREATE SESSION 创建会话的权限。...
离线同步并发和限流之间的关系
脏数据限制能力用来控制任务在遇到脏数据时的行为，所谓脏数据是指数据条目在写入目标数据源过程中发生了异常，则此条数据被视为脏数据。由于各类异构系统对数据处理的复杂和差异性，目前策略是写入失败的数据均被归类于脏数据。在一些数据...
时序模型计量计费
使用时序模型时，时间线数据和时间线元数据会产生数据存储量。同时，对时间线数据和时间线元数据的读写操作会消耗读写吞吐量。本文介绍了时序模型的计费项以及计费示例。注意事项 时序模型中的分析存储功能将从2023年12月20日正式开始收费...
- 产品推荐
- 这些文档可能帮助您