使用全局临时表
当一个会话退出时，会清空该会话中全局临时表中的数据和底层存储。支持全局临时表和其他表进行join，也支持在全局临时表上创建索引（当前版本仅支持创建btree索引）和全局临时表上的索引扫描。同时，全局临时表在表上和列上的统计信息也是...
使用全局临时表
当一个会话退出时，会清空该会话中全局临时表中的数据和底层存储。支持全局临时表和其他表进行join，也支持在全局临时表上创建索引（当前版本仅支持创建btree索引）和全局临时表上的索引扫描。同时，全局临时表在表上和列上的统计信息也是...
sample-txc-mt-compensate-simple 样例
例如对于 Orders 表需要创建对应的临时表 temp_orders，Stock 表需要创建临时表 temp_stock，临时表必须包含 xid 和 branchid 两个字段。下面以库存服务为例进行说明。在一阶段，即 rollout 方法中首先将相关业务数据商品 ID（pid）和商品...
CREATE TABLE AS
用一个预备语句创建一个新的临时表 films_recent，它仅由表 films 中最近的项组成，使用准备好的声明。新表将在提交时被丢弃：PREPARE recentfilms(date)AS SELECT*FROM films WHERE date_prod>$1;CREATE TEMP TABLE films_recent ON ...
离线数据存储概述
应用场景 除了查看数据外，数据存储中的存储表，可应用于以下功能。作为查询对象，应用于 SQL分析。作为数据来源应用于以下功能。数据可视化 数据API 平台系统表 您可以在平台系统表，以表格的形式，存储产品、设备、设备分组的基本信息，...
创建和管理自定义存储表
事务表：适用于自定义主键，数据按照主键粒度通过行级别更新和覆盖的表，类似于MySQL之类关系型数据库中的表。重要 该表最多支持存储3000万行的数据，超过3000万行的数据将无法写入。时序表：适用于存储随着时间不断追加的数据，例如设备...
ODS层设计规范
ODS ETL过程临时表 按天分区 最多保留最近7天分区。DBSync非去重数据 按天分区 由应用通过中间层保留历史数据，默认ODS层不保留历史数据。数据质量规范 每个ODS全量表必须配置唯一性字段标识。每个ODS全量表必须有注释。每个ODS全量表必须...
CREATE TABLE
临时表和普通表的区别在于数据的管理上，临时表存储事务或会话的中间结果集，并且临时表中保存的数据只对当前会话可见，所有会话都看不到其他会话的数据，即使其他会话完成提交，也看不到数据。临时表不存在并发行为，对于当前会话都是独立...
功能特性
删除DBFS 删除数据库文件存储并停止计费 删除DBFS 修改DBFS实例规格 在使用数据库文件存储的过程中根据业务存储性能的要求，调整数据库文件存储的实例规格，实例规格越高，消耗的CPU和内存资源越多 实例规格说明 修改DBFS使用场景 在使用...
管理离线数据归档
时序/快照表中 的 产品属性时序表、产品事件表 自定义存储表 中的 分区表、时序表 数据归档存储成功后，在分析洞察的SQL数据服务工作台，无法再查询到对应的归档数据进行分析。如果需要在分析洞察中对已归档的数据进行查询和分析，可以撤销...
迁移工具
将MySQL数据同步迁移到表格存储 将HBase数据同步到表格存储 将MaxCompute数据同步到表格存储 将表格存储数据同步到MaxCompute 将表格存储数据同步迁移到OSS 将表格存储数据表中数据同步到另一个数据表 将表格存储时序表中数据同步到另一个...
管理平台系统表和时序/快照表
设备表：存储了已备份实例的设备元信息，包括所属产品的设备唯一标识符IotId、激活时间、状态、物理地址、设备类型等。设备分组表：存储了已备份实例的设备分组信息，包括分组类型、分组名称、描述等。设备分组关系表：存储了设备和分组的...
表格存储中表、行、列、值和电子表格的类比
表格存储中的表存储着用户的结构化数据。用户可以在表中查询、插入、修改和删除数据。一个用户可以拥有多个表。数据在表中以行、列、值的形式来组织。上图展示了表格存储中表及其它概念与电子表格的类比：表：类似电子表格中底端的标签，...
CREATE TABLE
CREATE TABLE 用于在当前数据库中创建一个新的、初始为空的表。简介 CREATE TABLE 将在当前数据库中创建一个新的、初始为空的表。该表将由发出该命令的用户所拥有。如果给定了一个模式名（例如 CREATE TABLE myschema.mytable.），那么该表...
环境准备
使用Flink访问表格存储中的表前，您需要开通实时计算Flink服务并创建Flink全托管实例以及开通表格存储Tablestore服务并创建Tablestore实例。背景信息 阿里云实时计算Flink版是一套基于Apache Flink构建的⼀站式实时大数据分析平台，提供...
表操作篇
表格存储会对表中的行按主键进行排序，合理设计主键可以让数据在分区上的分布更加均匀，从而能够充分地利用表格存储水平扩展的特点。选取分区键时，建议遵循以下几个原则：单个分区键值中的数据不宜过大，建议不超过 10 GB。说明 单个分区...
数据导出到OSS概述
表格存储 中的全量数据以及增量数据可以通过DataWorks数据集成同步到 对象存储 中备份和使用。实现原理 DataWorks数据集成的离线同步功能将不同数据源的同步抽象为从来源数据源读取数据的Reader插件以及向目标数据源写入数据的Writer插件，...
环境准备
使用Hive/HadoopMR来访问表格存储中的表前，您需要完成JDK、Hadoop环境、Hive环境、表格存储Java SDK和阿里云EMR SDK的安装。使用Hive/HadoopMR来访问表格存储中的表 通过 表格存储 及 E-MapReduce 官方团队发布的依赖包，可以直接使用Hive...
Quick BI如何获取上传文件的临时表信息
概述 本文主要讲述了获取上传文件的临时表信息的具体操作方法。问题描述 在本地上传Excel文件后，会在数据库生成一张临时表，如何能获取到这张临时表的表名？解决方案 1，完成Excel表的上传，并创建数据集。2，在 数据集 中找到临时表的...
RDS MySQL存储过程的创建和查看
本文介绍了如何在RDS MySQL中创建存储过程，提供了示例代码，并提供了两种方法来查看数据库中的存储过程，包括通过系统表查询和通过show status查询。创建存储过程 可以通过DMS或MySQL客户端登录到RDS，创建存储过程。示例代码如下：DROP ...
卸载并释放CDH6 HDFS服务使用的云盘
背景信息 当CDH已经成功运行在阿里云 文件存储 HDFS 版 上时，ECS挂载的云盘只用来存储运算中的临时Shuffle文件，可以选择卸载原来用于构建CDH HDFS服务的云盘，降低集群的拥有成本。重要 从数据安全性考虑，数据迁移后建议进行数据完整性...
SQL查询计量计费
注意事项 SQL本身不会有额外的费用，但是使用SQL查询数据过程中涉及到的表扫描、索引查询等操作会产生费用。使用SQL查询数据的过程中只会产生读吞吐量消耗。如果数据表与索引已配置了预留读吞吐量，则只有使用SQL查询所产生的读吞吐量超出...
卸载并释放E-MapReduce HDFS使用的云盘
背景信息 当E-MapReduce已经成功运行在阿里云 文件存储 HDFS 版 上时，ECS挂载的云盘只用来存储运算中的临时Shuffle文件，可以选择卸载原来用于构建E-MapReduce HDFS服务的云盘，降低集群的拥有成本。重要 从数据安全性考虑，数据迁移后...
计算与分析概述
Flink 宽表模型 时序模型 使用Flink 通过实时计算Flink访问 表格存储 中的源表、维表或者结果表，实现大数据实时计算与分析。目前数据表支持作为源表、维表或者结果表，时序表只支持作为结果表。Presto 宽表模型 通过PrestoDB使用...
DBMS_UTILITY
DBMS_UTILITY包支持以下各种实用程序：函数/存储过程 类型 返回类型 说明 ANALYZE_DATABASE(method[,estimate_rows[,estimate_percent[,method_opt]]])存储过程 N/A 分析数据库表。ANALYZE_PART_OBJECT(schema,object_name[,object_type[,...
数据集成服务
表 MaxCompute中的表名称。分区信息 读取的数据所在的分区信息。在 配置数据来源与去向 区域，根据下表说明配置数据去向。参数 说明 表 表格存储 中的数据表名称。主键信息 表格存储数据表的主键信息，以JSON格式的数组表示。数据表的主键...
什么是表格存储
表格存储（Tablestore）面向海量结构化数据提供Serverless表存储服务，同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、...
表格存储建表注意事项
表格存储支持半结构化的表，即建表时只需要指定主键列（1至4列），不需要在创建表的时候指定属性列。表格存储表中包含的属性列个数无限制，且每一行数据可以拥有不同数量不同类型的属性列。在应用程序写入数据时，表格存储需要应用程序指定...
其他命名规范
临时表命名规范 不同场景下临时表命名规范不同：测试、数据探查、临时取数等场景下产生的临时表命名规范为：{project_name}.tmp{工号/操作人名标识}{产出表表名}_{n}。脚本内临时表命名规范：{project_name}.tmp{产出表表名}{n}。下线表...
按Key闪回
创建临时表 用于存储闪回数据的临时表。选择要恢复的时间点 选择需要闪回到的备份时间点。填写要恢复的key 多个主键之间需要使用分号;分隔。例如，索引为_id，需要恢复的值为key1和key2，那么您需要在输入框中输入 key1;key2，下方的 恢复...
操作指南FAQ
本文介绍使用云存储网关过程中的常见问题。云上部署FAQ 创建网关时找不到可用交换机如何处理？云存储网关升级失败了该如何处理？本地部署FAQ 如何检测网关网络的联通性？如何在本地数据中心部署云存储网关？云存储网关升级失败了该如何处理...
使用教程（宽表模型）
步骤二：编写作业代码 创建一个源表和结果表的临时表。说明 在生产作业中，建议您尽量减少临时表的使用，直接使用元数据管理中已经注册的表。创建一个tablestore_stream和ots_sink临时表代码示例如下：CREATE TEMPORARY TABLE tablestore_...
CREATE PROCEDURE
示例 以下存储过程列出了 emp 表中的员工：CREATE OR REPLACE PROCEDURE list_emp IS v_empno NUMBER(4);v_ename VARCHAR2(10);CURSOR emp_cur IS SELECT empno,ename FROM emp ORDER BY empno;BEGIN OPEN emp_cur;DBMS_OUTPUT.PUT_LINE('...
概述
您可以根据业务需求使用DataX、DTS或者canal工具将MySQL数据库中的数据同步迁移到表格存储（Tablestore）中。使用场景 数据架构变化 随着业务的变化，如果现有业务对数据库并发读写需求、扩展性和可用性需求较高，或需要复杂的检索，原有...
准备工作
说明 在表格存储中通过控制台或者SDK创建存储电商数据的原始订单表OrderSource，OrderSource表有两个主键UserId（用户ID）和OrderId（订单ID）和两个属性列price（价格）和timestamp（订单时间）。DataV数据可视化 登录DataV的用户名和密码...
审计日志概述
通过审计日志功能，您可以查询与分析 表格存储 实例中的表、索引相关操作的日志。背景信息 日志服务 SLS（Simple Log Service）是云原生观测与分析平台，为Log、Metric、Trace等数据提供大规模、低成本、实时的平台化服务。更多信息，请...
数据可视化工具
DataV可用于展示表格存储数据表或者二级索引表中的数据，一般用于构建复杂的大数据处理分析展现的企业应用系统。对接DataV Grafana Grafana是一款开源的可视化和分析平台，支持Prometheus、Graphite、OpenTSDB、InfluxDB、Elasticsearch、...
方案实现
创建流计算的Sink外表order_stream_sink（对应表格存储中的OrderStreamSink表）。执行实时流计算SQL命令进行实时聚合，实时得到聚合结果，并将聚合结果实时写回表格存储的OrderStreamSink表中。Sink表的各参数含义和Source表一致，其中...
将表格存储的增量数据转换为全量数据格式
其中 function_name 为 步骤二：新建并注册函数 中的函数名称，para_list 为 附录：模式选择 中的参数列表，custom_para_list 为自定义参数列表，stream_table_name为增量表的名称，primary_keys 为 表格存储 数据表的主键列表，SequenceID...
流计算
通过在E-MapReduce集群中使用Spark SQL访问表格存储。对于流计算，基于通道服务，利用CDC（数据变更捕获）技术完成Spark的mini batch流式消费和计算，同时提供了at-least-once一致性语义。前提条件 已创建 EMR 集群。具体操作，请参见 EMR...
- 产品推荐
- 这些文档可能帮助您