对接DataV
注意 当表中存在多个主键列时，设置的主键列个数与数据类型必须和数据表的主键列个数与数据类型一致。columns 读取的列集合，列名可以是主键列或属性列。如果不设置返回的列名，则返回整行数据。当选择操作为getRange时，可读取指定主键...
文件存储 HDFS 版和数据库MySQL双向数据迁移
此处以迁移MySQL中的employee表为例，employee表中已写入如下数据。执行以下命令迁移数据。sqoop import-connect jdbc:mysql:/localhost:3306/sqoop_migrate-username 'userid'-password 'userPW'-table employee-target-dir/mysql2sqoop/...
将表格存储数据下载到本地文件
导出文件格式 操作方式 JSON 通过命令行工具直接下载 CSV 通过DataX工具直接下载 通过DataWorks工具同步数据到OSS后再下载 TEXT 通过DataWorks工具同步数据到OSS后再下载 通过命令行工具直接下载 通过命令行工具导出表中数据到本地JSON文件...
冷存储介绍
冷热分离功能可以自动将表中的热数据存储至读写速度更快的热存储中，将不常访问的历史数据存储至容量型云存储中，从而降低存储成本。如果您在业务上有冷热分离的需求，请参见 冷热分离介绍。开通容量型云存储 如何开通容量型云存储，请参见...
TableOptions
可以动态修改 } time_to_live:类型：int32 描述：本张表中保存的数据的存活时间，单位秒。max_versions:类型：int32 描述：本张表保留的最大版本数。deviation_cell_version_in_sec:类型：int64 描述：最大版本偏差。目的主要是为了禁止...
SDK数据接入
示例 创建test_timeseries_table时序表，且该表中数据永不过期。private static void createTimeseriesTable(TimeseriesClient client){ String tableName="test_timeseries_table;TimeseriesTableMeta timeseriesTableMeta=new ...
生命周期管理
注意事项 使用生命周期管理功能，必须禁用数据表的UpdateRow更新写入功能，避免一些语义上的问题：由于数据表TTL是属性列级别生效的，而多元索引TTL是整行生效的，如果存在UpdateRow写入操作，当系统清理数据表中数据时，数据表中部分字段...
SQL查询
SQL中的列名必须和原始表中的列名等效，例如原始表中列名为Aa，在SQL中列名必须使用Aa、AA、aA或者aa中的一个。data_type 列的数据类型，包含BIGINT、DOUBLE、BOOL等多种数据类型。SQL中列的数据类型必须和原始表中列的数据类型相匹配。...
使用canal同步
注意 目标数据表中主键列的个数、顺序和数据类型必须与源数据表中主键列的个数、顺序和数据类型相匹配。背景信息 canal基于MySQL数据库增量日志解析，提供增量数据订阅和消费，是阿里开源CDC工具，它可以获取MySQL binlog数据并解析，然后...
授权信息
操作 API 访问级别 资源类型 条件关键字 关联操作 暂无数据 资源（Resource）下表是 文件存储HDFS（DFS）定义的资源，这些资源可以在RAM权限策略语句的 Resource 元素中使用，用来授予对该资源执行具体操作的权限。其中，资源ARN是资源在...
创建数据表
使用本地二级索引时，表格存储以同步方式将数据表中被索引的列和主键列的数据自动同步到索引表中，当数据写入数据表后，即可从索引表中查询到数据。示例 创建数据表时不带索引 以下示例用于创建一个有2个主键列的数据表。该数据表中的数据...
更新时序表
参数 更多信息，请参见 创建时序表 中的参数。示例 以下示例用于更新指定时序表的TTL为3年。private static void updateTimeseriesTable(TimeseriesClient client){/填写时序表名称。String tableName=";UpdateTimeseriesTableRequest ...
创建数据投递任务后，为什么OSS中无投递数据
检查投递任务的Schema中列数和列类型是否与源表中的列数和列类型一致。具体操作如下：进入 实例详情 页签。登录 表格存储控制台。在 概览 页面，选择地域后，单击实例名称。查看投递任务的Schema配置。说明 您也可以调用...
数据表操作
create-t mytable-pk '[{"c":"uid","t":"string"},{"c":"pid","t":"integer"}]' 创建名称为mytable的数据表，该数据表有uid（string类型）和pid（integer类型）两个主键列并设置第二主键列pid（integer类型）为自增列，表中数据永不过期。...
使用函数计算
Tablestore Stream是用于获取Tablestore表中增量数据的一个数据通道，通过创建Tablestore触发器，能够实现Stream和函数计算的自动对接，让计算函数中自定义的程序逻辑自动处理Tablestore表中发生的数据修改。关于Tablestore触发器的更多...
生命周期管理
注意事项 使用生命周期管理功能，必须禁用数据表的UpdateRow更新写入功能，避免一些语义上的问题：由于数据表TTL是属性列级别生效的，而多元索引TTL是整行生效的，如果存在UpdateRow写入操作，当系统清理数据表中数据时，数据表中部分字段...
方案实现
步骤二：实时流计算 实时流计算将实时统计一个窗口周期时间内的订单数和订单金额统计，并将聚合结果写回表格存储的数据表中。创建流计算的Sink外表order_stream_sink（对应表格存储中的OrderStreamSink表）。执行实时流计算SQL命令进行实时...
使用Go语言驱动
} } 使用Prepare创建一个Stmt查询/设置SQL语句，此处以查询test_table表中pk1列、col1列和col2列的数据为例介绍，请根据实际需要设置。stmt,err:=db.Prepare("SELECT pk1,col1,col2 FROM test_table WHERE pk1=?if err!nil { panic(err)/...
存储费用
例如，您在09月07日06点以低频访问类型存储了10 TB数据，在09月08日06点通过自动或手动的方式将其中1 TB数据转换其他存储类型或者删除。此时，该计费项产生的计量数据为1 TB*（720-24）=696 TB。假设您购买 低频-本地冗余存储包 容量为10 ...
生命周期管理
注意事项 使用生命周期管理功能，必须禁用数据表的UpdateRow更新写入功能，避免一些语义上的问题：由于数据表TTL是属性列级别生效的，而多元索引TTL是整行生效的，如果存在UpdateRow写入操作，当系统清理数据表中数据时，数据表中部分字段...
创建多元索引
如果要存储和查询JSON格式数据，您可以在数据表中使用字符串方式存储JSON数据，然后通过多元索引中的数组和嵌套类型实现JSON数据的灵活查询。更多信息，请参见 数组和嵌套类型。如果应用中需要地理位置相关查询，您可以使用Geo-point字段...
JDBC连接表格存储
使用createStatement创建SQL语句/设置SQL语句，此处以查询test_table表中id列和name列的数据为例介绍，请根据实际需要设置。String sql="SELECT id,name FROM test_table;Statement stmt=conn.createStatement();ResultSet resultSet=stmt....
读写吞吐量
CU计算规则 1单位读服务能力单元表示从数据表中读一条4 KB数据。1单位写服务能力单元表示向数据表写一条4 KB数据。操作数据大小不足4 KB的部分向上取整，例如写入7.6 KB数据消耗2单位写服务能力单元，读出0.1 KB数据消耗1单位读服务能力...
数据归档至专属存储
本文为您介绍如何将数据归档至专属存储中（存储在 DMS）、将专属存储的数据转存至OSS，以及删除归档至专属存储的数据等操作。前提条件 源数据库类型为：MySQL：RDS MySQL、PolarDB MySQL版、AnalyticDB MySQL 3.0。说明 MySQL数据库账号...
主键列自增
该数据表有uid（string类型）和pid（integer类型）两个主键列并设置第二主键列pid（integer类型）为自增列，表中数据永不过期。create-t mytable-pk '[{"c":"uid","t":"string"},{"c":"pid","t":"integer","opt":"auto"}]' 执行 use-wc-t ...
批计算
全局二级索引支持在指定列上建立索引，生成的索引表中数据按指定的索引列进行排序，数据表的每一个数据写入都将自动以异步方式同步到索引表。步骤二：在EMR集群侧创建Spark外表 登录Master节点。执行如下命令启动Spark SQL CLI，用于Spark...
主键列自增
以下示例用于向数据表中写入一行数据，并返回完整主键值和消耗的预留读写吞吐量。private static void putRow(SyncClient client,String receive_id){/构造主键。PrimaryKeyBuilder primaryKeyBuilder=PrimaryKeyBuilder....
通过云监控控制台与SDK查看监控数据
通过Java SDK查询表中PutRow操作的示例代码如下：说明 operation参数的取值为API名称。更多信息，请参见 API参考。填写待查询数据的表和操作名称。request.setDimensions("{\"userId\":\"1234567890*\",\"region\":\"cn-hangzhou\",\...
查询时序表描述信息
如果为时序表创建了分析存储，您可以使用如下代码获取时序表的分析存储信息。List<TimeseriesAnalyticalStore>analyticalStores=describeTimeseriesTableResponse.getAnalyticalStores();查看时序表的分析存储配置。for...
删除时序表
示例/*DeleteTimeseriesTableSample用于删除实例中表名为timeseriesTableName的时序表。func DeleteTimeseriesTableSample(client*tablestore.TimeseriesClient,timeseriesTableName string){ fmt.Println("[Info]:Begin to delete ...
查询分析存储描述信息
当需要查看分析存储的详细配置信息，您可以使用DescribeTimeseriesAnalyticalStore接口查询分析存储描述信息，例如数据生命周期配置、数据同步选项、数据同步状态、数据存储大小等。前提条件 已创建时序表并为时序表创建了分析存储。具体...
查询分析存储描述信息
当需要查看分析存储的详细配置信息，您可以使用DescribeTimeseriesAnalyticalStore接口查询分析存储描述信息，例如数据生命周期配置、数据同步选项、数据同步状态、数据存储大小等。前提条件 已创建时序表并为时序表创建了分析存储。具体...
多元索引介绍
嵌套查询 在线数据中，除了扁平化的一层结构外，还存在一些更复杂的多层结构场景，例如图片标签：某个系统中存储了大量图片，每个图片都有多个实体，例如有房子、有轿车、有人。在每个图片中，这些实体占的位置和空间大小都不同，所以每个...
计算与分析概述
分析工具 适用模型 操作 描述 MaxCompute 宽表模型 使用MaxCompute 通过MaxCompute客户端为 表格存储 的数据表创建外部表，即可访问 表格存储 中的数据。Spark 宽表模型 使用Spark计算引擎 使用Spark计算引擎时，支持通过E-MapReduce SQL...
查询时序表描述信息
TimeseriesTable TTL:",describeTimeseriesTableResponse.GetTimeseriesTableMeta().GetTimeseriesTableOPtions().GetTimeToLive())/如果为时序表创建了分析存储，您可以使用如下代码获取时序表的分析存储信息。analyticalStores:=...
二级索引简介
使用本地二级索引时，表格存储以同步方式将数据表中被索引的列和主键列的数据自动同步到索引表中，当数据写入数据表后，即可从索引表中查询到数据。覆盖索引 支持索引表中带有属性列。在创建数据表时预先定义一些列（称为预定义列）后，您...
时序函数
本文介绍了时序分析存储中使用SELECT语句查询数据时支持的时序函数。函数 函数输出类型 描述 time_bin(_time,interval)Datetime 配合group by对时间进行分桶。例如 group by time_bin(_time,"10s")表示对时间每十秒分为一个桶，结合聚合...
删除分析存储
当不再需要使用分析存储来存储与分析时序数据时，您可以使用DeleteTimeseriesAnalyticalStore接口删除时序表下的分析存储。前提条件 已在创建时序表时创建了分析存储。具体操作，请参见 创建时序表。已初始化TimeseriesClient。具体操作，...
多元索引介绍
用户为数据表创建了多元索引后，当在数据表中写入数据时，数据会先写入数据表中，数据写成功后会立即返回用户写成功，同时另一个异步线程会从数据表中读取写入的数据然后写入到多元索引，采用异步方式创建多元索引不会降低表格存储的写入...
数据分层存储
分区表 创建分区表的存储策略 分区表也可以通过 SET_TABLE_PROPERTY 来设置表的存储策略，分区子表默认继承父表的存储属性，也可以分别设置父表和子表的存储策略。支持的选项有：hot（热存储）。cold（冷存储）。例如将分区父表（tbl2）...
- 产品推荐
- 这些文档可能帮助您