功能特性
Flink Presto 使用PrestoDB对接表格存储Tablestore后，基于PrestoDB on Tablestore您可以使用SQL查询与分析Tablestore中的数据、写入数据到Tablestore以及导入数据到Tablestore。Presto 迁移同步 同步MySQL数据 您可以根据业务需求使用...
流计算
步骤三：实时流计算 实时流计算将实时统计一个窗口周期时间内的数据，并将聚合结果写回表格存储的数据表中。创建流计算的Sink外表order_stream_sink（对应表格存储的OrderStreamSink表）。创建Sink外表与创建Source外表的参数设置中只有...
时序表操作
重要 在时序表中，系统判断数据产生时间以用户传入的时间列为准，并非数据写入表中的时间。取值：大于等于86400秒（一天）或-1（数据永不过期）。示例 创建名称为mytable的时序表，表中数据永不过期。create-m timeseries-t mytable-ttl-1 ...
专业术语
相反，当您向序列中写入一个新的数据点，并且该数据点的时间戳跟序列中某个数据点的时间戳相同，那么在该时间戳下的数据点的field set会变为旧field set和新field set的并集，以后访问这个数据点时，返回的都是修改后新的field set。...
全匹配查询
已创建数据表并写入数据。已在数据表上创建多元索引。具体操作，请参见 创建多元索引。参数 参数 说明 Query 设置查询类型为MatchAllQuery。TableName 数据表名称。IndexName 多元索引名称。Limit 本次查询需要返回的最大数量。如果只为了...
列存在性查询
ExistsQuery也叫NULL查询或者空值查询，一般用于判断稀疏数据中某一行的某一列是否存在。例如查询所有数据中address列不为空的行。说明 要对Nested字段进行列存在性查询（ExistsQuery）时，请使用嵌套类型查询（NestedQuery）进行嵌套。...
全匹配查询
已创建数据表并写入数据。已在数据表上创建多元索引。具体操作，请参见 创建多元索引。参数 参数 说明 query 设置查询类型为MatchAllQuery。tableName 数据表名称。indexName 多元索引名称。limit 本次查询需要返回的最大数量。如果要随机...
迁移时源库为MySQL的注意事项及限制
如仅执行全量数据迁移，请勿向源实例中写入新的数据，否则会导致源和目标数据不一致。为实时保持数据一致性，建议选择结构迁移、全量数据迁移和增量数据迁移。其他限制 建议源和目标库的MySQL版本保持一致，以保障兼容性。执行数据迁移前需...
全匹配查询
已创建数据表并写入数据。已在数据表上创建多元索引。具体操作，请参见 创建多元索引。参数 参数 说明 tableName 数据表名称。indexName 多元索引名称。offset 本次查询的开始位置。limit 本次查询需要返回的最大数量。如果只为了获取行数...
数据备份概述
通过为实例中的表配置备份计划并执行，您可以备份 表格存储 中的重要数据到 云备份 中，如果重要数据被误删除或者恶意篡改，您可以将备份数据快速恢复到 表格存储 中。注意事项 当前支持使用数据备份功能的地域有华东1（杭州）、华东2...
前缀查询
已创建数据表并写入数据。已在数据表上创建多元索引。具体操作，请参见 创建多元索引。参数 参数 说明 tableName 数据表名称。indexName 多元索引名称。offset 本次查询的开始位置。limit 本次查询需要返回的最大数量。如果只为了获取行数...
迁移时源库为MongoDB的注意事项及限制
如仅执行全量数据迁移，请勿向源实例中写入新的数据，否则会导致源和目标数据不一致。为实时保持数据一致性，建议选择结构迁移、全量数据迁移和增量数据迁移。暂不支持迁移包含TTL（Time To Live）索引的集合。若待迁移的数据库中包含TTL...
如何修改表格存储中已存在的表名称
不支持直接修改表名称。您可以通过新建一个表，然后将当前表中的数据迁移到新表中实现。请使用DataX、通道服务等工具进行数据迁移。具体操作，请参见 将表格存储数据表中数据同步到另一个数据表。
嵌套类型查询
已创建数据表并写入数据。已在数据表上创建多元索引。具体操作，请参见 创建多元索引。参数 参数 说明 tableName 数据表名称。indexName 多元索引名称。path 路径名，嵌套类型的列的树状路径。例如news.title表示嵌套类型的news列中的title...
使用DataX同步
通过DataX，您可以将MySQL数据库中的全量数据同步到表格存储（Tablestore）的数据表中。DataX只支持同步全量数据，不支持同步增量数据。前提条件 已创建表格存储实例并在实例详情页面获取实例的服务地址（Endpoint）。具体操作，请参见 ...
测试数据构建
工单参数信息中的 冲突处理 模式说明如下：遇到数据冲突则跳过：遇到主键、唯一键的数据写入冲突则跳过冲突记录，继续写入其他数据。遇到数据冲突则替换：遇到主键、唯一键的数据写入冲突则更新原记录的数据并继续写入其他数据。参数配置...
范围查询
已创建数据表并写入数据。已在数据表上创建多元索引。具体操作，请参见 创建多元索引。参数 参数 说明 tableName 数据表名称。indexName 多元索引名称。offset 本次查询的开始位置。limit 本次查询需要返回的最大数量。如果只为了获取行数...
创建投递任务
已创建数据表并写入数据。参数 参数 说明 TableName 数据表名称。TaskName 投递任务名称。名称只能包含英文小写字母（a~z）、数字和短横线（-），开头和结尾必须为英文小写字母或数字，且长度为3~16字符。TaskConfig 投递任务配置，包括...
创建投递任务
已创建数据表并写入数据。参数 参数 说明 tableName 数据表名称。taskName 投递任务名称。名称只能包含英文小写字母（a~z）、数字和短横线（-），开头和结尾必须为英文小写字母或数字，且长度为3~16字符。taskConfig 投递任务配置，包括...
通过控制台投递数据到OSS
通过表格存储控制台创建投递任务，将表格存储数据表中的数据投递到OSS Bucket中存储。前提条件 已开通OSS服务且在表格存储实例所在地域创建Bucket，详情请参见 开通OSS服务。说明 数据湖投递支持投递到和表格存储相同地域的任意OSS Bucket...
功能优势
特点及场景 模式 数据召回率 数据量 QPS 小数据量（写入数据较少）、高QPS、精度无损。典型应用场景：人脸门禁考勤 违禁图片库 黑名单库 无损 100%百万级别 单节点100 QPS，利用维度表实现线性扩展。中等规模数据量、高QPS、有较少精度损失...
使用UDF处理数据
如果您在表格存储中的数据有着独特的结构，希望自定义开发逻辑来处理每一行数据，例如解析特定的JSON字符串，您可以使用用户自定义函数UDF（User Defined Function）来处理表格存储中的数据。操作步骤 在IntelliJ中安装MaxCompute-Java/...
多词精确查询
已创建数据表并写入数据。已在数据表上创建多元索引。具体操作，请参见 创建多元索引。参数 参数 说明 tableName 数据表名称。indexName 多元索引名称。offset 本次查询的开始位置。limit 本次查询需要返回的最大数量。如果只为了获取行数...
查询机制
INSERT 当您使用INSERT插入一条数据时，具体过程如下：从数据文件中读取一个数据块到内存中，并将这行数据写入这个数据块，系统生成一条INSERT的WAL日志。当执行COMMIT命令后，系统会产生一条COMMIT的WAL日志。INSERT WAL日志和COMMIT WAL...
迁移时源库为PolarDB-X 2.0的注意事项及限制
如仅执行全量数据迁移，请勿向源实例中写入新的数据，否则会导致源和目标数据不一致。为实时保持数据一致性，建议选择结构迁移、全量数据迁移和增量数据迁移。PolarDB分布式版 需兼容MySQL 5.7版本。其他限制 执行数据迁移前需评估源库和...
迁移时源库为Oracle的注意事项及限制
如仅执行全量数据迁移，请勿向源实例中写入新的数据，否则会导致源和目标数据不一致。为实时保持数据一致性，建议选择结构迁移、全量数据迁移和增量数据迁移。单独更新大文本字段场景不支持，任务会失败。其他限制 执行数据迁移前需评估源...
CREATE MATERIALIZED VIEW
写入数据至源表。INSERT INTO test VALUES(1,'a'),(2,'b'),(3,'c');创建基于源表的物化视图。CREATE MATERIALIZED VIEW test_view ON CLUSTER default ENGINE=MergeTree()ORDER BY(id)AS SELECT*FROM test;查询物化视图，验证未指定 ...
生命周期管理
注意事项 使用生命周期管理功能，必须禁用数据表的UpdateRow更新写入功能，避免一些语义上的问题：由于数据表TTL是属性列级别生效的，而多元索引TTL是整行生效的，如果存在UpdateRow写入操作，当系统清理数据表中数据时，数据表中部分字段...
Slowly Changing Dimension
其中数据中随着时间变化的维度被称为Slowly Changing Dimension（SCD）。E-MapReduce根据实际的数仓场景定义了基于固定粒度的缓慢变化维（G-SCD）。本文为您介绍G-SCD的具体解决方案及如何通过G-SCD处理维度的数据。背景信息 SCD简介 ...
如何将高性能实例改为容量型实例
高性能实例当前无法直接调整为容量型实例，需要您自行通过数据迁移实现。您可以使用DataX、通道服务等工具进行数据迁移。具体操作，请参见 将表格存储数据表中数据同步到另一个数据表。
方案实现
步骤二：实时流计算 实时流计算将实时统计一个窗口周期时间内的订单数和订单金额统计，并将聚合结果写回表格存储的数据表中。创建流计算的Sink外表order_stream_sink（对应表格存储中的OrderStreamSink表）。执行实时流计算SQL命令进行实时...
生命周期管理
注意事项 使用生命周期管理功能，必须禁用数据表的UpdateRow更新写入功能，避免一些语义上的问题：由于数据表TTL是属性列级别生效的，而多元索引TTL是整行生效的，如果存在UpdateRow写入操作，当系统清理数据表中数据时，数据表中部分字段...
表格存储
使用表格存储节点可将数据存入表格存储数据表中，对数据表中的数据进行增、删、改、查操作。前提条件 您已经开通 阿里云表格存储 服务，并创建了表格存储实例和数据表。详细内容请参见 快速使用宽表模型。表格存储数据表主键仅支持整型、...
生命周期管理
注意事项 使用生命周期管理功能，必须禁用数据表的UpdateRow更新写入功能，避免一些语义上的问题：由于数据表TTL是属性列级别生效的，而多元索引TTL是整行生效的，如果存在UpdateRow写入操作，当系统清理数据表中数据时，数据表中部分字段...
将表格存储的增量数据转换为全量数据格式
通过DataWorks控制台，您可以在MaxCompute中使用merge_udf.jar包将 表格存储 的增量数据转换为全量数据格式。前提条件 已导出 表格存储 全量数据到MaxCompute，且已配置同步 表格存储 增量数据到MaxCompute。具体操作，请分别参见 全量导出...
配置Redis输出组件
是否写入JSON格式 仅支持 写入数据类型 为String类型配置。选择是，将以配置的映射关系将Value列的列名与值以JSON格式写入目标Redis。选择否，将以值分隔符分隔Value写入。值分隔符 写入值的分隔符，如：\u0001，支持多字符分隔符。高级...
INTO子句
如果您使用CLI写入数据，那么写入数据的measurement属于”USE”指定的数据库，并且使用的是默认（DEFAULT）的保留策略。如果您使用的是HTTP API，那么写入数据的measurement属于参数 db 指定的数据库，同样，使用的是默认（DEFAULT）的保留...
数据类型
了解Spark数据类型、Scala中的值类型、表格存储中多元索引数据类型和表格存储表中数据类型的对应关系。使用过程中请确保Spark、Scala和表格存储中字段或值的数据类型相匹配。基础数据类型 基础数据类型的支持情况请参见下表。Spark数据类型...
配置Redis输出组件
是否写入JSON格式 仅支持 写入数据类型 为String类型配置。选择是，将以配置的映射关系将Value列的列名与值以JSON格式写入目标Redis。选择否，将以值分隔符分隔Value写入。值分隔符 写入值的分隔符，如：\u0001，支持多字符分隔符。高级...
使用SDK
创建投递任务后，表格存储数据表中的数据会自动投递到OSS Bucket中存储。注意事项 目前支持使用数据湖投递功能的地域有华东1（杭州）、华东2（上海）、华北2（北京）和华北3（张家口）。数据湖投递不支持同步删除操作，表格存储中的删除...
- 产品推荐
- 这些文档可能帮助您