数据接入概述
IoT孪生引擎数据源 开启IoT孪生引擎下孪生空间备份后，对应数据存储在冷数据的时序表和快照表中。功能 支持说明 冷数据存储 以表格的形式，展示IoT孪生引擎对应孪生空间下孪生实体图中孪生节点的物模型属性的时序数据和快照数据。分析洞察 ...
多元索引介绍
但是表格存储和搜索引擎不一样的地方是，只提供最基础的BM25相关性，不提供自定义相关性能力，所以如果有相关性的搜索需求，还是建议使用搜索系统，否则可以使用表格存储满足需求。目前提供了5种分词类型：单字分词、分隔符分词、最小数量...
分区表简介
比如 idxpart0 中只会存储 i 的哈希值除以2余0的行，idxpart 表则是使用了哈希分区。比如 idxpart1 中只会存储 i 的哈希值除以2余1的行。多级分区（Multi-Level Partitioning）分区表被分成多个分区后，这些分区还可以继续被分区，这样的...
分区表简介
比如 idxpart0 中只会存储 i 的哈希值除以2余0的行，idxpart 表则是使用了哈希分区。比如 idxpart1 中只会存储 i 的哈希值除以2余1的行。多级分区（Multi-Level Partitioning）分区表被分成多个分区后，这些分区还可以继续被分区，这样的...
分区表简介
比如 idxpart0 中只会存储 i 的哈希值除以2余0的行，idxpart 表则是使用了哈希分区。比如 idxpart1 中只会存储 i 的哈希值除以2余1的行。多级分区（Multi-Level Partitioning）分区表被分成多个分区后，这些分区还可以继续被分区，这样的...
开通消息引擎
Lindorm消息引擎是Lindorm流引擎的底层存储，本文介绍如何开通消息引擎。说明 您可以通过Lindorm管理控制台创建Lindorm实例，购买消息引擎，或为已有的Lindorm实例开通消息引擎。创建实例时开通消息引擎 在 实例列表 中点击 创建。在...
时序模型计量计费
按照SQL引擎访问分析存储实际产生的数据扫描量计算CU，其中读取4 KB数据计算为1 CU。计费示例 下表列举不同样例场景中，使用时序模型时的费用计算示例。样例场景 费用计算 1万个设备，单个设备相当于一条时间线 单个设备每分钟传输10 KB...
通过PrestoDB使用Tablestore
PrestoDB是基于MPP架构的开源大数据分布式SQL查询引擎，支持对接MySQL、Elasticsearch、...结合计算引擎和表格存储您可以实现 表格存储结合Spark流批处理实现一体化存储和计算、表格存储结合实时计算Flink进行大数据分析 等解决方案。
对象存储OSS的审计事件
对象存储OSS已与操作审计服务集成，您可以在操作审计中查询用户操作对象存储OSS产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了用户通过...
配置冷存储
云原生多模数据库 Lindorm 搜索引擎支持配置表级别的冷存储功能，可以将表数据存储至冷存储介质中，从而降低存储成本。本文介绍搜索引擎配置冷存储的具体操作。前提条件 已下载并安装Search Shell，具体操作请参见 通过Search Shell连接并...
计量计费项
计算引擎访问（MaxCompute、Spark、Flink等）各个计算引擎访问表格存储，会根据具体的读写请求按照读写吞吐量计量计费。常见问题 我使用的容量型实例，为什么会存在预留读吞吐量费用？使用多元索引功能时，表格存储会根据索引数据规模自动...
宽表模型介绍
说明 您也可以通过MaxCompute、Spark、Hive或者HadoopMR、函数计算、Flink等计算引擎分析 表格存储 中的数据。更多信息，请参见 计算与分析概述。计费说明 表格存储 支持预留模式（预付费）和按量模式（后付费）两种计费模式，请根据所用的...
多元索引介绍
表格存储与数据库及搜索引擎等系统的主要区别如下：除了Join、事务和相关性外，表格存储能覆盖数据库和搜索系统中的其他功能，同时具备数据库的数据高可靠性和搜索系统的高级查询能力，可以替换常见的 数据库+搜索系统组合架构 方式。...
创建实例
说明 当存储类型为容量型云存储时，您选择的存储空间就是容量型云存储的空间，因此无需再设置是否选购容量型存储。存储类型为 本地SSD盘 或本地HDD盘 查看 本盘单节点磁盘容量。本盘单节点磁盘容量，即本地盘单节点磁盘容量，由本地盘节点...
安全算法
安全算法运用哈希脱敏、遮盖掩码、加解密等方式对敏感数据（如姓名、账号、手机号等）进行脱敏处理且保持数据原有格式，本文为您介绍如何查看和测试系统内置的安全算法。查看安全算法 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作...
安全算法
安全算法运用哈希脱敏、遮盖掩码、加解密等方式对敏感数据（如姓名、账号、手机号等）进行脱敏处理且保持数据原有格式，本文为您介绍如何查看和测试系统内置的安全算法。查看安全算法 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作...
使用pgcrypto及国密SM4加密算法
AnalyticDB PostgreSQL版 内置加密解密模块pgcryoto并集成国密SM4加密算法，允许数据库用户以加密形式存储数据的某些列，为敏感数据增加了一层额外的保护。无密钥时，任何用户都无法读取以加密形式存储在数据库中的数据。注意事项 pgcrypto...
集群容量规划
存储容量评估 存储容量评估主要考虑以下几点：副本数量：默认建议副本为0，搜索引擎基于分布式共享存储，节点宕机后，数据可以自动迁移到其它节点上提供服务，对于部分可靠性要求高的场景，可考虑设置副本数量为1。索引数据膨胀：数据一般...
多元索引最佳实践
主键需要尽可能的离散，例如使用MD5进行哈希处理。常见的反例包括使用自增ID、当前时间戳作为分区键。关于主键设计的更多信息，请参见 表设计。如果需要在数据表上根据主键前缀进行批量数据的拉取，则可以进行一些特殊的主键设计，然后查询...
运行选项
本文介绍基因分析平台支持的运行选项，以及对...该运行任务使用的WDL应用中的Workflow名称 WorkflowID：该Workflow执行的UUID，由执行引擎自动生成 Call-xxxx：Workflow中的Call名称 stderr：运行任务的标准错误 stdout：运行任务的标准输出
表设计
说明 关于表格存储索引选择的最佳实践，参见 存储和索引的引擎详解。主键设计——数据散列 为什么需要数据散列 数据散列是分布式数据系统中的通常要考虑的问题，散列的目的是让数据分布更均匀，避免热点。假设数据分布不均匀，会出现以下...
存储类型
宽表引擎、时序引擎、搜索引擎、文件引擎、流引擎 支持选购容量型存储。性能型云存储 0.2ms~0.5ms 广告竞价投放、用户画像、人群圈选、实时搜索、风控大脑等低延迟访问数据。宽表引擎、时序引擎、搜索引擎、文件引擎、流引擎 支持选购容量...
引擎功能
高效时序存储技术 时序数据压缩 Lindorm时序引擎使用高效的数据压缩技术，将单个数据点的平均使用存储空间降为1~2个字节，可以降低90%存储使用空间，同时加快数据写入的速度。冷数据归档能力 Lindorm时序引擎支持将长期存储的冷数据归档到...
物联网存储介绍
基于物联网场景中多源异构数据存储、高并发吞吐、海量数据高性价比存储、多维度数据处理与分析等需求，表格存储推出了一站式物联网存储IoTstore解决方案，为物联网设备元数据、消息数据、时序轨迹等海量数据提供存储、查询、检索、分析、...
方案背景
表格存储的分布式存储和强大的索引引擎能够支持PB级存储、千万TPS以及毫秒级延迟的服务能力。更多信息，请参见 什么是表格存储。多元索引基于倒排索引、列式存储、空间索引等，可解决大数据的复杂查询、分析聚合等需求。通过为数据表创建...
开通服务
城市视觉智能引擎产品支持从 对象存储OSS 获取上传到OSS的算法包文件。在使用阿里云城市视觉智能引擎服务之前，请确保您已开通OSS产品，如果您还没有开通OSS,请参考 开通OSS服务。操作步骤 登录 阿里云官网。将鼠标移至官网左上角产品分类...
对象存储OSS
存储类型 OSS提供标准存储、低频访问存储、归档存储、冷归档存储和深度冷归档存储多种存储类型，全面覆盖从热到冷的各种数据存储场景。存储类型 说明 标准存储 提供高可靠、高可用、高性能的对象存储服务，能够支持频繁的数据访问。适用于...
算法管理
城市视觉智能引擎产品支持从 对象存储OSS 获取上传到OSS的算法包文件。如果您还没有开通OSS,请参考 开通OSS服务。单击确定。管理算法 算法信息创建后，可在算法管理页面查看算法信息，在操作区域，单击编辑、删除、克隆新增，可对算法信息...
使用ECI搭建Redis集群
背景信息 Redis支持以集群模式运行，在该模式下，Redis将所有存储空间分为16384个哈希槽，集群中的每个Master节点负责N个哈希槽（一个数据分片），当用户写入一条数据时，Redis计算其哈希槽，然后将数据写在负责该哈希槽的节点上。...
创建实例
若 存储类型 选择 本地SSD盘 或 本地HDD盘，不支持选择数据引擎的节点规格，仅支持选择 本盘节点规格 和数据引擎的节点数量。若 存储类型 选择 本地SSD盘 或 本地HDD盘，不支持选择流引擎。集群配置 选择数据引擎，包括宽表引擎、时序引擎...
性能测试
以时空轨迹数据为7.6 GB为例，写入耗时的测试结果如下：数据库 写入耗时 云原生多模数据库 Lindorm Ganos引擎 7分钟 开源GeoMesa（HBase）13分钟 云数据库MongoDB分片集群 34分钟 创建时空索引后的时空数据存储空间占用情况 创建时空主键...
索引介绍
使用宽表模型的表引擎查询数据时存在依赖主键以及根据属性查询效率低的问题，表格存储提供了二级索引和多元索引用于解决宽表模型的数据查询问题。您也可以为数据表创建映射关系后，像使用传统数据库一样使用SQL查询表中数据。表引擎 宽表...
基本概念
区块链高度 英文名称Height，当前区块链上出块（Block）的最大数目 哈希 英文名称Transaction Hash，同交易哈希。交易上链成功后，产生的唯一哈希值 蚂蚁区块链特有概念 标识 英文名称Identity。在区块链中唯一标识一个账户或者智能合约，...
产品架构
数据接入 表格存储 提供SDK、DataWorks、IoT规则引擎等多种数据接入方式，支撑应用数据、消息数据、物联网数据等不同业务类型结构化数据的存储。Tablestore 多模型数据存储 表格存储 针对不同业务类型的结构化数据提供了宽表（WideColumn）...
MURMUR_HASH_64
使用MURMUR_HASH_64函数，按Murmur 128哈希算法计算指定参数的64位哈希值。使用限制 仅实时计算引擎VVR 3.0.0及以上版本支持MURMUR_HASH_64函数。语法 BIGINT MURMUR_HASH_64(value)入参 参数 数据类型 value VARCHAR或数值类型。示例 示例...
功能特性
创建实例 释放实例 管理存储空间 管理存储空间是数据库管理的一部分，涉及到如何规划、分配、配置、监控、维护和扩展数据库存储空间。管理存储空间 设置删除保护 实例删除保护功能可以防止在操作过程中将承载有重要业务的实例误释放。开启...
管理数据
在ZooKeeper引擎中，Znode是一种用于存储和管理数据的节点。Znode被组织成一个层级的树状结构，类似于文件系统的目录结构，并且每个Znode都有一个唯一的路径标识。ZooKeeper通过维护Znode来实现分布式应用程序的协调和管理，提供同步服务、...
SharedMergeTree表引擎
SharedMergeTree表引擎系列是ReplicatedMergeTree引擎的云原生替代方案，适配共享对象存储OSS，每个特定的MergeTree引擎类型都有对应的SharedMergeTree引擎，例如ReplacingSharedMergeTree替代ReplacingReplicatedMergeTree。...
参数说明
temp_file_limit 指定一个进程能用于临时文件（如排序和哈希临时文件，或者用于保持游标的存储文件）的最大磁盘空间量。一个试图超过这个限制的事务将被取消。这个值以千字节计，-1意味着没有限制。max_worker_processes 设置系统能够支持...
功能特性
数据存储 功能集 功能 功能描述 参考文档 元数据存储 宽表模型 宽表模型（WideColumn）是类Bigtable/HBase模型，可应用于元数据、大数据等多种场景。宽表模型通过数据表存储数据，单表支持PB级数据存储和千万QPS。数据表具有Schema-Free、...
- 产品推荐
- 这些文档可能帮助您