使用DataX同步
通过DataX，您可以将MySQL数据库中的全量数据同步到表格存储（Tablestore）的数据表中。DataX只支持同步全量数据，不支持同步增量数据。前提条件 已创建表格存储实例并在实例详情页面获取实例的服务地址（Endpoint）。具体操作，请参见 ...
pg_statistic
目录 pg_statistic 存储有关数据库内容的统计数据。其中的项由ANALYZE创建，查询规划器会使用这些数据来进行查询规划。所有的统计数据天然就是近似的，...每个数组的元素值实际上都是指定列的数据类型或者是一个相关类型（如数组元素类型）。
数据模型
在HBase中，数据存储在具有行和列的表中，这是与关系数据库（RDBMS）类似的模型，但与之不同的是其具备结构松散、多维有序映射的特点，它的索引排序键由行+列+时间戳组成，HBase表可以被看做一个“稀疏的、分布式的、持久的、多维度有序Map...
对象存储优化
对象存储OSS提供存储管理功能，帮助您优化存储性能和成本。分析数据访问模式并对数据进行转储或删除 您可以分析数据访问模式并配置 生命周期规则，自动将访问频率较低的数据转换为成本更低的存储类型，或者在到期日之后自动删除数据。例如...
监控报警
在使用MaxCompute过程中，您可能需要通过监测MaxCompute包年包月资源、按量计费作业消费 及Tunnel上传下载情况等，了解资源的运行状况，以便及时升级资源或规划作业。您也可以通过设置报警规则，当资源状况符合报警规则时，云监控自动发送...
新建存储过程
概述 存储过程是一条或多条语句的集合，对数据库进行一系列复杂操作时，存储过程可以在数据库内将这类复杂操作封装成一个代码块，以便重复使用，从而减少数据库开发人员的工作量。存储过程旨在完成特定功能的 SQL 语句集，经编译创建并保存...
存储费用
按量付费：存储费用=存储量（GB）×月单价÷30（天）÷24（小时）标准-本地冗余存储包 打开 对象存储OSS资源包 购买页，资源包选择存储包类型为 标准-本地冗余存储包，存储包按实际容量抵扣。重要 如果您已购买中国内地通用或某个地域的...
高级监控
在 自定义视图 页签，您可以根据业务需要自定义多个性能监控大盘，将需要的多个性能监控指标在同一个图表中进行展示，便于问题排查和分析。说明 如果您是首次使用 自定义图表 功能，需要先创建监控大盘，详情请参见 监控大盘。性能指标 ...
计费概述
选择配额：配额项 介绍 估算方式 存储配额（Storage）同步到OpenSearch中的文档实际占用的容量大小 存储配额以开放搜索配置的实际字节数计算 计算配额（LCU）LCU（逻辑计算单元）是 衡量搜索计算能力的单位，一个LCU代表搜索集群中0.01核的...
通用型NAS计费
低频存储读流量 1 GiB×0.06元/GiB=0.06元 低频存储写流量 2 GiB×0.06元/GiB=0.12元 存储包+按量计费 假设张先生在华北2（北京）地域购买了500 GiB的存储包，需支付总费用165.195元，计费明细如下：计费项 费用 说明 通用型存储容量（容量...
Alibaba Blink实时模式资源自定义
配置说明 在资源配置页面，为您展示一张拓扑图，图中每个方框代表了一个计算任务，都可以进行独立配置。每个Group代表着Group内部的节点可以存放在一台机器进行计算，可以有效避免数据的网络传播，提升性能。说明 系统默认为您展示系统推荐...
容量中心
可查看每个表的 表名、行数、磁盘使用大小、数据大小、宏块使用率、分区数量 和 自增列使用率。查看集群容量信息。当选择所有租户时，不再显示数据库和数据表筛选，改为展示集群下不同租户的存储、分区副本、CPU、内存的图表信息。右侧展示...
使用限制
样式限制 每个存储空间下最多能创建50个样式。说明 如果您的业务有更多的样式需求，请联系 技术支持。处理能力限制 每秒图片处理量（按原图大小计）华东1（杭州）、华东2（上海）、华北2（北京）、华北 3（张家口）、华南1（深圳）：20 MB/...
列存索引中TopK算子的实现
重要 本文中的内存充足是指，算法中用于管理至少K条记录的数据结构可以在执行内存中缓存，而不是TopK查询的输入数据可以在执行内存中缓存。实际上本文讨论的场景，TopK查询的输入数据都是远大于执行内存的。另外，从系统设计的角度上看，...
DBSCAN
邻域中样本个数的阈值 当一个节点被认为是核心（core）时，它的邻域中至少包含的节点个数。具体配置方法，详情请参见 附录2：如何配置参数。预测结果列名 预测结果列的名称。距离度量方式 聚类使用的距离类型，默认为 EUCLIDEAN，取值如下...
配置作业资源
配置算子的资源 默认情况下，所有算子都放在一个SLOT共享组内，因此您无法为每个算子单独修改资源配置。如果您需要对单独的算子设置资源，需要配置对应的运行参数后让每个算子有自己独立的SLOT，这样就可以直接在对应的SLOT上设置算子的...
pg_index
目录 pg_index 包含关于索引的...对于 indkey 中每一个为0的项，这个列表中都有一个元素。如果所有的索引属性都是简单引用，此列为空。indpred pg_node_tree 部分索引谓词的表达式树（以 nodeToString()形式）。如果不是部分索引，此列为空。
多元索引计量计费
例如一个索引的预留读吞吐量为10000 CU，使用索引查询时，每次查询10行数据，每行小于4 KB，当查询QPS（每秒查询率）小于1000时查询吞吐量都会被预留吞吐量覆盖，这部分查询不会再额外收费。预留读吞吐量生成规则：预留读吞吐量和索引的...
基本概念
为了进一步提高效率，云数据库ClickHouse 将海量数据分散存储到多台服务器上，每台服务器只存储和处理海量数据的一部分，在这种架构下，每台服务器被称为一个分片（Shard）。副本（Replica）为了在异常情况下保证数据的安全性和服务的高...
算力计费
计费规格如下表所示：计费项 单位 日价（元）月价（元）边缘虚核（vCPU）个 4.33 65 边缘内存（memory）GB 1.33 20 边缘存储（全闪云盘）GB 0.0667 1 边缘存储（高效云盘或SSD本地盘）GB 0.0233 0.35 边缘存储（HDD本地盘）GB 0.00267 0.04...
缓冲区管理
FlushList 为了维护一致性位点，PolarDB 为每个Buffer引入了一个内存状态，即第一次修改该Buffer对应的LSN，称之为Oldest LSN，所有Buffer中最小的Oldest LSN即为一致性位点。一种获取一致性位点的方法是遍历Buffer Pool中所有Buffer，找到...
Kafka集群的数据存储格式
每个已提交的事务分配一个唯一的SCN。rowid 用于定位数据库中一条记录的一个相对唯一地址值。trans 事务ID。seq 事务内部的操作序号，从1开始记录。size 事务内部的操作总数。table 表名。idx 事务内部操作的索引，格式为 seq/size，例如 1...
Kafka集群的数据存储格式
每个已提交的事务分配一个唯一的SCN。rowid 用于定位数据库中一条记录的一个相对唯一地址值。trans 事务ID。seq 事务内部的操作序号，从1开始记录。size 事务内部的操作总数。table 表名。idx 事务内部操作的索引，格式为 seq/size，例如 1...
如何处理Tair集群数据倾斜
为什么会产生数据倾斜 Tair 集群架构作为一个分布式系统，整个数据库空间会被分为16384个槽（Slot），每个数据分片节点将存储与处理指定Slot的数据（Key），例如3分片集群实例，3个分片分别负责的Slot为：[0,5460]、[5461,10922]、[10923,...
Tair持久化与备份恢复
Tair 默认启用 AOF持久化，策略为 AOF_FSYNC_EVERYSEC 且不支持修改，即Redis每秒执行一次fsync，将AOF缓冲区中的写入类命令刷新到磁盘，这个过程又称为AOF落盘。AOF_FSYNC_EVERYSEC 策略对Redis服务性能的影响较小，同时也能极大地降低...
ANALYZE分析工具
原理介绍 在ePQ优化器产生的分布式并行查询计划中，计划树中的每个算子可能被多个PX Worker执行。例如，一个 Seq Scan 计划节点会被多个PX Worker执行，每个PX Worker负责扫描一部分数据。因此，相比于现有的 EXPLAIN ANALYZE 工具，PX的 ...
表设计
说明 有一种局部热点情况，假设10.10.0.0/16这个网段的机器写入量很大，而表格存储是按照分区键的一个范围进行分区的，刚好这些机器又都分在一个分区内，会不会产生热点呢？如果写入压力超过或接近单分区的上限，确实是一个热点，但是表格...
PolarDB PostgreSQL版架构介绍
通过上述分析，需要维护每个Page到日志的 倒排 索引，而只读节点的内存是有限的，因此这个Page到日志的索引需要持久化，PolarDB PostgreSQL版 设计了一个可持久化的索引结构-LogIndex。LogIndex本质是一个可持久化的hash数据结构。只读节点...
消费-计量计费日志
使用云服务最大好处是按量付费，无需预留资源，因此各云产品都有计量计费需求。本文介绍一种基于日志服务按量计费方案，该方案每天处理千亿级计量日志，被众多云产品使用。计量日志生成计费结果过程 计量日志记录了您所涉及计费的项目，后...
参数说明
每个操作都会被允许使用这个参数指定的内存量，然后才会开始写数据到临时文件。同样，几个正在运行的会话可能并发进行这样的操作。因此被使用的总内存可能是work_mem值的好几倍，在选择这个值时一定要记住这一点。ORDER BY、DISTINCT和归并...
如何优化高并发IM系统架构
新架构中自增操作是在表格存储系统内部处理的，就算多个应用服务器同时给表格存储中的同一个接收方写数据，表格存储内部也能保证这些消息是串行处理，每个消息都有一个独立的消息ID，且严格递增。使用主键列自增功能，就不再需要队列服务，...
新建数据模型
内存实体 不存储在数据库中，仅临时存储在应用程序内存中的实体。系统默认实体 系统默认实体里面既含有实体，也有内存实体。系统默认实体实际上是引用模块的实体，系统数据模块是应用的默认引用模块。操作步骤 登录 魔笔。在顶部菜单栏选择...
生命周期管理FAQ
当文件系统中包含每月访问频率或每季度访问频率低于2次的文件时，可以开启通用型NAS生命周期管理功能，符合生命周期管理策略的文件将自动转储至低频存储或归档存储，采用低频存储计费方式，从而降低存储成本。为什么我的文件系统不支持生命...
PolarDB PostgreSQL版架构介绍
通过上述分析，需要维护每个Page到日志的 倒排 索引，而只读节点的内存是有限的，因此这个Page到日志的索引需要持久化，PolarDB PostgreSQL版（兼容Oracle）设计了一个可持久化的索引结构-LogIndex。LogIndex本质是一个可持久化的hash数据...
INSERT
这意味着如果有一个满足其他条件的非部分唯一索引（没有谓词的唯一索引）可用，它将被推断为仲裁者（并且会被 ON CONFLICT 使用）。如果推断尝试不成功，则会发生一个错误。ON CONFLICT DO UPDATE 保证一个原子的 INSERT 或者 UPDATE 结果...
ST_ImportObj
将基于对象存储或内存格式的Obj文件导入到数据库中。语法 boolean ST_ImportObj(text table_name,text url,text id,text options default '{}');boolean ST_ImportObj(text table_name,bytea content,text id,text options default '{}');...
NAS存储卷概述
您可以在容器服务Kubernetes集群中使用阿里云NAS存储卷。本文介绍NAS存储卷的使用场景、注意事项等。前提条件 使用NAS数据卷之前，您需要在 文件存储管理控制台 上创建文件系统，并在文件系统中添加挂载点。创建的NAS文件系统挂载点需要和...
ST_ImportObj
将基于对象存储或内存格式的Obj文件导入到数据库中。语法 boolean ST_ImportObj(text table_name,text url,text id,text options default '{}');boolean ST_ImportObj(text table_name,bytea content,text id,text options default '{}');...
代码多副本功能
不同的处理器核心和内存子系统整体被称为节点（node），每个节点都有自己的本地内存。当一个进程在NUMA架构中运行时，可能由于内存不足或负载平衡等原因，操作系统会将内存分配在其他节点上。当应用程序或进程需要访问的代码段存储在另一个...
其他控制台相关问题
这是因为JM里有一些周期性任务的线程，可能持有着作业的对象，而只要这个作业有一个对象还没有被垃圾回收，那这个作业的Classloader就无法释放，这个Classloader里加载的所有类对应的内存就无法被释放。报错：One bucket not allowed ...
- 产品推荐
- 这些文档可能帮助您