Fixed Plan加速SQL执行
说明 不保证原子性，即一次性写入多条的时候，如果没报错就是全部正常写入了，如果报错了只会报一条的错误，有可能全部没写入也有可能部分写入了部分没写入，没有写入的部分会将错误反馈给上层应用端，由应用端进行重试。on Hologres从 V1....
性能参数表
MySQL_MyISAMKeyReadWrites MyISAM平均每秒钟从缓冲池中的读取次数、MyISAM平均每秒钟从缓冲池中的写入次数、MyISAM平均每秒钟从硬盘上读取的次数和MyISAM平均每秒钟从硬盘上写入的次数。单位：次/秒。MySQL_COMDML 平均每秒Delete语句执行...
性能参数表
MySQL_MyISAMKeyReadWrites MyISAM平均每秒钟从缓冲池中的读取次数、MyISAM平均每秒钟从缓冲池中的写入次数、MyISAM平均每秒钟从硬盘上读取的次数和MyISAM平均每秒钟从硬盘上写入的次数。单位：次/秒。MySQL_COMDML 平均每秒Delete语句执行...
性能参数表
MySQL_MyISAMKeyReadWrites MyISAM平均每秒钟从缓冲池中的读取次数、MyISAM平均每秒钟从缓冲池中的写入次数、MyISAM平均每秒钟从硬盘上读取的次数和MyISAM平均每秒钟从硬盘上写入的次数。单位：次/秒。MySQL_COMDML 平均每秒Delete语句执行...
性能参数表
MySQL_MyISAMKeyReadWrites MyISAM平均每秒钟从缓冲池中的读取次数、MyISAM平均每秒钟从缓冲池中的写入次数、MyISAM平均每秒钟从硬盘上读取的次数和MyISAM平均每秒钟从硬盘上写入的次数。单位：次/秒。MySQL_COMDML 平均每秒Delete语句执行...
从采集到分析-TSDB For InfluxDB®让你的数据产生价值
允许对tag建索引，实现快速有效的查询。数据保留策略（Retention policies）能够有效地使旧数据自动失效。在阿里云购买成功之后，我们需要创建数据库账户和密码，设置存储策略。通过实例详情页面可以查看访问TSDB For InfluxDB®的方式，...
一键实时同步至Kafka
此时写入kafka记录的key将使用空值，只有当写入的kafka topic是单分区，才能确保变更有序写入，此外，您还可以选择单击 图标自定义主键，即使用其他非主键的一个或几个字段的联合，代替主键作为kafka记录的key。当在 设置目标Topic 页面未...
表设计最佳实践
流式数据写入 对于流式写入的数据，采集的通道通常较多，相关采集通道应该进行有效区分。在单个数据通道写入量较大的情况下，应该按照时间进行分区设计。在采集通道数据量较小的情况下，适合采取非分区表设计，将终端类型和采集时间设计成...
功能发布记录
03月24日 地域：杭州 版本：全部 Filebeat+Kafka+Logstash+Elasticsearch Serverless构建日志分析系统 Elasticsearch Serverless新增写入异常日志 向Elasticsearch Serverless应用中写入数据，出现Schema问题或Elasticsearch语法等问题导致...
常见问题
分片数对查询或写入性能的影响，请参见 分片数量对查询和写入性能有什么影响？如果单表数据量超过10亿，或查询RT和查询QPS无法满足要求时可以通过创建分区索引来解决相关问题。分区索引需要关注的内容，请参见 分区索引的适用场景和不适用...
通过Logstash导入数仓版
Input配置示例 以下配置可以实现对Kafka读取端（consumer）的基本使用。input { kafka { zk_connect=>"localhost:2181"group_id=>"Logstash"topic_id=>"test"codec=>plain reset_beginning=>false#boolean(optional)，default:false ...
CREATE INDEX
索引非常大的表可能会需要很多个小时，而且即使是较小的表，在构建索引过程中阻塞写入这一段时间在生产系统中也是不能接受的。PolarDB支持构建索引时不阻塞写入。这种方法通过指定 CREATE INDEX 的 CONCURRENTLY 选项实现。当使用这个选项...
将数据写入OSS
实现示例如下：示例：通过内置文本数据解析器将数据写入OSS-非分区路径 示例：通过内置文本数据解析器将数据写入OSS-分区路径 示例：通过内置文本数据解析器将数据以压缩方式写入OSS 示例：通过内置开源数据解析器将数据写入OSS 通过自定义...
通配符列
通配符列是指列名由通配符组成的列，多用于模糊匹配、动态列写入等场景，可以更灵活地匹配和查找目标列。在Lindorm宽表引擎中使用通配符列，可以满足多数据类型动态写入的需求。本文介绍通配符列的使用限制及使用方法。背景信息 在大数据量...
时序引擎版本说明
修复查询和写入SQL对时间字符串处理不一致的问题。修复sample by fill与percentile使用会抛异常的问题。修复ACL关闭时创建用户会出现NPE的问题。3.4.5 2021年12月24日 新特性 MySQL支持鉴权。TSQL提高简单查询的性能。TSQL支持分位数函数。...
监控时效性说明
告警的实现原理基于告警的查询时间范围，根据检查频率定时执行配置的查询语句，并将查询结果作为告警条件的参数进行计算，如果计算结果为true，则触发告警。本文介绍告警监控的时效性说明。关于监控时效性，说明如下：创建告警监控规则时，...
指标含义与异常处理建议
集群中索引的健康度出现过非健康（非绿色）状态。异常处理建议 在 Kibana控制台 的Monitoring页面查看监控信息，或者 查看实例的日志，获取问题的具体信息，并排查解决（例如索引占用内存太大，可删除一些索引）。对于磁盘使用率过高导致...
数据集填报
支持 添加、删除、复制：可以有多个写入配置从而实现同时写入多张表。配置字段映射：选择已有表或新建表之后，您可以配置填报字段和底表的对应关系。选择 已有表 为对应的 控件 选择写入的 表字段名，将自动匹配表字段名的 字段描述、字段...
配额与限制
单个分片（Region）的文件数目超过200个时，写入会发生阻塞，直到分区文件数目少于200个。删除 批量删除的行数不能超过2000行。读取 SQL中IN的取值不能超过2000个。单次读取的数据量不能超过2000行或16 MB。查询时必须指定第一个主键列或...
使用INSERT ON CONFLICT覆盖写入数据
针对数据写入时有主键冲突的情况，INSERT ON CONFLICT语法可以将冲突主键的INSERT行为转换为UPDATE行为，从而实现冲突主键的覆盖写入。该特性又称UPSERT覆盖写，与MySQL的REPLACE INTO类似。注意事项 仅支持行存表，不支持列存表（由于列存...
数据集成
数据源支持情况 数据集成目前支持40种以上的数据源类型（包括关系型数据库、非结构化存储、大数据存储、消息队列等），通过定义来源与去向数据源，并使用数据集成提供的数据抽取插件（Reader）、数据写入插件（Writer），实现任意结构化、...
索引管理
阿里云Elasticsearch 7.10内核增强版（Indexing Service）将索引构建写入部分全部托管在云端的Elasticsearch集群中，以满足海量时序日志数据的快速写入要求。本文介绍如何通过索引管理功能实现云端索引管理。使用限制 仅开启Indexing ...
WiFi配网HAL
以 AES-CBC-128 的加解密模式，用 HAL_Aes128_Init()被调用时传入的密钥，解密从 src 位置起长度为 blockNum 块数的密文，并把明文结果存放到 dst 起始的内存缓冲区中。原型 typedef void*p_HAL_Aes128_t;int HAL_Aes128_Cbc_Decrypt(_IN_p...
功能特性
监控指标 自定义报警策略与报警通道 支持单指标、多指标多条件自定义策略告警，支持语音、短信、邮件、站内信、钉钉告警通道，可灵活配置。报警设置 性能趋势 支持查看实例长周期的性能趋势。性能趋势 实时性能 支持实时查看实例性能数据。...
无锁结构变更方案对比
锁表变更对业务甚至是致命的，DDL无锁变更通过引入非触发器的方式可以解决大表无锁变更这个难题。本文介绍几种无锁结构变更方案的对比。线上业务不建议直接进行DDL操作，通常有几种做法来避免影响业务：业务低峰期变更：合适的变更窗口以及...
数据集成服务
当您的现有业务对数据库的并发读写、扩展性和可用性的要求较高，且需要使用复杂的检索或大数据分析时，如果原有数据库的数据架构不能满足现在的业务需求或改造成本较大，则您可以通过DataWorks数据集成服务将现有数据库中的数据迁移到...
22.8版本新特性概览
对于常见的导入OSS数据到ClickHouse，在22.8之前版本中如果要实现JSON对象子列的独立存储和高效分析，那么就必须预先在ClickHouse建立结构化的目标表，并明确定义每个字段的数据类型，才能将半结构化的JSON数据写入到ClickHouse中。...
HTTP API
使用语法$作为查询中的占位符（placeholder），并且URL会对request body中的placeholder key和placeholder value的映射（Map）进行编码：查询语法：data-urlencode 'q=SELECT[.]WHERE[|]=$<placeholder_key>' 映射语法：data-urlencode '...
通过向导模式配置离线同步任务
背景信息 数据集成离线同步，为您提供数据读取（Reader）和写入插件（Writer）实现数据的读取与写入，您可通过向导模式和脚本模式配置离线同步任务，实现源端单表同步至目标端单表、源端分库分表同步至目标端单表两类数据同步场景。...
Hyperledger Fabric 性能篇
例如，在链码调用阶段，对同一个Key进行写入的多笔不同交易，应避免间隔过短，即避免对Key进行频繁写入。建议 在对该Key的上一笔写入交易成功（即 commit 到账本）后再发起下一笔写入交易。减少 stub 读取和写入账本的次数 Fabric 中的链码...
实时数据订阅概述
云原生多模数据库 Lindorm 支持实时数据订阅功能，实时数据订阅功能帮助您获取Lindorm的实时增量数据，您可以根据自身业务需求自由消费增量数据，搭建或实现多种业务场景。背景信息 云原生多模数据库 Lindorm 数据订阅功能支持任何一个表的...
RDS SQL Server I/O高问题
数据页写入和日志文件写入I/O吞吐高 数据页写入和日志文件写入I/O吞吐高，可以通过自治服务观察写I/O吞吐高期间是否有频繁的DML类的写入操作（INSERT、DELETE、UPDATE、MERGE等）或DDL类的写入操作（CREATE INDEX、ALTER INDEX等），处理...
现代IM系统中的消息系统—实现
本文主要以钉钉（DingTalk）的功能为参照，详细说明如何基于表格存储的Timeline模型实现钉钉的IM功能。以下内容按照聊天系统的消息存储、关系维护、即时感知、多端同步四个功能模块分块，分别介绍每一部分的功能、方案介绍、表设计以及实现...
实时数据采集
单位 采集值单位 采集频率 测点采集的频率,优先级高于设备的采集频率 上限值 读写测点反控可写入的最大值,超过该值的反控会被忽略 下限值 读写测点反控可写入的最小值，小于该值的反控会被忽略 写保护 读写测点，支持上下限的保护开关 数据...
HDFS的部署拓扑
本文分别为您介绍非高可用集群和高可用集群的HDFS组件的部署拓扑信息。非高可用集群 节点 组件 描述 master-1-1（部分版本为 emr-header-1）NameNode NameNode对外提供读写服务。SecondaryNameNode SecondaryNameNode合并NameNode的edits...
分区表常见问题
可以使用KEY、RANGE COLUMN和LIST COLUMN语法对非整型数据的列进行分区。具体请参考 KEY、RANGE 和 LIST。您也可以通过分区函数把数据列转化成整型列，来使用HASH/RANGE/LIST分区表。分区表有什么使用上的限制？最大分区数不能超过8192个。...
Spark的数据写入至Hologres
本文为您介绍如何通过Spark读取或写入数据至Hologres的操作方法。背景信息 Spark是用于大规模数据处理的统一分析引擎，Hologres已经与Spark（社区版以及EMR Spark版）高效打通，快速助力企业搭建数据仓库。Hologres提供的Spark Connector，...
Beam排序优化（7.0版）
71.83 19.16 首列10%非首列1%82.50 18.95 首列1%非首列10%7.98 6.43 首列点查+非首列50%0.50 31.48 非首列点查 87.04 19.67 非首列1%515.08 78.90 非首列10%567.85 131.39 非首列50%588.86 134.36 重要 该结果仅比较两类排序键的相对性能...
通道服务
通过为数据表建立数据通道，您可以简单地实现对表中历史存量和新增数据的消费处理。创建通道 为数据表创建一个通道。命令格式 create_tunnel-n name 配置项说明请参见下表。配置项 是否必填 示例值 说明-t，-table 否 mytable 数据表名称。...
使用数据镜像保护尚未写入完整的数据
云数据库MongoDB提供数据镜像能力，您可以对副本集实例或分片集群实例创建一个只读数据镜像。其中副本集最高支持3TB数据，集群版本最高支持96TB数据。使用场景 创建数据镜像，可确保在数据大批量写入更新期间，所有读请求从数据镜像获取...
- 产品推荐
- 这些文档可能帮助您