访问列存数据
列存提供丰富的索引能力和数据分布特征，可以有效加速计算过程中的数据定位与排布，通过SQL即可完成海量主键数据的增删改查。高吞吐 列存引擎吞吐能力支持水平扩展，提供每分钟TB级数据的读写能力。适用于车联网数据快速导入、模型训练数据...
使用SDK时出现Validate PK name fail异常
现象 使用SDK查询数据时出现如下异常：Caused by:[ErrorCode]:OTSInvalidPK,[Message]:Validate PK name fail 原因 设置的主键名称和数据表的主键名称不一致，或者设置的主键顺序和数据表的主键顺序不一致。解决方案 设置的主键名称与主键...
配置说明
当主键模式为kafka时，无需配置该属性，默认主键列名为{"topic_partition","offset"}，默认主键列数据类型为{string,integer}。当主键模式为record_key或record_value时，必须配置以下两个属性。tablestore.test.primarykey.name=A,B#...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表的同时支持创建一个或者多个索引表。说明 创建数据表后需要几秒钟进行加载，在此期间对该数据...
写入数据
表格存储提供了PutRow和UpdateRow接口用于写入单行数据以及BatchWriteRow接口用于批量写入数据。如果需要了解表格存储各场景的应用案例，请参见 快速玩转Tablestore入门与实战。前提条件 已初始化Client，详情请参见 初始化。已创建数据表...
修改时区
如果RDS PostgreSQL实例的时区设置与业务逻辑需要的时区不一致，或者应用程序需要处理多个时区的数据，则需要修改数据库实例的时区配置，以确保数据在不同时区之间的转换和展示正确无误。前提条件 RDS PostgreSQL云盘版实例。注意事项 SET ...
配置安全规则
将数据库添加到数据库审计系统后，您可以为数据库配置安全规则（即审计规则），当数据库的审计记录命中审计规则时，数据库审计系统会触发告警。本文介绍如何配置审计规则。背景信息 审计规则支持内置规则和自定义规则。内置规则即数据库...
常见问题
VPC authorization failed,please check if the rdsId vpcId is correct Host format error,cannot start with ...检查 RDS 表是否设置了主键，未设置主键将导致数据无法正常写入目的端。
数据库管理
Database的概念 每个正在运行的Lindorm时序引擎实例都管理着一个或多个数据库（简称Database）。在各个Database之间，数据会被隔离。每个Database都有若干时序数据表，结合 名词解释 的描述，我们可以对时序引擎的数据层级归纳为下图所示：...
分区设计
用户存有海量数据的表应该按照数据规模进行拆解，表的数据将拆解成多个数据分区独立存储，通常的设计原则是：主键（Primary Key）单实例数据库不要求表一定要有主键，但是对于分布式数据库，主键则是必须的，以保证一行数据是全局唯一的，...
局部事务
为数据表开启局部事务后，使用局部事务功能，您可以创建数据范围在一个分区键值内的局部事务并对局部事务中的数据进行读写操作。通过使用局部事务您可以实现单行或多行读写的原子操作。目前局部事务功能处于邀测中，默认关闭。如果需要使用...
表存储格式：列存、行存、行列共存
说明 orientation：指定了数据库表在Hologres中的存储模式是列存还是行存，Hologres从 V1.1版本开始支持行列共存的模式。建表时默认为列存（column storage）形式。行存或行列共存需要在建表时显式指定。修改表的存储格式需要重新建表，不...
原子计数器
设置的主键个数和类型必须与数据表的主键个数和类型一致。'primary_key'=>array(/第一列主键名为PK0，类型为整型，列值为123。array('PK0',123),/第二列主键名为PK1，类型为字符串，列值为'inc'。array('PK1','inc')),/更新的属性列。支持...
将自建ClickHouse数据迁移到云ClickHouse中
当您计划将自建数据库ClickHouse迁移到云数据库ClickHouse提升业务的可扩展性和可靠性时，本文档将为您提供实际操作指南以及如何处理可能遇到的问题。参考本文档迁移策略，您将能够高效、安全地完成数据迁移，并最大化云端环境的利益。说明...
INSERT ON CONFLICT(UPSERT)
使用数据集成或Flink写入数据时，如果需要对主键重复的行数据执行更新或跳过操作，则需进行如下配置：通过DataWorks的数据集成导入数据。数据集成已内置 INSERT ON CONFLICT 功能，该功能的实现原理请参见 Hologres Writer。同时，您需要...
使用GetRange接口查询数据时返回指定范围外的数据
例如当第一主键列设置 beginPrimaryKey=INF_MIN 和 endPrimaryKey=INF_MAX，第二主键列设置 beginPrimaryKey=10 和 endPrimaryKey=10，则返回的结果为全表数据，而不是第二主键列等于10的行。说明 最左匹配原则表示最左优先，只有当最左...
CREATE TABLE
设置默认值、自增列 设置主键 设置分布键 设置分区键与生命周期 设置聚集索引 设置全文索引 设置向量索引 设置冷热分层存储策略 表的数据分布策略 建表前，您可以通过下图中的示例，了解关于表的几个重要概念，包括分片、分区、聚集索引。...
DLA Lakehouse实时入湖
全量建仓或直连数据库进行分析对源库造成的压⼒较大，需要卸载线上压⼒规避故障。建仓延迟较⻓（T+1天），需要T+10m的低延迟入湖。更新频繁致小文件多，分析性能差，需要Upsert⾃动合并。海量数据在事务库或传统数仓中存储成本高，需要低...
连续查询
Lindorm时序引擎支持设置每个数据库的保数据有效期（TTL），您可以结合连续查询，将数据降精度后写入到有效期更长的数据库中。以下示例介绍了如何通过连续查询与数据库TTL设置来实现数据降精度与长期存储。示例 假设，原始数据采样周期为1...
Quick Audience修改保存数据集时报错“ID映射类型配置...
问题描述 Quick Audience修改保存数据集时报错“ID...解决方案 使用修改更新后的数据库表，重新创建Quick Audience的数据集，并设设置好主键信息。修改源数据库表，将原来配置过的主键字段更新回来，再重新保存数据集。适用于 Quick Audience
CREATE DATABASE
CREATE DATABASE 用于创建数据库。创建数据库 说明 每个集群最多可以创建2048个数据库。语法 CREATE DATABASE[IF NOT EXISTS]db_name 参数 db_name：数据库名。密码规则如下：长度不超过64个字符。以小写字符开头。可包含字母、数字以及...
创建同步Hologres
DataBase Hologres的数据库名称。无 Table Hologres用于接收数据的表名称。无 主键同步策略 当Hologres表设置主键时，从DataHub写入的数据的同步策略 replace:当写入发生主键冲突时，新的数据覆盖老数据 ignore:写入时发生主键冲突，忽略新...
主键类型报错
[Message]:Validate PK type fail.Input:VT_STRING,Meta:VT_BLOB.[RequestId]:00055f43-3d31-012b-62c3-980a3eefe39e,[TraceId]:02822839-3b5b-af35-409a-cf68841239fa,[HttpStatus:]400 原因 建表时设置的主键类型为binary，写入数据时...
配置SQL审核优化建议
可协助您在提交变更操作前审核、解决问题SQL，规避潜在问题SQL在变更到数据库后产生异常。前提条件 您的系统角色为 DBA 或 管理员，更多信息请参见 用户管理。已创建安全规则。具体操作，请参见 创建安全规则。数据库类型：MySQL：RDS ...
写入与查询
AnalyticDB MySQL版 是分布式数据库，查询在多个节点多线程执行，如果某些线程返回了满足LIMIT的行数，查询即终止，所以没有排序的LIMIT的查询结果是一个随机的过程，内部无法保证固定的线程返回结果。带分组的聚合查询，如果SELECT字段中...
数据库管理
数据库（Database）是表、索引、视图、存储过程、操作符的集合。您可以在一个 AnalyticDB PostgreSQL 实例中创建多个数据库，但是客户端程序一次只能连接上并且访问一个数据库，无法跨数据库进行查询。创建数据库 使用 CREATE DATABASE ...
创建数据库
您可以使用DMS（Data Management Service）、客户端（Navicat for MySQL、DBeaver、DBVisualizer、SQL WorkBench/J）、业务系统中的程序代码或者MySQL命令行工具连接 云原生数据仓库...，然后通过CREATE DATABASE语句创建数据库...
CREATE DATABASE
本文介绍创建数据库的基本语法。CREATE DATABASE基本语法如下：CREATE DATABASE[IF NOT EXISTS]db_name[ON CLUSTER cluster];参数说明：db_name：数据库名。以小写字母开头，可包含字母、数字以及下划线（_），但不能包含连续两个及以上的...
过滤器
使用SingleColumnValueFilter过滤数据 以下示例用于读取数据表中的一行数据，设置读取最新版本的数据以及根据Col0列的值过滤数据。private static void getRow(SyncClient client,String pkValue){/构造主键。PrimaryKeyBuilder ...
ALTER DATABASE
如果想要修改时序数据库的指定属性，或为其添加新的数据库属性，您可以使用 ALTER DATABASE 语句。引擎与版本 ALTER DATABASE语法 仅适用于时序引擎。无版本限制。语法 alter_database_statement:=ALTER DATABASE database_identifier[WITH...
局部事务
为数据表开启局部事务后，使用局部事务功能，您可以创建数据范围在一个分区键值内的局部事务并对局部事务中的数据进行读写操作。通过使用局部事务您可以实现单行或多行读写的原子操作。场景 使用局部事务功能，可以实现单行或多行读写的...
通过Mongo Shell管理数据库账号
roles":[{"role":"readAnyDatabase","db":"admin"}]} 查询目标数据库的所有数据库账号 说明 您可以通过 use database_name 命令切换数据库，其中 database_name 为目标数据库的名称。方式一：在目标数据库执行查询命令。show users 说明 ...
使用限制
如何处理主键冲突 如果直接在RDS中写入了数据，而对应的主键值不是 PolarDB-X 1.0 生成的Sequence值，那么后续让 PolarDB-X 1.0 自动生成主键写入数据库，可能会和这些数据发生主键冲突，您可以通过如下步骤解决此问题：通过 SHOW ...
CREATE EXTERNAL DATABASE
AnalyticDB MySQL 湖仓版（3.0）和 数仓版（3.0）支持通过 CREATE EXTERNAL DATABASE 创建外部数据库。注意事项 湖仓版（3.0）Spark引擎不支持通过 CREATE EXTERNAL DATABASE 创建外部数据库，请使用XIHE引擎。外部数据库中只能创建外表。...
过滤器
示例 使用SingleColumnValueFilter过滤数据 以下示例用于读取数据表中的一行数据，设置读取最新版本的数据以及根据Col0列的值过滤数据。private static void getRow(SyncClient client,String pkValue){/构造主键。PrimaryKeyBuilder ...
DROP DATABASE
语法 DROP DATABASE[IF EXISTS][catalog_name.]db_name 参数说明 参数 是否必选 说明 catalog_name 否 数据库的Catalog。db_name 是 数据库名，用于唯一识别一个数据库。示例 删除名为mydatabase的数据库。DROP DATABASE mydatabase;返回...
DROP DATABASE
DROP DATABASE用于移除一个数据库。简介 DROP DATABASE 移除一个数据库。它会移除该数据库的系统目录项并且删除包含数据的文件目录。它只能由数据库拥有者执行。当你已经连接到目标数据库时，它不能被执行（连接到 postgres 或者任何其他...
使用SDK时出现Validate PK size fail异常
介绍使用SDK时出现...现象 使用SDK更新数据时出现如下异常：Caused by:[ErrorCode]:OTSInvalidPK,[Message]:Validate PK size fail 原因 设置的主键个数和数据表的主键个数不一致。解决方案 设置的主键个数必须和数据表的主键个数一致。
RDS SQL Server中无法直接删除数据库的处理方法
问题描述 在RDS SQL Server实例中删除数据库时，会出现以下场景的报错：如果数据库没有会话，对于RDS SQL Server 2008、2012和2016版，是用镜像做的主备同步，直接使用 drop database SQL语句删除数据库会存在以下报错。The database 'XX' ...
DROP DATABASE
DROP DATABASE语法用于删除指定的数据库。引擎与版本 DROP DATABASE语法适用于宽表引擎和时序引擎。宽表引擎仅2.2.16及以上版本支持DROP DATABASE语法。时序引擎无版本限制。语法 drop_database_statement:=DROP DATABASE[IF EXISTS]...
- 产品推荐
- 这些文档可能帮助您