DLA Lakehouse实时入湖
目标端主键字段 为指定库表设置主键字段。例如：库表选择输入 db1.user_*，主键字段输入 f1,f2，表示 db1 的所有 user_前缀的表都使⽤ f1,f2 两个字段作为组合主键。说明 如果不设置该参数，则系统依次尝试选择表中的主键或唯一键来作为...
过滤器
使用SingleColumnValueFilter过滤数据 以下示例用于读取数据表中的一行数据，设置读取最新版本的数据以及根据Col0列的值过滤数据。private static void getRow(SyncClient client,String pkValue){/构造主键。PrimaryKeyBuilder ...
连续查询
Lindorm时序引擎支持设置每个数据库的保数据有效期（TTL），您可以结合连续查询，将数据降精度后写入到有效期更长的数据库中。以下示例介绍了如何通过连续查询与数据库TTL设置来实现数据降精度与长期存储。示例 假设，原始数据采样周期为1...
检索Doc
output_fields=['name','age'],#仅返回name、age这2个Field include_vector=True)带过滤条件的相似性检索 Python#根据向量或者主键进行相似性检索+条件过滤 ret=collection.query(vector=[0.1,0.2,0.3,0.4],#向量检索，也可设置主键检索 ...
配置SQL审核优化建议
例如：将 表要有主键 的规则设置为必须改进，若开发人员在创建表时未设置主键，系统将会拦截SQL语句的执行，并要求开发人员针对该项规则进行修改，验证通过后才允许系统执行。潜在问题：提醒该SQL存在问题，但不会阻断流程。建议改进：建议...
使用GetRange接口查询数据时返回指定范围外的数据
例如当第一主键列设置 beginPrimaryKey=INF_MIN 和 endPrimaryKey=INF_MAX，第二主键列设置 beginPrimaryKey=10 和 endPrimaryKey=10，则返回的结果为全表数据，而不是第二主键列等于10的行。说明 最左匹配原则表示最左优先，只有当最左...
使用SDK时出现Validate PK size fail异常
介绍使用SDK时出现...现象 使用SDK更新数据时出现如下异常：Caused by:[ErrorCode]:OTSInvalidPK,[Message]:Validate PK size fail 原因 设置的主键个数和数据表的主键个数不一致。解决方案 设置的主键个数必须和数据表的主键个数一致。
检索Doc
构建QueryDocRequest QueryDocRequest request=QueryDocRequest.builder().vector(vector)/向量检索，也可设置主键检索.topk(100).filter("age>18")/条件过滤，仅对age>18的Doc进行相似性检索.outputFields(Arrays.asList("name","age"))/...
配置Elasticsearch输出
说明 选择_id主键取值方式，但却没有为该Elasticsearch主键映射源端字段，即选择业务主键取值方式但源端不存在主键，选择联合主键取值方式后未配置主键列，此时主键设置的取值方式不生效，同步时将随机生成_id值，此操作可能会带来数据重复...
CREATE TABLE
设置默认值、自增列 设置主键 设置分布键 设置分区键与生命周期 设置聚集索引 设置全文索引 设置向量索引 设置冷热分层存储策略 表的数据分布策略 建表前，您可以通过下图中的示例，了解关于表的几个重要概念，包括分片、分区、聚集索引。...
创建和管理自定义存储表
事务表：适用于自定义主键，数据按照主键粒度通过行级别更新和覆盖的表，类似于MySQL之类关系型数据库中的表。重要 该表最多支持存储3000万行的数据，超过3000万行的数据将无法写入。时序表：适用于存储随着时间不断追加的数据，例如设备...
Quick Audience修改保存数据集时报错“ID映射类型配置...
ErrorCode:ES0510100041 TraceId:NVL-ed0f778b-0f00-44e0-9ddb-40a5bab7ad65”，报错截图如下：问题原因 开始创建的数据集使用的主键ID，后来在数据库中此主键ID被修改或者删除了，导致再修改原来的数据集保存时，数据集识别不到原来的主键...
分区设计
用户存有海量数据的表应该按照数据规模进行拆解，表的数据将拆解成多个数据分区独立存储，通常的设计原则是：主键（Primary Key）单实例数据库不要求表一定要有主键，但是对于分布式数据库，主键则是必须的，以保证一行数据是全局唯一的，...
CREATE DATABASE
CREATE DATABASE 用于创建一个新的PolarDB数据库。简介 CREATE DATABASE 创建一个新的PolarDB数据库。要创建一个数据库，你必须是一个超级用户或者具有特殊的 CREATEDB 特权。默认情况下，新数据库将通过克隆标准系统数据库 template1 被...
全密态数据库性能测试报告
8.TPS（千）性能对比 并发线程数 未开启全密态数据库扩展 开启全密态数据库扩展 开启全密态数据库扩展+使用encdb_btree插件加速 8 14.97 2.83 7.8 16 28.89 5.53 15.2 24 42.38 7.15 20.09 32 54.8 8.75 24.86 测试结论 数据库在非主键列上...
如何集成langchain
bailian import Bailian import uuid def test_bailian_llm():"""测试基础llm功能"""#需要在环境变量设置ACCESS_KEY_ID、ACCESS_KEY_SECRET、AGENT_KEY和APP_ID access_key_id=os.environ.get("ACCESS_KEY_ID")access_key_secret=os....
跨域资源共享（CORS）
服务器收到OPTIONS请求后，设置Access-Control-Allow-Origin、Access-Control-Allow-Method、Access-Control-Allow-Headers、Access-Control-Max-Age头部与浏览器沟通来判断是否允许这个请求。如果Preflighted requests验证通过，浏览器才...
主键列自增
设置非分区键的主键列为自增列后，在写入数据时，无需为自增列设置具体值，表格存储 会自动生成自增列的值。该值在分区键级别唯一且严格递增。特点 主键列自增具有如下特点：自增列的值在分区键级别唯一且严格递增，但不保证连续。自增列的...
删除数据
表格存储提供了DeleteRow接口用于删除单行数据以及BatchWriteRow接口用于批量删除数据。重要 删除表数据，将导致数据不可恢复，请谨慎操作。前提条件 已初始化Client，详情请参见 初始化。已创建数据表并写入数据。删除单行数据 调用...
RDS for MySQL字符集相关说明
查看实例支持的字符序 show create table table_name \G#查看表字符集设置 show create database database_name \G#查看数据库字符集设置 show create procedure procedure_name \G#查看存储过程字符集设置 show procedure status \G#查看...
主键类型报错
[Message]:Validate PK type fail.Input:VT_STRING,Meta:VT_BLOB.[RequestId]:00055f43-3d31-012b-62c3-980a3eefe39e,[TraceId]:02822839-3b5b-af35-409a-cf68841239fa,[HttpStatus:]400 原因 建表时设置的主键类型为binary，写入数据时...
数据库管理
本文为您介绍如何创建和删除 PolarDB PostgreSQL版 数据库。创建数据库 登录 PolarDB控制台。在控制台左上角，选择地域。单击目标集群ID。在左侧导航栏中，选择 配置与管理>数据库管理。单击 创建数据库。在 创建数据库 对话框中，设置以下...
删除数据
表格存储提供了DeleteRow接口用于删除单行数据以及BatchWriteRow接口用于批量删除数据。重要 删除表数据，将导致数据不可恢复，请谨慎操作。前提条件 已初始化Client，详情请参见 初始化。已创建数据表并写入数据。删除单行数据 调用...
管理数据库
您可以在控制台管理所有的 PolarDB 数据库。创建数据库 登录 PolarDB控制台。在控制台左上角，选择集群所在地域。找到目标集群，单击集群ID。在左侧导航栏中，单击 配置与管理>数据库管理。单击 创建数据库。在 创建数据库 面板中，设置...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表的同时支持创建一个或者多个索引表。说明 创建数据表后需要几秒钟进行加载，在此期间对该数据...
主键列自增
设置非分区键的主键列为自增列后，在写入数据时，无需为自增列设置具体值，表格存储 会自动生成自增列的值。该值在分区键级别唯一且严格递增。重要 表格存储 从Java SDK 4.2.0版本开始支持主键列自增功能。注意事项 写入数据到带有自增主键...
terraform是否支持主键自增列？
目前通过terraform定义表主键时，暂不支持指定主键列自增。如果需要使用主键列自增功能，请通过表格存储控制台、命令行工具或者SDK在创建数据表时指定...重要 每张数据表最多只能设置一个主键列为自增列，主键中的分区键不能设置为自增列。
删除数据
表格存储提供了DeleteRow接口用于删除单行数据以及BatchWriteRow接口用于批量删除数据。说明 组成表的基本单位为行，行由主键和属性列组成。其中主键是必须的，且每一行的主键列的名称和类型相同；属性不是必须的，且每一行的属性可以不同...
pgAudit
审计读相关操作 执行以下命令，设置审计 pgaudit_testdb 数据库下的所有读操作。ALTER DATABASE pgaudit_testdb SET pgaudit.log='READ';设置完成后，pgaudit_testdb 数据库中的所有读操作（例如 SELECT）都会被审计。INSERT、UPDATE 等写...
pgAudit
审计读相关操作 执行以下命令，设置审计 pgaudit_testdb 数据库下的所有读操作。ALTER DATABASE pgaudit_testdb SET pgaudit.log='READ';设置完成后，pgaudit_testdb 数据库中的所有读操作（例如 SELECT）都会被审计。INSERT、UPDATE 等写...
pgAudit
审计读相关操作 执行以下命令，设置审计 pgaudit_testdb 数据库下的所有读操作。ALTER DATABASE pgaudit_testdb SET pgaudit.log='READ';设置完成后，pgaudit_testdb 数据库中的所有读操作（例如 SELECT）都会被审计。INSERT、UPDATE 等写...
pgAudit
审计读相关操作 执行以下命令，设置审计 pgaudit_testdb 数据库下的所有读操作。ALTER DATABASE pgaudit_testdb SET pgaudit.log='READ';设置完成后，pgaudit_testdb 数据库中的所有读操作（例如 SELECT）都会被审计。INSERT、UPDATE 等写...
配置并管理实时同步任务
数据集成附加字段支持的变量字段如下：EXECUTE_TIME：执行时间 UPDATE_TIME：更新时间 DB_NAME_SRC：原始数据库名称 DB_NAME_SRC_TRANSED：转换后数据库名称 DATASOURCE_NAME_SRC：源端数据源名称 DATASOURCE_NAME_DEST：目的端数据源名称 ...
同步更新Oracle数据库（oracle_fdw）
RDS PostgreSQL提供oracle_fdw插件，可以连接到Oracle数据库，通过操作PostgreSQL表同步更新Oracle数据库中的表。前提条件 实例为RDS PostgreSQL 12（内核版本20200421及以上）。说明 您可以执行 SHOW rds_supported_extensions;查看是否...
pg_db_role_setting
目录 pg_db_role_setting 为每一个角色和数据库组合记录被设置到运行时配置变量的默认值。和大部分系统目录不同，pg_db_role_setting 是在集簇的所有数据库之间共享的：在一个集簇中只有一份 pg_db_role_setting 拷贝，而不是每个数据库一...
配置并管理实时同步任务
数据集成附加字段支持的变量字段如下：EXECUTE_TIME：执行时间 UPDATE_TIME：更新时间 DB_NAME_SRC：原始数据库名称 DB_NAME_SRC_TRANSED：转换后数据库名称 DATASOURCE_NAME_SRC：源端数据源名称 DATASOURCE_NAME_DEST：目的端数据源名称 ...
数据操作
创建数据表后，您可以通过命令行工具在数据表中插入新数据、更新一行数据、读取数据、删除一行数据、扫描数据以及导入导出数据。插入新数据 在表中插入新数据。您也可以通过导入JSON格式的配置文件来插入新数据到表中。命令格式 put-pk '...
一键实时同步至AnalyticDB for MySQL 3.0
数据集成附加字段支持的变量字段如下：EXECUTE_TIME：执行时间 UPDATE_TIME：更新时间 DB_NAME_SRC：原始数据库名称 DB_NAME_SRC_TRANSED：转换后数据库名称 DATASOURCE_NAME_SRC：源端数据源名称 DATASOURCE_NAME_DEST：目的端数据源名称 ...
数据传输服务DTS
任务创建 在 Source（源）配置向导，选择 数据提供方 为 数据库 DTS，设置以下参数，然后单击 下一步。参数 说明 示例 数据订阅任务 选择您在 数据传输服务DTS控制台 上创建的数据订阅任务ID。dts8jqe*接入方式 默认为创建的数据订阅任务的...
使用限制
如何处理主键冲突 如果直接在RDS中写入了数据，而对应的主键值不是 PolarDB-X 1.0 生成的Sequence值，那么后续让 PolarDB-X 1.0 自动生成主键写入数据库，可能会和这些数据发生主键冲突，您可以通过如下步骤解决此问题：通过 SHOW ...
- 产品推荐
- 这些文档可能帮助您