Trajectory最佳实践
您可考虑采用分区表的模式降低单表数据量。使用分区表请参见PostgreSQL文档中 分区表 相关章节。减少使用字符串类型属性 轨迹属性中如有大量的字符串属性，会导致存储空间浪费和性能下降。如果字符串为固定内容，可以转换为整型进行枚举，...
Trajectory最佳实践
您可考虑采用分区表的模式降低单表数据量。使用分区表请参见PolarDB文档中 分区表使用。减少使用字符串类型属性 轨迹属性中如有大量的字符串属性，会导致存储空间浪费和性能下降。如果字符串为固定内容，可以转换为整型进行枚举，建议在...
Blink和Flink常见问题及诊断
表类型 默认连接数（Flink作业的每个并发）Binlog源表 0 批量源表 1 维表 3（可以通过 connectionSize 参数调整）结果表 3（可以通过 connectionSize 参数调整）连接数计算方法 默认情况 默认情况下，作业使用的最大连接数可以通过如下公式...
pg_tables
列名称 列类型 描述 schemaname name 包含表的模式名。tablename name 表名。tableowner name 表拥有者的名称。tablespace name 包含表的表空间的名字（如果使用数据库的默认表空间，此列为空）。hasindexes bool 如果表有（或最近有过）...
INSERT ON CONFLICT(UPSERT)
根据UPDATE的原理，当表设置不同的存储格式时，不同UPDATE模式下的更新性能如下：列存表不同写入模式的性能排序如下。结果表无主键性能最高。结果表有主键时：InsertOrIgnore>InsertOrReplace>=InsertOrUpdate（整行）>InsertOrUpdate...
pg_tables
简介 pg_tables 视图包含以下列信息：列名称 类型 描述 schemaname name 表的模式名。tablename name 表名。tableowner name 表拥有者的名称。tablespace name 表的表空间的名称（如果使用数据库的默认表空间，此列为空）。hasindexes bool...
实时数仓Hologres
注意事项 使用了rpc模式时，VVR版本升级注意事项：Hologres 2.0版本下线了rpc（用于维表与结果表）模式，全面转为jdbc相关模式（目前包括jdbc、jdbc_fixed和jdbc_copy等），rpc模式不会对同一批次中相同主键的数据做去重，如果业务场景需要...
ALTER TABLE
ALTER TABLE 用于更改一个现有表的定义。简介 ALTER TABLE 更改一个现有表的定义。下文描述了几种形式。注意每一种形式所要求的锁级别可能不同。如果没有明确说明，将会获得一个 ACCESS EXCLUSIVE 锁。当给出多个子命令时，获得的锁将是子...
管理API
说明 从 表引导模式 切换为 脚本模式 时，系统将提示切换模式将清空请求参数和返回参数。该参数仅当 实例查询类型 为 单实例查询 模式时显示。选择表 表引导模式下，可选择需要执行查询的表。可通过输入关键字快捷查找表。该参数仅当 配置...
数据服务
说明 从 表引导模式 切换为 脚本模式 时，系统将提示切换模式将清空请求参数和返回参数。该参数仅当 实例查询类型 为 单实例查询 模式时显示。选择表 表引导模式下，可选择需要执行查询的表。可通过输入关键字快捷查找表。该参数仅当 配置...
MongoDB（公测中）
MongoDB连接器支持的信息如下：类别 详情 支持类型 源表、维表和结果表 运行模式 仅支持流模式 特有监控指标 源表 numBytesIn numBytesInPerSecond numRecordsIn numRecordsInPerSecond numRecordsInErrors currentFetchEventTimeLag ...
Hudi
类别 详情 支持类型 源表和结果表 运行模式 流模式和批模式 数据格式 暂不支持 特有监控指标 源表 numRecordsIn numRecordsInPerSecond 结果表 numRecordsOut numRecordsOutPerSecond currentSendTime 说明 指标含义详情，请参见 监控指标...
产品架构
LindormTable 的多副本架构基于PACELC理念设计，每一个数据表都支持单独支持设置一致性模式，从而拥有不同的可用性和性能。在最终一致模式下，服务端会对每一个读写请求在一定条件下触发多副本并发访问，从而大幅提升请求的成功率和减少...
OceanBase（公测中）
类别 详情 支持类型 源表、维表和结果表 运行模式 流模式和批模式 数据格式 暂不适用 特有监控指标 暂无 API种类 SQL 是否支持更新或删除结果表数据 是 前提条件 连接的数据库和表都已被创建。具体操作可参考以下文档：MySQL模式 CREATE ...
MySQL
类别 详情 支持类型 源表、维表和结果表 运行模式 仅支持流模式 数据格式 暂不适用 特有监控指标 源表 currentFetchEventTimeLag：数据产生到拉取到Source Operator的间隔。该指标仅在Binlog阶段有效，Snapshot阶段该值恒为0。...
配置AnalyticDB for MySQL 2.0输出组件
模式 选择数据输出的模式。模式 包括：Insert模式：Insert模式支持较小数据量（千万条）的写入。需配置 解析方案。填写准备语句：导入前执行的SQL脚本。填写完成语句：导入后执行的SQL脚本。Load模式：Load模式支持大批量数据（>1千万条）...
配置AnalyticDB for MySQL 2.0输出组件
模式 选择数据输出的模式。模式 包括：Insert模式：Insert模式支持较小数据量（千万条）的写入。需配置 解析方案。填写准备语句：导入前执行的SQL脚本。填写完成语句：导入后执行的SQL脚本。Load模式：Load模式支持大批量数据（>1千万条）...
创建索引
索引只能它的源表所在模式中创建。table 要创建索引的表的名称（可以采用模式限定的方式引用）。column 表中列的名称。expression 基于表中一列或多列的表达式。如语法所示，表达式通常必须用括号括起来。然而，如果表达式是函数调用的形式...
DBMS_RLS
DBMS_RLS系统包提供了向表添加细粒度访问控制策略的支持，能够灵活地隔离数据。DBMS_RLS子程序总览 子程序 说明 ADD_POLICY Procedure 向表添加细粒度的访问控制策略。ENABLE_POLICY Proceduree 启用或禁用一个细粒度的访问控制策略。DROP_...
RTL工程目录介绍
工程模式 Vivado设计套件是由FPGA厂商发布的集成设计环境，具有NoProject和Project两种工程模式，具体说明如下所示：NoProject模式 该模式需要将多个DCP文件整合成一个DCP文件，然后运行布局布线后，最终生成 bit 文件。F3实例的RTL开发...
创建数据板块
模式 描述 Dev-Prod模式 生成相互隔离的Dev和Prod数据板块，更强保障Prod数据板块中的数据安全。如果您管理诉求较强，数据研发人员较多且能力及分工明确，数据计算存储预算较高，推荐 此模式。创建Dev-Prod模式数据板块，请参见 创建Dev-...
创建数据板块
模式 描述 Dev-Prod模式 生成相互隔离的Dev和Prod数据板块，更强保障Prod数据板块中的数据安全。如果您管理诉求较强，数据研发人员较多且能力及分工明确，数据计算存储预算较高，推荐 此模式。创建Dev-Prod模式数据板块，请参见 创建Dev-...
Elasticsearch
Elasticsearch连接器支持的信息如下：类别 详情 支持类型 源表、维表和结果表 运行模式 批模式和流模式 数据格式 JSON 特有监控指标 源表 pendingRecords numRecordsIn numRecordsInPerSecond numBytesIn numBytesInPerSecond 维表 无 结果...
云数据库Redis
类别 详情 支持类型 维表和结果表 支持模式 流模式 数据格式 String 特有监控指标 维表：无 结果表：numBytesOut numRecordsOutPerSecond numBytesOutPerSecond currentSendTime 说明 指标含义详情，请参见 监控指标说明。API 种类 SQL ...
Qlik
使用限制 已知限制 Qlik Sense暂不支持同步PostgreSQL中外部表的表结构，因此无法在如下页面中查询到外部表元数据。该限制不影响直接使用SQL语句查询，如下图所示。Qilk暂不支持可视化显示Hologres的外部表，但是您可以在 数据加载编辑器 ...
ClickHouse
类别 详情 支持类型 仅支持结果表 运行模式 批模式和流模式 数据格式 暂不适用 特有监控指标 numRecordsOut numRecordsOutPerSecond currentSendTime 说明 指标含义详情，请参见 监控指标说明。API种类 SQL 是否支持更新或删除结果表数据 ...
FMT 模式参与者
本文将介绍如何：配置数据源 创建数据表 针对 SOFARPC 或 Dubbo 进行 发布服务 FMT 模式参与者只需要替换数据源，即可将对该数据源的访问纳入到分布式事务中。一个数据源就是一个参与者。配置数据源 您可以选择以下任一数据源配置方案：...
设计阶段
系分设计则包括表设计、Mapping设计和调度设计等最实际的设计工作。设计完毕后，最终将产出供开发人员参照实施开发的ETL设计文档、数据探查文档、调度设计文档，为需求的有效实现打下坚实基础。设计阶段的流程包括以下步骤：数据探查 数据...
结构设计
数据管理DMS提供的结构设计功能，可以实现对目标库、表进行符合研发规范的表结构设计。您可按需自定义不同业务线的研发流程，保障多套环境（例如开发环境、测试环境、生产环境）之间结构的一致性。本文以物理库为例，介绍进行结构设计的...
Serverless模式批量删除或更新数据性能测试
8.2s lineitem表：214.3s orders表：56.8s 半个月 38s 827s lineitem表：41.6s orders表：8.5s lineitem表：657.1s orders表：170.0s 一个月 40s 994s lineitem表：41.7s orders表：8.3s lineitem表：788.9s orders表：197.3s UPDATE 一天 ...
周期任务补数据
如果主键或来源表未发生变更，您可以选择全表补数据模式或指定字段补数据模式：全表：适用于数据表的所有字段都需要补数据的场景。说明 不包括注册上挂字段。指定字段：适用于需要自定义补数据的字段的场景，受到如下约束：有变更字段：...
周期任务补数据
如果主键或来源表未发生变更，您可以选择全表补数据模式或指定字段补数据模式：全表：适用于数据表的所有字段都需要补数据的场景。说明 不包括注册上挂字段。指定字段：适用于需要自定义补数据的字段的场景，受到如下约束：有变更字段：...
概览
Flink Catalog Flink支持导入Hologres元数据为Catalog，在Flink全托管控制台直接读取Hologres元数据，不用再手动注册Hologres表，可以提高开发效率且能保证表结构的正确性。Schema Evolution Flink全托管支持Schema Evolution，在Flink读取...
多元索引介绍
索引同步 用户为数据表创建了多元索引后，当在数据表中写入数据时，数据会先写入数据表中，数据写成功后会立即返回用户写成功，同时另一个异步线程会从数据表中读取写入的数据然后写入到多元索引，采用异步方式创建多元索引不会降低表格...
GetDataServiceApi
向导模式API支持Equal、Like和In，脚本模式API支持Equal，注册API支持Equal和Const。ParameterDataType Integer 0 数据类型，可选枚举值：0：String 1：Int 2：Long 3：Float 4：Double 5：Boolean 6：StringList 7：IntList 8：LongList 9...
表
本文为您介绍如何使用HoloWeb新建、编辑或删除内部表，以及预览内部表数据和DDL语句。前提条件 存在已登录实例，请参见 登录实例。新建内部表 登录 Hologres管理控制台。在顶部菜单栏左侧，选择相应的地域。单击 前往HoloWeb，进入HoloWeb...
代码模式建模
数据表创建完成后，您可以使用脚本模式通过FML语句配置表的字段及分区信息。本文为您介绍如何使用FML语句配置数据表的相关内容。前提条件 DataWorks目前不支持通过FML语言创建数据表，您需要提前使用可视化界面创建好维度表、明细表、汇总...
迁移HBase至Hologres
背景信息 Hologres支持行存表模式，在该模式下，提供高性能基于主键的点查能力，广泛应用在Flink维度表、ID-Mapping、标签获取、订单明细查询等场景中。相比传统的HBase等技术，Hologres保留了横向扩展能力和高性能的主键点查能力，同时...
任务管理
任务是指在DMS发起的变更SQL任务，例如普通数据变更、结构设计、库表同步等，但不包含在SQL窗口中直接执行的SQL。本文为您介绍了如何新建或管理SQL任务。前提条件 您的用户角色为管理员或DBA，关于用户角色信息，请参见 系统角色。操作步骤...
表结构发布流程化
本文以设计结构（Develop，简称Dev）、测试（Test）、生产发布（Product）的表结构设计步骤向您介绍规范、安全的表结构发布流程。背景信息 在新项目、新需求或者优化等业务场景中，一般会涉及到新建表、修改表（加减字段、加减索引、调整...
- 产品推荐
- 这些文档可能帮助您