表删除，更新和合并
在这个部分：写入Delta表时的重复数据删除 缓慢将数据（SCD）类型2操作更改为Delta表 将更改数据写入Delta表 使用Upsert 从流式处理查询foreachBatch 写入Delta表时的重复数据删除 一个常见的ETL用例是通过将日志附加到表中来将日志收集到...
表存储格式：列存、行存、行列共存
Hologres支持三种表存储格式，分别为：行存、列存和行列共存，不同的存储格式适用于不同的查询场景，您需要根据表的使用场景设置表的存储格式，合适的存储格式可以显著提高数据处理和查询速度，同时也可以节省存储空间。设置存储格式语法 ...
配置MySQL输入组件
如果 来源表 选择了 多表，则执行以下操作，添加表：在输入框中，输入表的表达式，筛选具有相同结构的表。系统支持枚举形式、类正则形式及两者混合形式，例如 table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择匹配的...
配置MySQL输入组件
如果 来源表 选择了 多表，则执行以下操作，添加表：在输入框中，输入表的表达式，筛选具有相同结构的表。系统支持枚举形式、类正则形式及两者混合形式，例如 table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择匹配的...
配置TiDB输入组件
如果 来源表量 选择了 多表，则执行以下操作，添加表：在输入框中，输入表的表达式，筛选 具有相同结构的表。系统支持枚举形式、类正则形式及两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择...
配置TiDB输入组件
如果 来源表量 选择了 多表，则执行以下操作，添加表：在输入框中，输入表的表达式，筛选 具有相同结构的表。系统支持枚举形式、类正则形式及两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择...
配置GBase 8a输入组件
如果 来源表量 选择了 多表，则执行以下操作，添加表：在输入框中，输入表的表达式，筛选 具有相同结构的表。系统支持枚举形式、类正则形式及两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择...
配置GBase 8a输入组件
如果 来源表量 选择了 多表，则执行以下操作，添加表：在输入框中，输入表的表达式，筛选 具有相同结构的表。系统支持枚举形式、类正则形式及两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择...
配置Impala输入组件
如果 来源表量 选择了 多表，则执行以下操作，添加表：在输入框中，输入表的表达式，筛选 具有相同结构的表。系统支持枚举形式、类正则形式及两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择...
配置OpenGauss输入组件
如果 来源表量 选择了 多表，则执行以下操作，添加表：在输入框中，输入表的表达式，筛选 具有相同结构的表。系统支持 枚举形式、类正则形式 及 两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，...
配置KingbaseES输入组件
如果 来源表量 选择了 多表，则执行以下操作，添加表：在输入框中，输入表的表达式，筛选 具有相同结构的表。系统支持枚举形式、类正则形式及两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择...
配置GoldenDB输入组件
如果 来源表量 选择了 多表，则执行以下操作，添加表：在输入框中，输入表的表达式，筛选 具有相同结构的表。系统支持枚举形式、类正则形式及两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择...
配置OpenGauss输入组件
如果 来源表量 选择了 多表，则执行以下操作，添加表：在输入框中，输入表的表达式，筛选 具有相同结构的表。系统支持 枚举形式、类正则形式 及 两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，...
配置KingbaseES输入组件
如果 来源表量 选择了 多表，则执行以下操作，添加表：在输入框中，输入表的表达式，筛选 具有相同结构的表。系统支持枚举形式、类正则形式及两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择...
配置StarRocks输入组件
如果 来源表量 选择了 多表，则执行以下操作，添加表：在输入框中，输入表的表达式，筛选 具有相同结构的表。系统支持 枚举形式、类正则形式 及 两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，...
配置StarRocks输入组件
如果 来源表量 选择了 多表，则执行以下操作，添加表：在输入框中，输入表的表达式，筛选 具有相同结构的表。系统支持 枚举形式、类正则形式 及 两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，...
配置Impala输入组件
如果 来源表量 选择了 多表，则执行以下操作，添加表：在输入框中，输入表的表达式，筛选 具有相同结构的表。系统支持枚举形式、类正则形式及两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择...
列式JSONB
为了提升JSONB数据的查询效率，Hologres从 V1.3版本开始支持对于JSONB类型开启列式存储优化，能够降低JSONB数据的存储大小并加速查询。本文将会为您介绍Hologres中列式JSONB的使用。列式JSONB原理介绍 如下图所示开启JSONB列式存储优化后，...
配置PostgreSQL输入组件
如果 来源表 选择了 多表，则执行以下操作，添加表：在输入框中，输入表的表达式，筛选 具有相同结构的表。系统支持枚举形式、类正则形式及两者混合形式，例如 table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择匹配...
配置DM（达梦）输入组件
如果 来源表 选择了 多表，则执行以下操作，添加表：在输入框中，输入表的表达式，筛选具有相同结构的表。系统支持枚举形式、类正则形式及两者混合形式，例如 table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择匹配的...
配置GoldenDB输入组件
如果 来源表量 选择了 多表，则执行以下操作，添加表：在输入框中，输入表的表达式，筛选 具有相同结构的表。系统支持枚举形式、类正则形式及两者混合形式，例如：table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择...
配置DM（达梦）输入组件
如果 来源表 选择了 多表，则执行以下操作，添加表：在输入框中，输入表的表达式，筛选具有相同结构的表。系统支持枚举形式、类正则形式及两者混合形式，例如 table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择匹配的...
配置PostgreSQL输入组件
如果 来源表 选择了 多表，则执行以下操作，添加表：在输入框中，输入表的表达式，筛选 具有相同结构的表。系统支持枚举形式、类正则形式及两者混合形式，例如 table_[001-100];table_102。单击 图标。在 确认匹配详情 对话框中，选择匹配...
访问列存数据
列存即列式存储，是一种将数据按列进行存储和处理的数据管理方式。Lindorm计算引擎支持将半结构化、结构化数据以列存方式进行存储，相较于行式存储，列式存储的查询响应时间更短，消耗IO更少。本文介绍如何通过计算引擎访问Lindorm列存数据...
建表概述
表是存储和组织数据的基本单位，合理地创建表、设置表索引及属性，可以为您提供高效的数据处理和分析能力。本文为您介绍在Hologres中的建表语法、设置索引和HoloWeb可视化建表。建表语法 命令格式 Hologres的建表语法兼容PostgreSQL，通过...
AUTO模式数据库与DRDS模式数据库
功能对比 与DRDS模式数据库相比，AUTO模式数据库新增了自动分区、热点分裂、分区调度和TTL表等新特性，并在很多其它方面（如分区管理、拆分变更等）做了大量工作以优化分布式体验。AUTO模式数据库与DRDS模式数据库主要功能对比：功能项 ...
配置示例：MaxCompute
配置分区表达式 数据质量通过分区表达式来确定需要配置的规则：如果您的检查对象为非分区表，可以配置分区表达式为 NOTAPARTITIONTABLE。如果您的检查对象为分区表，可以配置为业务日期的表达式（例如$[yyyymmdd-1]）。说明 数据质量规则中...
Spark SQL
同样的,建表语句必须显式指定表的存储 LOCATION 信息,类似如下SQL语句。CREATE TABLE table1(col1 INT)LOCATION 'oss:/test/db1/table1/';需要注意以下几个事项：当用户在Spark中DROP一个表或者表的某个 PARTITION 时，并不会删除OSS上的...
全增量实时同步至Hologres
如上图所示，使用 源端表名 将源端表名作为目标表名称，并且将源端表名中符合 t_order.*正则表达式的表数据写入到Hologres名为 t_order 表中。应用目标schema名与表名映射规则。选中待同步的所有表，单击 批量修改>目标Schema名映射自定义 ...
CREATE FOREIGN TABLE
CREATE FOREIGN TABLE定义一个新的外部表。语法 CREATE FOREIGN TABLE[IF NOT EXISTS]table_name([{ column_name data_type[OPTIONS(option 'value'[,.])][COLLATE collation][column_constraint[.]]|table_constraint }[,.]])[INHERITS...
CREATE FOREIGN TABLE
CREATE FOREIGN TABLE定义一个新的外部表。语法 CREATE FOREIGN TABLE[IF NOT EXISTS]table_name([{ column_name data_type[OPTIONS(option 'value'[,.])][COLLATE collation][column_constraint[.]]|table_constraint }[,.]])[INHERITS...
一键同步MaxCompute表结构
如果同步外部表时，存在外部表不支持的数据类型，则系统会报错 请在正则表达式中排除当前表再重新导入。在新建节点的编辑页面，单击 图标，保存配置信息。在新建节点的编辑页面，单击 图标，批量创建外部表结构。在 PG管理 页面，查看批量...
一键同步MaxCompute表结构
如果同步外部表时，存在外部表不支持的数据类型，则系统会报错 请在正则表达式中排除当前表再重新导入。在新建节点的编辑页面，单击 图标，保存配置信息。在新建节点的编辑页面，单击 图标，批量创建外部表结构。在 PG管理 页面，查看批量...
配置规则：按表（单表）
数据质量支持按照数据表配置质量监控规则，用来监控表数据是否符合要求，自动拦截问题任务，阻断脏数据向下游蔓延，保障产出的表数据符合预期。规则配置完成后，您可先试跑该规则，确保质量规则的配置符合预期。同时，还可对质量规则执行...
ALL_IND_EXPRESSIONS
表达式索引是基于表中一列或多列的表达式建立的索引，可以提高访问这些表达式结果查询的性能。相应的 dba_ind_expressions 视图提供完全相同的信息，但只会提供给高权限用户使用。而 user_ind_expressions 视图提供完全相同的信息，只会...
CREATE TABLE AS（CTAS）语句
通过CTAS语句，在实时同步数据的同时，还能实时将上游表结构（Schema）的变更同步到下游表，提高您在目标存储中创建表和维护源表结构变更的效率。本文为您介绍CREATE TABLE AS（CTAS）的使用方法，并提供了多种使用场景下的示例。前提条件 ...
GRANT LABEL
注意事项 显式授予用户的表的列Label权限，会覆盖显式授予用户的表的Label权限。命令格式 grant Label<number>on table[()]to {USER|ROLE}[with exp];参数说明 参数名称 是否必填 说明 number 是 指定用户或角色可访问的最高数据敏感等级。...
质量规则参数配置
两表字段值一致性比较：校验字段、选择比较表、关联表达式、校验表数据过滤：详情请参见 及时性 大类的 两表时间字段。两表字段统计值一致性比较：统计方式：可统计字段计数、字段最大值、字符重复率等，详情请参见指标 稳定性 大类的统计...
质量规则参数配置
两表字段值一致性比较：校验字段、选择比较表、关联表达式、校验表数据过滤：详情请参见 及时性 大类的 两表时间字段。两表字段统计值一致性比较：统计方式：可统计字段计数、字段最大值、字符重复率等，详情请参见指标 稳定性 大类的统计...
Hologres源表
本文为您介绍在独享Blink中如何创建交互式分析Hologres源表。使用说明 Hologres源表默认使用批模式读取数据，即对全表数据仅扫描一次。扫描结束，消费即结束，扫描结束后输入的数据将不会被Hologres源表读取。如果您需要使用实时消费...
- 产品推荐
- 这些文档可能帮助您