表表达式
表表达式 计算一个表。该表表达式包含一个 FROM 子句，该子句后面可以根据需要选用 WHERE、GROUP BY 和 HAVING 子句。最简单的表表达式只是引用磁盘上的一个表，一个所谓的基本表，但是我们可以用更复杂的表表达式以多种方法修改或组合基本...
选择列表
简介 如前面的小节说明的那样，在 SELECT 命令里的表表达式构造了一个中间的虚拟表，方法可能有组合表、视图、消除行、分组等等。这个表最后被选择列表传递下去处理。选择列表判断中间表的哪个 列 是实际输出。选择列表项 最简单的选择列表...
ALTER PARTITION TABLE
不要求与父表一致：即对应的属性分区子表可以与父表不一致，如果子表没有显式指定属性，则会继承父表的属性，若是子表显式指定属性，则会保留子表的属性。索引列必须包含父表的索引列：即分区子表的索引列必须包含父表的索引列，还能显式再...
逻辑表
配置完逻辑库后，系统会自动解析逻辑库中符合条件的物理表，生成逻辑表，您也可以手动更新逻辑表。本文介绍生成逻辑表的规则和手动更新逻辑表的方法。前提条件 已配置逻辑库。更多信息，请参见 逻辑库。逻辑库中有多张表结构相同且表名前缀...
公用表表达式
AnalyticDB PostgreSQL版 7.0版本增强了公用表表达式（Common Table Expression，简称CTE）功能，支持对CTE语句指定MATERIALIZED或NOT MATERIALIZED，可以更好地控制执行计划，能够有效提升SQL性能。功能简介 CTE可以在单个语句的执行范围...
CREATE PARTITION TABLE
不要求与父表一致：即对应的属性分区子表可以与父表不一致，如果子表没有显式指定属性，则会继承父表的属性，若是子表显式指定属性，则会保留子表的属性。索引列必须包含父表的索引列：即分区子表的索引列必须包含父表的索引列，还能显式再...
Hive连接器
公用表表达式和简单的Case表达式。设置时间戳精度。将全部Hive数据类型正确映射到Presto类型。处理自定义UDF的能力。配置属性 Hive配置属性 Hive连接器支持使用Jindo Table加速。EMR集群中内置了两个Hive连接器，分别为 hive.properties 和...
V5.4.x系列实例版本说明
单表和广播表支持随机物理表名。优化器支持Cascades搜索空间剪枝。支持AliSQL秒杀热点的语法。支持information_schema buffer相关的系统表：INNODB_BUFFER_POOL_STATS、INNODB_BUFFER_PAGE_LRU 和 INNODB_BUFFER_PAGE。新增GENERAL_DYNAMIC...
扫描全部/部分分库分表
CONDITION="condition_string"#使用TABLE和CONDITION中的内容计算物理库表名称[,NODE="node_list"])#过滤通过CONDITION计算出的结果，仅保留指定物理库#将SQL语句下发到指定分库分表上执行，显式指定物理表名 SCAN([TABLE=]"table_name_...
扫描全部/部分分库分表
CONDITION="condition_string"#使用TABLE和CONDITION中的内容计算物理表名称[,NODE="node_list"])#过滤通过CONDITION计算出的结果，仅保留指定物理库#将SQL语句下发到指定分库分表上执行，显式指定物理表名 SCAN([TABLE=]"table_name_list...
安全性
此外，如果不受信任的用户可以创建表，则只使用显式列出表的发布。也就是说，只有当超级用户信任允许在发布者或订阅者上创建非临时表的所有用户时，才创建 FOR ALL TABLES 的订阅。用于复制连接的角色必须具有 REPLICATION 属性（或者是...
VALUES列表
语法如下：VALUES(expression[,.])[,.]每一个被圆括号包围的表达式列表生成表中的一行。列表都必须具有相同数据的元素（即表中列的数目），并且在每个列表中对应的项必须具有可兼容的数据类型。分配给结果的每一列的实际数据类型使用和 ...
时间表达式语法
时间单位 时间表示式所支持的时间单位如下表所示：时间单位 说明 h 时 m 分 s 秒 示例 时间表达式示例如下表所示：时间表达式 说明-15m@m 先减15分钟再向下取整到分钟。例如，创建定时SQL任务时，配置 调度间隔 为 每天00:00，延迟执行 为 ...
配置数据质量监控
本文为您介绍如何配置表dwd_log_info_di_emr的数据质量监控规则。前提条件 在进行本实验前，请确保已完成 采集数据 和 加工数据。操作步骤 进入数据质量页面。登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据质量，在下拉框中...
配置集成管道质量监控
通过离线集成管道质量监控，Dataphin会自动为您监控数据表的质量，如果数据表有质量风险，系统会自动报警，通知告警接收人，帮助您及时了解数据表质量状况。本文为您介绍如何配置质量规则。权限说明 项目开发者支持创建集成任务、配置质量...
配置集成管道质量监控
通过离线集成管道质量监控，Dataphin会自动为您监控数据表的质量，如果数据表有质量风险，系统会自动报警，通知告警接收人，帮助您及时了解数据表质量状况。本文为您介绍如何配置质量规则。权限说明 项目开发者支持创建集成任务、配置质量...
车辆数据分析和价值挖掘
您可以单击 新建自定义存储表，跳转到 数据服务>数据存储>离线存储>自定义存储表 页面，新建自定义存储表，并按照 交互式分析 时展示的 输出结构 定义表结构。配置 调度策略生效日期、调度周期（小时、天）等。单击 校验设置。在 校验设置 ...
CREATE FOREIGN TABLE
CREATE FOREIGN TABLE定义一个新的外部表。语法 CREATE FOREIGN TABLE[IF NOT EXISTS]table_name([{ column_name data_type[OPTIONS(option 'value'[,.])][COLLATE collation][column_constraint[.]]|table_constraint }[,.]])[INHERITS...
CREATE FOREIGN TABLE
CREATE FOREIGN TABLE定义一个新的外部表。语法 CREATE FOREIGN TABLE[IF NOT EXISTS]table_name([{ column_name data_type[OPTIONS(option 'value'[,.])][COLLATE collation][column_constraint[.]]|table_constraint }[,.]])[INHERITS...
管理动态脱敏白名单
选中 自定义 后，请输入正则表达式匹配数据表，例如：您需要匹配所有名称中带有test的数据表，则正则表达式定义为.*test.*。生效时段 自定义动态脱敏白名单的生效时段。生效状态 选择是否开启动态脱敏白名单。单击 确定，完成动态脱敏白...
管理动态脱敏白名单
选中 自定义 后，请输入正则表达式匹配数据表，例如：您需要匹配所有名称中带有test的数据表，则正则表达式定义为.*test.*。生效时段 自定义动态脱敏白名单的生效时段。生效状态 选择是否开启动态脱敏白名单。单击 确定，完成动态脱敏白...
UPDATE
更新表的行。语法 UPDATE[optimizer_hint]table[subquery][@dblink]SET column={ expression|DEFAULT }[,.][WHERE condition][RETURNING return_expression[,.]{ INTO { record|variable[,.]}|BULK COLLECT INTO collection[,.]}]说明 ...
多表连接
开启MapJoin 当对一个大表和一个或多个小表执行join操作时，可以开启MapJoin显式指定小表以提升运算性能。说明 开启MapJoin功能仅支持MaxCompute（ODPS）引擎，对其它引擎无效。输出字段 配置当前节点输出到下游节点的字段列表，默认为所有...
数据同步模版
Flink CDC可以自动同步源中所有分库分表的全量和增量数据（包括新增的符合正则表达式的新表），同时还能实时将每张源表的表结构变更（加列等）实时同步到对应的目标表中。分库分表合并同步模版会将您的参数翻译成CTAS语句，有关CTAS语句的...
附录：SOFAStack 产品目录
SOFAStack 源于自蚂蚁内部沉淀十多年的金融级分布式中间件技术体系，吸收了支付宝自创立以来在关键金融交易系统锤炼出来的架构实践。SOFAStack 所有的产品技术均经过蚂蚁集团自身严苛的金融场景验证，为金融交易技术保证风险安全的同时，...
算子功能详解
Trigger组件“Trigger组件”是“Recall召回”组件的前置组件，获取召回表的trigger，只能存在一个同类型组件。点击“+”选择新增算子类型 选择trigger表 KV类型trigger表的trigger字段为STRING类型的非主键字段（非pk字段）。KKV类型...
Bucket Shuffle Join
在SQL语句中，A表与B表进行了Join操作，并且Join的等值表达式与A表的数据分布列相吻合。Bucket Shuffle Join会根据A表的数据分布信息，将B表的数据发送到对应的A表的数据存储计算节点。Bucket Shuffle Join开销如下：网络开销：B表数据量。...
配置并管理实时同步任务
勾选后可以在源端库表的 库过滤 搜索框和 表过滤 搜索框中填写正则表达式，实时同步运行过程中会自动识别源端数据库binlog中数据库名和表名符合正则表达式的变更，识别到这类变更后按照下面设置的 表名到Topic的映射规则 计算源端变更应该...
HBase Shell使用介绍
创建一个名称为test，列族名为cf的表 create 'test','cf' 查询所有表的信息 使用 list 命令来查询HBase数据库中所有表的信息，也可以使用正则表达式来过滤表。list list 'abc.*' list 'test' 插入数据 使用 put 命令为新创建的表插入数据。...
使用限制
不建议使用建表时自动关联的、以 AUTO_SEQ_为前缀的Group Sequence单独获取NEXTVAL，并使用获取的值通过 INSERT 显式插入该表中，这样做可能使该Group Sequence频繁刷新缓存区间，导致值增长过快。如何处理主键冲突 如果直接在RDS中写入了...
质量规则参数配置
两表字段值一致性比较：校验字段、选择比较表、关联表达式、校验表数据过滤：详情请参见 及时性 大类的 两表时间字段。两表字段统计值一致性比较：统计方式：可统计字段计数、字段最大值、字符重复率等，详情请参见指标 稳定性 大类的统计...
质量规则参数配置
两表字段值一致性比较：校验字段、选择比较表、关联表达式、校验表数据过滤：详情请参见 及时性 大类的 两表时间字段。两表字段统计值一致性比较：统计方式：可统计字段计数、字段最大值、字符重复率等，详情请参见指标 稳定性 大类的统计...
FMT 模式参与者
本文将介绍如何：配置数据源 创建数据表 针对 SOFARPC 或 Dubbo 进行 发布服务 FMT 模式参与者只需要替换数据源，即可将对该数据源的访问纳入到分布式事务中。一个数据源就是一个参与者。配置数据源 您可以选择以下任一数据源配置方案：...
列存索引
分区表达式包括普通分区表达式和bucket分区表达式，且普通分区表达式和bucket分区表达式中的字段均为宽表主键字段。普通分区表达式 可以指定0个或多个普通分区表达式，多个表达式用英文逗号（,）分隔。普通分区表达式为宽表主键字段（例如...
通过Lindorm Shell访问宽表引擎
支持使用正则表达式来过滤表。list list 'abc.*' list 'test' 查询指定表的数据。scan 是一种访问HBase数据的方式，它非常的灵活，scan 操作可以用来扫描全表或查询固定范围的数据。查询速度会比查询单条（使用 get）数据略慢一些。执行...
Join优化
表S数据不移动，表R数据根据分区计算的结果发送到S表扫表的节点 Colocation Join 对于多个相关联的表，在建表时确保表的数据分片数量一致，相同Hash分桶在分布式系统中的分布一致，那么实际查询时就可以跳过数据的Shuffle过程，直接进行...
分布式序列问题
分布式序列是否全局唯一 单库单表的分布式序列可以保证生成的序列 ID 全局唯一。分库分表的分布式序列仅保证单个分片的序列 ID 唯一，如果需要确保分库分表的分布式序列全局唯一，可以在序列 ID 中拼接分库分表位，以此保证全局唯一。分布...
配置ClickHouse输入组件
在①处配置筛选多表的表达式，连续多个表的格式如 table[A-Z]、table_[01-05]；不连续多个表使用半角分号;间隔。重要 选中的多个表必须 具有相同结构的表，否则会导致配置Oracle输入组件失败。切分键 您可以将源数据表中字段类型为整型的某...
配置PolarDB输入组件
在①处配置筛选多表的表达式，连续多个表的格式如 table[A-Z]、table_[01-05]；不连续多个表使用半角分号;间隔。重要 选中的多个表必须具有 相同结构的表，否则会导致配置PolarDB输入组件失败。切分键 您可以将源数据表中某一列作为切分键...
配置PolarDB输入组件
在①处配置筛选多表的表达式，连续多个表的格式如 table[A-Z]、table_[01-05]；不连续多个表使用半角分号;间隔。重要 选中的多个表必须具有 相同结构的表，否则会导致配置PolarDB输入组件失败。切分键 您可以将源数据表中某一列作为切分键...
- 产品推荐
- 这些文档可能帮助您