质量规则模板类型
数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是空值进行校验。字段空字符串校验 用于对单个字段是否是空字符串进行校验。唯一性 字段唯一性校验 用于对单字段唯一值/非唯一值进行校验。字段分组个数校验 ...
查看表资产详情
申请表资产前，了解表资产详情，有利于判断需申请的资产是否符合自己的期望。本文介绍如何查看公开的表资产详情。前提条件 已在运营模块中公开表资产。已在数据开发模块中创建公共节点和场景，并部署运行。已在数据标准模块中创建质量校验...
查看表资产详情
申请表资产前，了解表资产详情，有利于判断需申请的资产是否符合自己的期望。本文介绍如何查看公开的表资产详情。前提条件 已在运营模块中公开表资产。已在数据开发模块中创建公共节点和场景，并部署运行。已在数据标准模块中创建质量校验...
阿里邮箱发送的邮件被接收方判断为垃圾邮件
解决方案 对于已发出的邮件，收信系统收取后判断是否存在垃圾邮件特征，取决于收信邮箱服务器所采用的反垃圾策略规则，对于此类情况，无法从发信端彻底解决。如出现此类情况，请及时由收件方反馈收信邮箱服务商，结合其系统反垃圾检查策略...
生命周期操作
对于分区表，则根据各分区的 LastModifiedTime 判断该分区数据是否该被回收，当最后一个分区被回收后，该表不会被删除。如果您需要在最后一个分区被回收后自动删除该表，可以通过以下两种方式进行设置：说明 当项目级别与表级别的设置发生...
实时数仓Hologres
upsertSource 源表是否使用upsert类型的Changelog。Boolean 否 false 仅在CDC模式下生效。参数取值如下：true：仅支持Upsert类型，包括INSERT、DELETE、和UPDATE_AFTER。false（默认值）：支持所有类型，包括INSERT、DELETE、UPDATE_BEFORE...
常见问题
控制面板问题 云虚拟主机网站日志分析方法 主机管理控制台中主机域名解析状态显示失败 访问云虚拟主机统计报告页面显示乱码 屏蔽指定IP地址的方法 登录主机控制台出现“获取站点空间使用情况失败”报错 使用Discuz云平台诊断工具出现报错
sample-txc-mt-compensate-simple 样例
在一阶段，即 rollout 方法中首先将相关业务数据商品 ID（pid）和商品数据（number）插入到临时表 temp_stock 中用于后续失败的回滚，之后判断库存是否充足。如果库存不足，直接抛出异常；如果库存充足，执行具体扣库存操作。第二阶段，...
密钥非托管模式
本节介绍BaaS REST在密钥非托管模式下支持的查询类、交易类的接口能力，并提供各接口...调用的方法 返回参数 参数名 类型 说明 success boolean 请求是否成功 code string 状态码，200表示成功 data string 如果返回成功，则data无信息，否则...
Quick BI如何复制仪表板
产品名称 Quick BI 产品模块 仪表板 概述 本文向您介绍另存为按钮的入口，帮助您实现复制仪表板的需求。问题描述 已做好一个仪表板，由于另一个仪表板也和这个仪表板类似，如何复制一份快速搭建新的仪表板。解决方案 仪表板可以通过另存为...
系统表
PG系统表不能与业务创建的表进行关联查询，也不能将PG系统表的数据导入至业务创建的表中。说明 Hologres 从V1.3.22版本开始，支持PG系统表与业务创建的表进行Join，以及将系统表数据导出到Hologres表，如果有需求请您升级实例。在Hologres...
解读实例诊断报告
访问倾斜的判断标准、可能的原因及排查方法请参见下表。说明 如果诊断报告中提示某个性能指标发生了访问倾斜，您需要关注具体的倾斜节点。访问倾斜判断标准 可能的原因 排查方法 同时满足下述条件：实例的所有数据节点的性能指标峰值大于...
解读实例诊断报告
访问倾斜的判断标准、可能的原因及排查方法请参见下表。说明 如果诊断报告中提示某个性能指标发生了访问倾斜，您需要关注具体的倾斜节点。访问倾斜判断标准 可能的原因 排查方法 同时满足下述条件：实例的所有数据节点的性能指标峰值大于...
Python SDK概述
exist_table(table_name)判断表是否存在。get_table(table_name，project=project_name)获取指定表。允许跨项目获取表。create_table()创建表。read_table()读取表数据。write_table()写入表数据。delete_table()删除已经存在的表。表分区 ...
Explain和Explain Analyze
说明 通常情况下如果出现 rows=1000 则说明表的统计信息不正确，没有根据统计信息进行估算，可以通过执行 analyze命令对表进行统计信息更新。width 算子的预估输出平均宽度（单位：字节），值越大说明列越宽。Explain Analyze 语法格式 ...
存储压缩
在存储层，AnalyticDB PostgreSQL版本支持行存、Append-only行存和Append-only列存三种存储格式。其中，列存表支持在建表时指定压缩算法、对数据进行压缩。存储压缩可以有效帮助用户减少存储成本和I/O资源的消耗。使用方法 在创建Append-...
参数与条件表达式的使用
1.概述 在插件中，支持用户从当前的 请求、应答 或 系统上下文 中获取参数，并使用自定义的 条件表达式 对参数进行判断，本文描述 参数 的定义方法与 条件表达式 的书写方法。2.参数的定义 2.1.定义方式 在使用条件表达式前，需要先在 ...
使用介绍
常量，描述数值范围区间，支持开、闭与半开半闭区间 返回值 判断v是否在rangeDesc描述范围内，下表为支持的写法及返回值 调用写法示例 返回值 range(v,"[0,100]")0(v,"(0,100)")0(v,"[0,100)")0(v,"(0,100]")0(v,"(0,)")range(v,"(0,]")0(v...
使用介绍
内置UDF列表 复杂类型函数 函数名 功能简介 版本 contain 判断字段值在给定集合内 ALL notcontain 判断字段值不在给定集合内 ALL MATCHINDEX 使用给定的条件查询指定字段的倒排索引 ALL QUERY 使用给定的条件查询倒排索引,原HA3 query语法 ...
使用介绍
内置UDF列表 复杂类型函数 函数名 功能简介 版本 contain 判断字段值在给定集合内 ALL notcontain 判断字段值不在给定集合内 ALL MATCHINDEX 使用给定的条件查询指定字段的倒排索引 ALL QUERY 使用给定的条件查询倒排索引,原HA3 query语法 ...
管理问题数据
说明 是否为空值，是通过转换为SQL的is null进行判断。系统生成的问题数据表会保留字段值为空的问题数据，即所有空值均为问题数据。空值个数/总行数，固定值。空值的个数与行总数的比率与一个固定值进行比较。说明 该固定值是一个小数。...
一般SQL优化方法
在SQL语句中可以使用SQL优化，如添加索引、选择合适数据类型、避免使用 SELECT*、使用临时表暂存中间结果等方法，提高查询性能和简化数据库操作。优化能力 控制IN条件或OR条件的条目数量，过多的条目会导致RCA优化时间加长。尽量避免在...
热修复接入检查
queryAndLoadNewPatch()是判断&请求新补丁发的方法，该方法会读取设备信息，请在隐私判断之后调用。SDK其他代码不会涉及隐私合规问题。最新SDK版本是3.3.7。必须采用稳健接入，具体请参考 SDK稳健接入 热修复更新补丁时CheckList 四大组件...
表存储格式：列存、行存、行列共存
数据查询时，优化器会根据SQL，解析出对应的执行计划，执行引擎会根据执行计划判断走行存还是列存的查询效率更高，要求行列共存的表必须设置主键：对于主键点查场景（如 select*from tbl where pk=xxx 语句）以及 Fixed Plan加速SQL执行 ...
使用列索引加速ETL
使用方法 您可以在数据库中通过设置下表中的参数值来选择是否从只读列存节点读取数据，以及在读取数据时是否需要压缩文件。参数 说明 etl_from_imci 是否从只读列存节点读取数据。取值如下：ON：从只读列存节点读取数据。OFF（默认）：不从...
解决MDL锁导致无法操作数据库的问题
查看状态为 Waiting for table metadata lock 会话的 Info 列，找到该会话操作的表，例如 sbtest2。查看其他会话的 Info 列，找到正在对表 sbtest2 进行操作的会话，记录会话 Id。说明 这里需要找到的是一直在占用操作该表的会话，而不是...
一键导入MaxCompute数据
表名 MaxCompute的表名称，支持基于前缀模糊搜索。Hologres 目标表 数据库名 选择外部表所在的Hologres数据库名称。Schema Name Hologres的Schema名称。默认为 public Schema，您也可以选择其他有权限的Schema。表名 新建的Hologres外部表...
安全规则DSL语法
在条件语句中，可直接引用因子，例如：@fac.sql_type='DML'，判断SQL类型是不是DML。动作语句 动作是满足 if 条件之后系统执行的行为，例如：禁止提交工单、选择工作流、允许执行、拒绝执行等，这些动作表达了安全规则的主要目的。动作全部...
如何判断RDS MySQL的审计记录SQL语句是否执行成功
概述 本文主要介绍如何判断RDS MySQL的审计记录SQL语句是否执行成功。详细信息 SQL审计出现了一条更新语句，但是实际数据没有更新。RDS MySQL的SQL审计是基于网络报文分析所得，并不是执行成功的SQL语句才会记录。如果需要具体的判断更新...
根据领域对象批量生成相关模型
生成应用服务时，如果服务编码已存在，服务本身信息不做修改，并继续判断方法是否存在，如果方法编码也相同则不再判断出入参，该方法将不再重复生成。覆盖已有数据 编码相同的数据将被覆盖，包括名称和类型。不在生成范围内的数据不受影响...
列存索引中HashMatch算子的实现
对于存在PostFilter的RightOuter，若匹配左表HashMap后还需要经过PostFilter来判断其是否真正匹配。LeftSemi LeftSemi流程类似LeftOuter，但其并不真正输出左表和右表元组，而根据下面真值表输出左表元组和NULL/TRUE/FALSE值，或仅输出左表...
基础
[string]method：*[可选]*api中的方法，如isWindVaneSDK，copyToClipboard等。如果不传入method，则只判断当前版本是否支持API。回调参数[boolean]canUse：true代表当前版本支持传入的API，false代表不支持。var params={ api:'WVMotion',...
导入与导出
解决方法：只会在整库同步时才会发生，需要先判断源库是否为无主键表，如果是，请手动在目标库创建表并且保证新建的表有主键，建表后重启DTS任务即可。DTS同步数据至AnalyticDB MySQL集群时，如何解决建表字段默认值过长的报错？报错：...
分区表
表是否有合适的分区字段：如果数据量足够大了，这个时候需要看下是否有合适的字段能够用来分区，通常如果数据有时间维度，比如按天，按月等，是比较理想的分区字段。表内数据是否具有生命周期：通常数仓中的数据不可能一直存放，一般都会有...
RDS MySQL出现“the ...name' is full”报错的解决方法
问题描述 在使用RDS MySQL...更多信息 以下内容介绍如何判断查询是否使用内部临时表。使用explain查看执行计划，在Extra字段中有 Using temporary，则表示会使用内部临时表。explain select*from alarm group by created_on order by detail;
迁移指南
示例 假设您已将Parquet数据存储在directory/data-pipeline 中，并希望创建一个名为events的表。您始终可以读入DataFrame并另存为Delta表。这种方法复制数据，并让Spark管理表。另外，您可以转换到较快的Delta Lake，但会导致表格不受管理...
RDS MySQL出现“the ...name' is full”报错的解决方法
问题描述 在使用RDS MySQL...更多信息 以下内容介绍如何判断查询是否使用内部临时表。使用explain查看执行计划，在Extra字段中有 Using temporary，则表示会使用内部临时表。explain select*from alarm group by created_on order by detail;
数据倾斜调优
MapJoin在Map阶段会将指定表的数据全部加载在内存中，因此指定的表仅能为小表且表被加载到内存后占用的总内存不得超过512 MB。由于MaxCompute是压缩存储，因此小表在被加载到内存后，数据大小会急剧膨胀。此处的512 MB是指加载到内存后的...
SHOW COLUMNAR INDEX
语法 SHOW COLUMNAR {INDEX|INDEXES}[FROM[schema_name.]tbl_name]说明 schema_name和tbl_name是可选的，用于过滤表名或查看其他数据库上的表的信息。具体使用方法：SHOW COLUMNAR INDEX;查询当前数据库上所有表的列存索引信息 SHOW ...
列存索引配置参数说明
说明 如果查询语句中涉及的表没有统计信息，或未启用列存索引的基数估计和代价计算功能，即使该参数设置为ON，列存索引的join reorder功能也不会启用。loose_imci_ap_threshold 分发至列存节点的SQL语句的预估执行代价阈值。取值范围：1~...
- 产品推荐
- 这些文档可能帮助您