CREATE TABLE（AUTO模式）
前缀分区列：若一个向量分区键由N（N>1）个分区列组成，它的前K（1）个分区列便组成这个向量分区键的前缀分区列。分区函数：将分区列作为一个函数的输入参数，并将该函数的输出结果作为原始值参与路由计算，该函数被称为分区函数。分区裁剪...
图形认证服务端集成
生成签名#生成签名使⽤标准的hmac算法，使用用户当前完成验证的流水号lot_number作为原始消息mess#采用sha256散列算法将message和key进行单向散列生成最终的签名 lotnumber_bytes=lot_number.encode()prikey_bytes=captcha_key.encode()...
HASH
LINEAR HASH与HASH的不同之处在于，LINEAR HASH使用线性二次幂算法，而HASH使用散列函数值的模数。在语法上，LINEAR HASH和HASH的唯一区别是LINEAR在PARTITION BY子句中添加了关键字。示例 HASH类型的使用示例：CREATE TABLE sales_hash(s_...
AUTO模式数据库与DRDS模式数据库
支持采用按分区数取模的路由算法，不支持热点散列。Range分区&Range Columns分区 支持，支持热点散列。不支持。List分区&List Columns分区 支持。不支持。向量分区键（使用多个列作为分区键）支持。分区键支持按向量分区，例如 PARTITION ...
动态增加或删除列存索引的DDL语法
本文介绍了如何在建表之后，通过DDL语句动态创建和删除列存索引。前提条件 在添加完只读列存节点，并配置好对应的集群地址后，您可以通过集群地址连接到集群，使用SQL语句创建并管理列存索引。添加只读列存节点。配置集群地址。为了实现行...
如何设计宽表主键
最佳设计示例：设计md5散列算法，主键设计为[md5(userid).subStr(0,4)][userId][orderid]。设计反转，主键设计为[reverse(userid)][orderid]。设计取模，主键设计为[bucket][timestamp][hostname][log-event];long bucket=timestamp%...
设置列存数据压缩算法
为了提高列存模式下的压缩效率，降低存储成本，您可以为创建的列存索引设置压缩算法。本文介绍如何设置和修改列存索引的压缩算法。支持的压缩算法 当前 PolarDB MySQL版 支持两种IMCI的压缩算法：LZ4压缩、ZSTD压缩。LZ4：一种无损数据压缩...
高斯混合模型预测
算法保留列名 选择算法保留的列名称。参数设置 预测结果列名 预测结果列的列名称。预测详细信息列名 预测详细信息列的列名。组件多线程线程个数 组件多线程的线程个数，默认为1。执行调优 节点个数 与 单个节点内存大小 参数配对使用。取值...
swing推荐
算法保留列名 算法保留列的名称。参数设置 推荐结果列名 推荐结果列的名称。推荐TOP数量 推荐的TOP数量，默认为10。组件多线程线程个数 组件多线程的线程个数，默认为1。执行调优 节点个数 节点个数，与参数 单个节点内存大小 配对使用，正...
Lasso回归预测
可视化配置组件参数 输入桩 输入桩（从左到右）数据类型 建议上游组件 是否必选 预测输入模型 无 Lasso回归训练 是 预测输入数据 无 读数据表 特征工程 数据预处理 是 组件参数 页签 参数 描述 字段设置 算法保留列名 选择算法保留列的名称...
岭回归预测
可视化配置组件参数 输入桩 输入桩（从左到右）数据类型 建议上游组件 是否必选 预测输入模型 无 岭回归训练 是 预测输入数据 无 读数据表 特征工程 数据预处理 是 组件参数 页签 参数 描述 字段设置 算法保留列名 选择算法保留列的名称。...
秒级加字段
该表记录了使用Instant算法增加的列信息，例如列名、列序号和默认值（二进制方式存储）等。您可通过如下语句查看该表详情来确认新增的列信息。SELECT*FROM INFORMATION_SCHEMA.INNODB_SYS_INSTANT_COLUMNS;说明 对目标表使用了Instant算法...
新增脱敏算法
敏感数据保护功能提供了哈希、遮掩、替换、变换、加密五类脱敏算法，您可以基于某个内置的脱敏算法自定义不同的脱敏规则，从而形成灵活、多样的脱敏策略。敏感数据保护功能中内置了一个全遮掩的脱敏规则，如果您需要其他的脱敏方式，可以...
Prophet
Prophet是Facebook开源的时间序列预测算法，适用于具有一定规律的数据。Prophet组件通过对每一行的MTable数据，进行Prophet时间序列预测，给出下一时间段的预测结果。本文为您介绍Prophet组件的配置方法。使用限制 支持的计算引擎为...
数据脱敏
背景信息 数据脱敏是指对某些敏感信息，例如姓名、身份证号码、手机号、固定电话、银行卡号、邮箱等个人信息，通过脱敏算法进行数据变形，以保护敏感隐私数据。概念介绍 数据脱敏：在数据处理和数据存储过程中，通过一定的算法和技术，将...
Encrypt
关于KMS的加密算法默认值，请参见本文 使用说明 表格中的 加密算法 列。PaddingMode string PKCS7_PADDING 填充模式。仅当加密算法（Algorithm参数）为AES_CBC或AES_ECB时，本参数返回有效值，其他场景返回空值。RequestId string 475f1620...
表操作篇
对 OrderNumber 使用 md5 算法计算前缀（您也可以采取其他哈希散列算法），拼接成 HashOrderNumber。因为 md5 算法计算得到的哈希字符串可能过长，我们只需要取前几位就能达到让 OrderNumber 相连的记录在表中随机分布的目的。在这个例子中...
管理敏感数据
当您需要调整敏感列的安全级别、脱敏算法、授予或回收指定用户查询、导出或变更敏感列数据的权限时，您可参考本文进行操作。前提条件 用户角色为管理员、DBA和安全管理员。说明 鼠标移动到界面右上角的，查看您的角色。支持的数据库：关系...
Decrypt
具体的取值和默认值，请参见本文 使用说明 表格中的 加密算法 列。重要 必须与加密时使用的算法相同。Iv bytes 否 二进制数据 对数据加密时使用的初始向量。仅当解密算法（Algorithm参数）为AES_GCM、AES_CBC或SM4_GCM时需要提供本参数。...
时序异常检测
本文介绍异常检测算法的概念和时序异常检测的语法。引擎与版本 时序异常检测仅支持时序引擎。无版本要求。使用限制 时序异常检测必须和 SAMPLE BY 语句搭配使用。功能简介 时序异常检测用于检测指定时间线上异常点的值，支持阿里达摩院自研...
I-V曲线诊断
数据服务中提供光伏智能运维的IV曲线诊断算法，结合环境光强度、环境温度等影响因素，对组串式光伏发电阵列的电流-电压曲线（I-V曲线）进行分析，检测系统可能出现的故障，进而提高设备的运行效率，保障电站高效运行。本文介绍光伏智能运维...
列存索引如何实现高效数据过滤
列存索引中TopK算子的实现 一文中介绍了PolarDB IMCI如何利用统计信息在运行时进行剪枝，以提高TopK算法的查询性能。本文将进一步全面介绍PolarDB IMCI的查询剪枝（pruning or data skipping）技术。背景与作用 在HTAP场景中，PolarDB IMCI...
历史版本常见问题
UNI_HASH/RANGE_HASH/STR_HASH/RIGHT_SHIFT在部分场景下分区路由不均衡 现象描述 PolarDB-X 1.0 使用UNI_HASH/RANGE_HASH/STR_HASH/RIGHT_HASH的哈希算法分库分表时，如果分库分表列是同一个列，有可能会出现个别物理分表没有数据的现象。...
优化内部表的性能
本文为您介绍在Hologres中对内部表性能进行调优的最佳实践。更新统计信息 统计信息决定是否能够生成正确的执行计划。...产生OOM的原因有多种，比如计算复杂、并发量高等，可以根据不同的原因进行针对性优化，从而减少OOM。详情请参见...
表存储格式定义
列存表 列存表（Column-Oriented Table）的按列存储格式，数据访问只会读取涉及的列，适合少量列的数据查询、聚集等数据仓库应用场景，在此类场景中，列存表能够提供更高效的I/O。但列存表不适合频繁的更新操作或者大批量的INSERT写入场景...
Dataphin中重装项目安全策略是否会影响...规则、脱敏算法
概述 本文主要介绍Dataphin中重装资产...重装过程中，会清理掉内置的脱敏算法，再重新安装最新版本的算法，这个过程中，会短暂的影响脱敏算法的使用，大概持续2分钟左右；重装完毕，即可正常使用。相关文档 项目安全策略 适用于 Dataphin3.7
分区索引
加盐因子的其他值表示如下：salt_factor=1：表示相同storeId列的数据，不同goodsId列的数据会被散列到分区总数量的一半中。salt_factor=2：表示相同storeId列的数据，不同goodsId列的数据会被散列到分区总数量的1/4中。salt_factor=3：表示...
CREATE TABLE
加盐因子的其他值表示如下：salt_factor=1：表示相同storeId列的数据，不同goodsId列的数据会被散列到分区总数量的一半中。salt_factor=2：表示相同storeId列的数据，不同goodsId列的数据会被散列到分区总数量的1/4中。salt_factor=3：表示...
机制
有散列和无散列 Hash/digest（哈希值）：SHA1，SHA224，SHA256，SHA384和SHA512 密钥封装：AES Key Wrap，AES-GCM，RSA-AES和RSA-OAEP 导出密钥：ECDH 支持的密钥生成机制 CKM_GENERIC_SECRET_KEY_GEN CKM_DES3_KEY_GEN CKM_AES_KEY_GEN ...
使用扩展属性定制列存索引
您可以使用列存索引的扩展属性来定制列存索引。本文介绍了列存索引的扩展属性以及使用扩展属性来定制列存索引的方法。扩展属性 pack_shift 用于设置列存索引数据的行组（row group）大小。列存索引数据的行组大小主要影响内存常驻部分数据...
功率时序曲线诊断
数据服务提供功率时序曲线诊断算法，应用于光伏智能运维检测，通过对功率时序曲线的特征分析，可以发现潜在的发电低效站点并进行预警，引导运维人员及时定位排查，从而降低运维成本并提高电站的经济回报。本文介绍光伏智能运维中功率时序...
时序异常检测
数据服务提供时序异常检测算法，采用智能时序算法，实时分析设备时序数据，准确感知设备异常现象。查看基本信息 在 物联网平台控制台 的 实例概览 页面，单击目标企业版实例卡片。在左侧导航栏，选择 数据服务>数据智能。在算法模板列表中...
新建表
在创建虚拟列时需要定义虚拟列依赖的表达式，虚拟列包含 Virtual Column 和 Stored Column，仅在使用时会根据表达式计算出虚拟列的值，因此在向表中插入数据的时候，不能为虚拟列指定要插入的值。缺省值/表达式 该字段（列）的默认值/表达...
查看算法实例运行日志
配置算法实例完成后，您可以查看实例运行状态。如果因为资源不足造成任务运行失败，或者数据不完备造成错误，您可以查看运行日志定位具体问题，进行实例运维。前提条件 已完成算法实例配置。查看运行日志 在 物联网平台控制台 的 实例概览 ...
兼容PostgreSQL 14版本公测结束，正式版上线
支持LZ4压缩算法 PostgreSQL 14版本支持用户选择LZ4算法进行数据列压缩的能力，提高压缩性能，同时仍保留对原来pglz压缩方式的支持。安全特性增强 PostgreSQL 14版本可以通过使用 pg_read_all_data 和 pg_write_all_data 两个预定义的角色...
分层采样
给定一个分组列，分层采样算法组件按照这些列的不同值，将输入数据分成不同的组，并在每组中分别进行随机采样。组件配置 您可以使用以下任意一种方式，配置分层采样组件参数。方式一：可视化方式 在 Designer 工作流页面配置组件参数。页签...
使用EasyRec构建推荐模型
背景信息 EasyRec算法库是阿里云 PAI 的推荐算法工具，包含DeepFM、DIN、MultiTower及DSSM等经典推荐排序和召回算法，可以帮助您在PAI平台上快速训练推荐算法模型、验证模型效果及部署。EasyRec算法库已经在信息推送、游戏、直播及竞价广告...
数据脱敏
找不到脱敏目标实例 可能的原因有实例授权取消或目标实例删除等。找不到脱敏源表 可能的原因有实例授权取消、源表删除等。脱敏算法参数设置有误 算法参数填写错误。源表列为空 源分区字段的列没有数据。写入目标表失败 目标位置配置时写入...
Beam使用（公测）
指定压缩算法 Beam支持多种压缩算法，您可以根据实际业务需要，选择不同的压缩算法。Beam支持ZSTD、LZ4、AUTO和GDICT压缩算法。默认使用LZ4 9级压缩，以提供在大部分场景下更优的解压性能。ZSTD 如果您期望获得更高的压缩比，可以使用ZSTD...
算法管理
算法信息主要包括算法能力集（算法支持的视频检测及分析能力）、算法能力值（算法最多支持的可分析视频流数量）、用户自定义的算法名称及版本号以及存储算法包的OSS相关信息。算法能力集 算法能力集可以理解为算法的标签，指算法支持的视频...
- 产品推荐
- 这些文档可能帮助您