查询文件
大文件分片查询 和 GetObject 提供的基于Byte的分片下载类似，SelectObject 也提供了分片查询的机制，包括以下两种分片方式：按行分片：常用的分片方式，然而对于稀疏数据来说，按行分片可能会导致分片时负载不均衡。按Split分片：Split是...
离线预测通用说明
预测组件可以使用PAI-EasyVision训练出的模型进行离线预测。本文介绍离线预测通用的输入数据格式及PAI命令参数。概述 PAI-EasyVision支持读取MaxCompute表数据并将结果写...取值范围如下：true：打开稀疏集群 false：关闭稀疏集群 BOOL false
单值查询数据
当前支持的deltaOptions如下所示：名称 类型 是否必选 描述 默认值 举例 counter Boolean 否 当该标记位被指定时则表示假定用于计算差值的指标值被用户视作是一个类似计数器的单调递增（或递减）的累计值（但服务器并不会加以check）。...
Alibaba Cloud Linux 2镜像发布记录
支持动态开启Group Identity特性 支持稀疏文件映射使用系统零页，减少启动虚拟机时的内存消耗 2022年 镜像ID 发布时间 发布内容 aliyun_2_1903_x64_20G_alibase_20221118.vhd 2022-11-18 更新 Alibaba Cloud Linux 2.1903 LTS 64位 基础...
特征异常平滑
特征平滑组件可以将输入特征中包含异常的数据平滑到一定区间，支持稀疏和稠密数据格式。背景信息 平滑方法如下：ZScore平滑 如果特征分布遵循正态分布，则噪音一般集中在-3×alpha 和 3×alpha 之外，ZScore是将该范围的数据平滑到[-3×...
特征离散
如果选择的是稀疏特征，则系统会自动筛选。“”labelCol 否 标签字段。如果您设置了该字段，则可以通过可视化方式查看特征到目标变量的 x-y 分布直方图。无 discreteMethod 否 离散方法。取值如下：Isometric Discretization（等距离散）...
备份策略
集群实例创建时会默认创建本地一级备份策略，同时开启日志备份。概念介绍 归档备份：对于需要进行长期保留，而且恢复频率不高的备份文件，可以开启归档备份进行保存。开启归档备份会产生额外的费用，计费详情参见 备份恢复计费说明。打开...
数据流动概述
数据流动导出稀疏数据时，0值会在填充后再导出到OSS Bucket。使用流程 创建CPFS Fileset。具体操作，请参见 创建Fileset。创建数据流动。具体操作，请参见 创建数据流动。创建数据导入、数据导出或数据删除任务。具体操作，请参见 创建数据...
数据滤波
是 滑动平均滤波 限幅滤波 中值滤波 滑动平均滤波 一阶滞后滤波 FIR滤波 最大值滤波 最小值滤波 限幅滤波 参数名 参数描述 是否必填 参数默认值 参数范围 滤波有效值 限幅滤波有效值的选择方法。前一次输出值：使用前一次滤波输出值作为...
滤波
功能说明 滤波组件支持8种方式进行数据滤波，包括限幅滤波，中值滤波，滑动平均滤波，一阶滞后滤波，FIR滤波，最大值滤波，最小值滤波以及趋势线拟合滤波。计算逻辑原理 以下计算公式涉及的参数定义：①t表示本次，t-1表示前一次。②X(t)...
稀疏备份
RDS SQL Server在常规备份能力的基础上支持稀疏备份。您可更灵活地设置备份策略并保留最少的备份集。该功能在有效缩短备份集恢复时间的同时，降低了备份集存储成本。本文介绍配置稀疏备份的方法。常规备份与稀疏备份的区别 对比项 常规备份...
稀疏备份
RDS PostgreSQL 在常规备份能力的基础上支持稀疏备份。您可更灵活地设置备份策略 并 保留最少的备份集。该功能在有效缩短备份集恢复时间的同时，降低了备份集存储成本。本文介绍配置稀疏备份的方法。常规备份与稀疏备份的区别 对比项 常规...
稀疏备份
RDS MySQL在常规备份能力的基础上支持稀疏备份。您可更灵活地设置备份策略并保留最少的备份集。该功能在有效缩短备份集恢复时间的同时，降低了备份集存储成本。本文介绍配置稀疏备份的方法。常规备份与稀疏备份的区别 对比项 常规备份 稀疏...
PAI-TF数据转换方法
id_as_value 否 类型BOOL，默认为False，稀疏矩阵中有效点的值将会填入int64(1)。field_delim 否 类型STRING，默认为英文逗号（,）。CSV格式数据的分隔符。不支持数字、正负号、字母e和E、小数点（.）和多字节分隔符。当使用空格作为分隔符...
添加数据
在向量管理>添加数据页中选择表进行添加数据：添加相应字段值（包括主键、稠密向量、稀疏向量下标、稀疏向量值），点击 添加：当执行结果出现"message":"success"说明数据上传成功：数据上传成功后，可以在查询测试页面进行查询：添加...
K均值聚类
如果 kvs 中的某列包含 123456789:0.1，则稀疏矩阵变为5行123456789列，该矩阵会消耗大量CPU和内存。对于 kvs 中存在异常列编号的原始数据，建议重新进行列编号以减小矩阵规模。使用PAI命令，提交K均值聚类组件的参数。pai-name kmeans-...
高级备份设置
开通高级备份设置后，可使用稀疏备份功能，本文介绍了相关的概念及操作。简介 在集群的备份恢复界面切换高级备份设置后，即可使用稀疏备份功能。您可以按照每周、每月、每年的方式来设置备份集保留周期，实现间隔很长时间保留一个备份集，...
平滑函数
平滑函数是针对输入的时序曲线进行平滑和简单的滤波操作，滤波操作通常是发现时序曲线形态的第一步。函数列表 函数 说明 ts_smooth_simple 默认平滑函数，使用Holt-Winters算法对时序数据进行滤波操作。ts_smooth_fir 使用FIR滤波器对时序...
索引优化
AnalyticDB PostgreSQL版 会将数据尽量均匀地分布在所有的计算节点上，因此，在节点足够多的情况下，每一个计算节点只会扫描属于自己的一小部分数据。并且对于BI报表类查询，通常会返回很大的数据集，使用索引在这种场景并不一定有加速查询...
使用ALS算法实现音乐评分预测（旧版）
ALS矩阵分解算法会将矩阵A分解为两个矩阵（矩阵X和矩阵Y）相乘。矩阵A=矩阵X*矩阵Y的转秩 矩阵X的列和矩阵Y的行可以称为ALS因子。假设有3个因子（性格、教育程度及爱好），则矩阵A经过ALS分解得到的矩阵X如下。矩阵A经过ALS分解得到的矩阵Y...
关联数组
数组可能是稀疏的-在键值的赋值中可能存在间隙。尝试引用尚未赋值的数组元素将导致异常。TYPE IS TABLE OF.INDEX BY语句用于定义关联数组类型。TYPE assoctype IS TABLE OF { datatype|rectype|objtype } INDEX BY { BINARY_INTEGER|PLS_...
混合查询最佳实践
对比传统的 文本+向量 多路召回，向量检索版中的稀疏-稠密向量是将稠密向量和稀疏向量嵌入组合为单个向量，而其中的稀疏向量是将文本向量化成稀疏向量，稠密向量是传统的向量。稀疏向量和稠密向量代表不同类型的信息并支持不同类型的搜索。...
稳态数据挑选
功能说明 稳态数据挑选组件支持根据一维或多维数据的分布，区分动态波动数据和稳态数据，实现稳态数据的挑选，进行该操作前建议先进行滤波处理。在非稳态工况下，变量的特性变动剧烈，运行数据不能真实地反映系统输入输出的关系，会带来...
DT-MPC v3.1
描述 默认值 范围 滤波器模式 MPC提供滑动平均及一阶滤波两种模式对CV数据进行滤波 无 无 滑动平均 一阶滤波 滤波参数 滑动平均：滑动平均阶数 一阶滤波：滤波系数 0 滑动平均：0~100 一阶滤波：0~1 扰动比例系数 系统未知扰动的比例。...
疏密快照管理策略
功能说明 根据您选择的备份频率，将有不同的稀疏保留规则。更多功能详情，请参见 高频快照备份。快照频率 快照保留策略 频率为分钟级 快照频率若设置为分钟级别，1小时内的快照数据会全部保留。超过1小时仅保留整点后完成的第一个快照点；...
岭回归训练
岭回归（Tikhonov regularization）算法是对不适定问题进行回归分析时，最常用的正则化方法。岭回归训练组件基于该算法，支持稀疏、稠密两种数据格式，且支持带权重样本的训练。本文为您介绍岭回归训练组件的配置方法。使用限制 支持的计算...
lo-implementation
而一个读操作将会把现有最后的数据块之前还未分配的位置读出为 0。这和 Unix 文件系统中“稀疏”文件的一般行为相对应。大对象可以有一个拥有者和一组访问权限，它们可以用GRANT和REVOKE管理。读一个大对象需要 SELECT 权限，而写或者截断...
变点检测函数
ts_cp_detect 函数格式：若您无法确定窗口大小，可以使用如下格式的函数，该函数调用的算法默认会使用长度为10的窗口进行检测。select ts_cp_detect(x,y,samplePeriod)若您需要根据业务曲线进行效果调试，可以使用如下格式的函数，通过设置...
备份大小
RDS MySQL或RDS MySQL Serverless基础系列实例升级小版本后，实例的 基本信息 页的 备份使用量 可能会显示为0，且在下一次定时备份完成后自动恢复。例如，下图中，备份大小为33.2 GB（数据备份）+20.19 MB（日志备份）。图中的 归档备份 是...
pg_largeobject
目录 pg_largeobject 保存构成“大对象”的数据。一个大对象在被创建时会被分配一个OID。...现在的实现允许稀疏存储：页面可能丢失，并且可能比 LOBLKSIZE 字节短（即便不是最后一页）。一个大对象中丢失的区域会被读出为 0。
数据视图
无 mapTable 是 输出映射表，数据视图对String类字符串会做一个统计，映射成数字（转换成Int方便机器学习识别和训练）无 selectedCols 是 输入表选择列名类型。无 labelCol 否 标签列。无 categoryCols 否 把Int或者Double字段当做枚举特征...
QueryContent-查询文档内容
说明 当文档切分稀疏时，重排效率慢。建议重排个数（TopK*Factor（向上取整））不超过 50。2 UseFullTextRetrieval boolean 否 是否使用全文检索（双路召回）。默认为 false，仅采用向量检索。true Metrics string 否 检索时的相似度算法。...
PS-SMART回归
页签 参数 描述 字段设置 是否稀疏格式 稀疏格式的 KV 之间使用空格分隔，key 与 value 之间使用半角冒号（:）分隔。例如 1:0.3 3:0.9。选择特征列 输入表中，用于训练的特征列。如果输入数据是Dense格式，则只能选择数值（BIGINT或DOUBLE...
PS-SMART多分类
页签 参数 描述 字段设置 是否稀疏格式 稀疏格式的 KV 之间使用空格分隔，key 与 value 之间使用英文冒号（:）分隔。例如 1:0.3 3:0.9。选择特征列 输入表中，用于训练的特征列。如果输入数据是Dense格式，则只能选择数值（BIGINT或DOUBLE...
预测与异常检测函数
bool类型，默认为true表示对原始数据做滤波操作。示例：查询分析*|select ts_predicate_simple(stamp,value,6)from(select_time_-_time_%60 as stamp,avg(v)as value from log GROUP BY stamp order by stamp)输出结果 显示项如下：显示项 ...
DescribeMetricList-查询指定云产品的指定监控项的...
注意事项 各云产品监控数据的存储时长与 Period（统计周期）有关，Period 越大，查询的监控数据越稀疏，监控数据的存储时间越长，具体关系如下：Period 小于 60 秒，存储时长为 7 天。Period 等于 60 秒，存储时长为 31 天。Period 等于 ...
高频快照备份
当快照频率设置不同时，快照保留策略也相应变化：快照频率 快照保留策略 频率为分钟级 快照频率若设置为分钟级别，1小时内的快照数据会全部保留。超过1小时仅保留整点后完成的第一个快照点；超过24小时后，仅保留每日0点后完成的第一个快照...
高频快照备份
当快照频率设置不同时，快照保留策略也相应变化：快照频率 快照保留策略 频率为分钟级 快照频率若设置为分钟级别，1小时内的快照数据会全部保留。超过1小时仅保留整点后完成的第一个快照点；超过24小时后，仅保留每日0点后完成的第一个快照...
PS-SMART二分类训练
页签 参数 描述 字段设置 是否稀疏格式 稀疏格式的 KV 之间使用空格分隔，key 与 value 之间使用英文冒号（:）分隔。例如 1:0.3 3:0.9。选择特征列 输入表中，用于训练的特征列。如果输入数据是Dense格式，则只能选择数值（BIGINT或DOUBLE...
数据预处理函数
为了方便对样本数据进行分析和处理，对数据进行平滑、滤波等预处理操作。函数 说明 滑动平均函数 针对输入的时序曲线进行滤波，从而发现时序曲线形态。物联网设备数据采集的原始数据中，大都含有各种各样的噪声影响。通过滑动平均函数，...
- 产品推荐
- 这些文档可能帮助您