PAI-TF数据转换方法
示例：将一个batch以Key/Value形式 Index:Value 存储的STRING转换成为一个稀疏矩阵。输入：[“1:0.1,2:0.2,4:0.4,10:1.0”,“0:0.22,3:0.33,9:0.99”,“2:0.24,7:0.84,8:0.96”]需求：列宽设置为20，生成稀疏矩阵Tensor。代码：outsparse=...
使用ALS算法实现音乐评分预测（旧版）
ALS算法 交替最小二乘ALS（Alternating Least Squares）算法的原理是对稀疏矩阵进行模型分解，评估缺失项的值，从而得到基本的训练模型。在协同过滤分类方面，ALS算法属于User-Item CF（Collaborative Filtering），兼顾 User 和 Item 项，...
ALS评分
交替最小二乘ALS（Alternating Least Squares）算法的原理是对稀疏矩阵进行模型分解，评估缺失项的值，从而得到基本的训练模型。在协同过滤分类方面，ALS算法属于User-Item CF（Collaborative Filtering），兼顾 User 和 Item 项，也称为...
奇异值分解
如果是稀疏矩阵，支持STRING类型。如果是表，支持INT和DOUBLE类型。默认选择所有列。inputTablePartitions 否 输入表中指定参与分析的分区，格式为 Partition_name=value。如果是多级分区，格式为 name1=value1/name2=value2，。如果指定多...
ALS矩阵分解
交替最小二乘ALS（Alternating Least Squares）算法的原理是对稀疏矩阵进行模型分解，评估缺失项的值，从而得到基本的训练模型。在协同过滤分类方面，ALS算法属于User-Item CF（Collaborative Filtering），兼顾 User 和 Item 项，也称为...
PS线性回归
稀疏矩阵 选中 稀疏矩阵 复选框。key与value分隔符 配置为半角冒号（:）。kv对间的分隔符 使用空格作为分隔符，留空即可。单击画布中的运行按钮，运行工作流。工作流运行成功后，右键单击 预测-1 组件，在快捷菜单中，选择 查看数据>预测...
K均值聚类
建议将稀疏矩阵的列从0或1开始，重新编号。如果模型规模 col*centerCount>27,0000,000，则只能通过命令行的方式，去除 modelName 参数，再重新执行聚类。如果输入表的列名存在SQL关键字，则系统报错 FAILED:Failed Task createCenterTable:...
预测
稀疏矩阵 使用KV格式表示稀疏数据。key与value分隔符 默认为英文冒号（:）。kv对间的分隔符 默认为英文逗号（,）。执行调优 核心数 与参数 每个核的内存大小 搭配使用，取值范围为正整数。每个核的内存大小 与参数 核心数 搭配使用，单位为...
PS-SMART多分类
稀疏矩阵 选中 稀疏矩阵 复选框。key与value分隔符 输入半角冒号（:）。kv对间的分隔符 使用空格作为分隔符，留空即可。单击 写数据表-1 组件，在右侧 表选择 页签中，配置 写入表表名 为smart_multiclass_output。单击画布中的运行按钮，...
PS-SMART回归
稀疏矩阵 选中 稀疏矩阵 复选框。key与value分隔符 配置为半角冒号（:）。kv对间的分隔符 配置为空格。在画布中单击 写数据表-1 组件，在右侧 表选择 页签，配置 写入表表名 为smart_regression_output。参数配置完成后，单击运行按钮，...
离散值特征分析
稀疏矩阵 当输入表数据为稀疏格式时，需要设置KV格式的特征。方式二：PAI命令方式 使用PAI命令方式，配置该组件参数。您可以使用SQL脚本组件进行PAI命令调用，详情请参见 SQL脚本。PAI-name enum_feature_selection-project algo_public-...
组件参考：所有组件汇总
ALS矩阵分解 交替最小二乘ALS（Alternating Least Squares）算法的原理是对稀疏矩阵进行模型分解，评估缺失项的值，从而得到基本的训练模型。swing训练 该组件是一种Item召回算法，您可以使用swing训练组件基于User-Item-User原理衡量Item...
PSL4发布说明
简介 PSL4是 PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，使单位数据容量价格更低。发布时间 2022年06月07日 存储价格 存储类型 中国内地 中国香港及海外 按...
PSL4发布说明
简介 PSL4是 PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，使单位数据容量价格更低。发布时间 2022年08月27日 存储价格 存储类型 中国内地 中国香港及海外 按...
PSL4发布说明
简介 PSL4是 PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，使单位数据容量价格更低。发布时间 2022年08月27日 存储价格 存储类型 中国内地 中国香港及海外 按...
如何开启存储压缩功能
存储层对用户数据按块进行压缩存储，通过高压缩比，节省用户数据，降低存储成本。本文介绍如何开启存储压缩功能，以及查看开启该功能后存储空间大小的方法。前提条件 产品版本需为 PolarDB PostgreSQL版 企业版。产品系列为 集群版，且版本...
如何开启存储压缩功能
存储层对用户数据按块进行压缩存储，通过高压缩比，节省用户数据，降低存储成本。本文介绍如何开启存储压缩功能，以及查看开启该功能后存储空间大小的方法。前提条件 PolarDB 产品版本需为 企业版，您可以通过 5.6/5.7/8.0内核版本 来确认...
如何开启存储压缩功能
存储层对用户数据按块进行压缩存储，通过高压缩比，节省用户数据，降低存储成本。本文介绍如何开启存储压缩功能，以及查看开启该功能后存储空间大小的方法。前提条件 PolarDB 产品版本需为 企业版，您可以通过 5.6/5.7/8.0内核版本 来确认...
时序分析存储概述
分析存储不仅支持高效的数据压缩存储，还具备强大的查询和分析功能，非常适合大规模的数据分析和查询任务。分析存储与时序表的数据存储相互独立，允许用户自定义数据的生命周期（TTL），对分析存储的查询操作不会对时序表的读写性能产生...
正排索引特性
单值正排和多值正排(offset)等值压缩 可以在schema配置中，将单值正排字段或者多值正排字段配置为等值压缩索引个数，引擎会将N个(2^n)连续文档的单值value（或者多值offset）进行等值压缩存储，即N个文档全相同则只存储一份，如果N个文档...
正排索引特性
单值正排和多值正排(offset)等值压缩 可以在schema配置中，将单值正排字段或者多值正排字段配置为等值压缩索引个数，引擎会将N个(2^n)连续文档的单值value（或者多值offset）进行等值压缩存储，即N个文档全相同则只存储一份，如果N个文档...
事务引擎介绍
数据压缩 HybridDB for MySQL事务引擎支持多种数据压缩算法，通过对数据块的压缩存储，大大节约了存储空间和I/O的开销，实测的压缩效果可以达到5倍。管理功能 HybridDB for MySQL事务引擎的管理功能包括备份、恢复、监控、报警、用户管理，...
按量付费标准版
MaxCompute会对数据进行压缩存储，按照压缩后的数据量计费。通常，压缩后的数据量与上传数据之前您自己统计的数据量不同，会被压缩至原数据量的五分之一。详细计费规则请参见 存储费用。上传数据资源 数据上传至MaxCompute不产生费用。下载...
如何选择PSL4和PSL5
PSL4（PolarStore Level 4）PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。有降低成本诉求，追求高...
如何选择PSL4和PSL5
PSL4（PolarStore Level 4）PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。有降低成本诉求，追求高...
如何选择PSL4和PSL5
PSL4（PolarStore Level 4）PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。有降低成本诉求，追求高...
存储压缩
存储压缩可以有效帮助用户减少存储成本和I/O资源的消耗。使用方法 在创建Append-only列存表时，用户可以通过指定COMPRESSTYPE字段来指定压缩的类型。如不指定则数据不会进行压缩。目前支持三种压缩格式：zstd、zlib和lz4。用户可以通过指定...
成本
AnalyticDB PostgreSQL版 采用计算节点本地存储的模式，支持行式存储和列式存储，支持非易失存储、固态硬盘、机械硬盘等多种存储介质，支持单节点最大10TB存储空间。在此基础之上，AnalyticDB PostgreSQL版 进一步提供了存储压缩能力、OSS...
术语
硬件压缩盘（Smart-SSD）硬件压缩盘使用阿里巴巴自研的Aliflash Smart-SSD技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。硬件压缩盘的压缩引擎集成在盘片内部，通过FPGA/ASIC...
恢复方式一：按时间点恢复
PSL4：PolarDB全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。说明 对于已创建的集群，存储类型不支持切换。...
恢复方式一：按时间点恢复
PSL4：PolarDB全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。说明 对于已创建的集群，存储类型不支持切换。...
术语
硬件压缩盘（Smart-SSD）硬件压缩盘使用阿里巴巴自研的Aliflash Smart-SSD技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。硬件压缩盘的压缩引擎集成在盘片内部，通过FPGA/ASIC...
克隆集群
PSL4：PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。说明 对于已创建的集群，存储类型不支持切换。...
克隆集群
PSL4：PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。说明 对于已创建的集群，存储类型不支持切换。...
恢复已释放的集群
PSL4：PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。说明 对于已创建的集群，存储类型不支持切换。...
全量恢复方式2：恢复到过去时间点
PSL4：PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。说明 对于已创建的集群，存储类型不支持切换。...
全量恢复方式1：从备份集恢复
PSL4：PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。说明 对于已创建的集群，存储类型不支持切换。...
购买按量付费集群
PSL4：PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。说明 对于已创建的集群，存储类型不支持切换。...
购买包年包月集群
PSL4：PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。说明 对于已创建的集群，存储类型不支持切换。...
管理从集群
PSL4：PolarDB 全新推出的存储类型，采用阿里巴巴自研的 硬件压缩盘（Smart-SSD）技术，在物理SSD磁盘层面压缩、解压缩存储的数据，保持性能影响可控的情况下，使单位容量数据的存储价格更低。说明 对于已创建的集群，存储类型不支持切换。...
- 产品推荐
- 这些文档可能帮助您