列存索引如何实现高效数据过滤
对于字符串类型，还可以为右表结果集建立Bloom filter来做提前过滤，当然本身Bloom filter也有代价，不太适合结果集比较大的场景。更进一步，如果左表列上有粗糙索引，可以依据filter来做过滤，减少数据块扫描。在MPP场景，Runtime filter...
PAI-REC推荐算法定制的最佳实践文档
行为事件衰减系数：decay的参数 Trigger选取数目：指每个用户取多少个物品id去与etrec产出的i2i数据做笛卡尔积。建议取值在10到50之间。如果Trigger的数目太大会造成召回的候选物品数量太多。u2i行为权重：其中注意曝光事件要么不设置，...
PS-SMART二分类训练
虽然多个worker分布式执行时，树结构不同，但是从理论上可以保证模型效果相近。如果您在训练过程中，使用相同数据和参数，多次得到的结果不一致，属于正常现象。如果需要加速训练，可以增大 计算核心数。因为PS-SMART算法需要所有服务器...
首页信息屏
4)IP地址 显示效果 界面显示效果如下：本章包含的内容非常多，通过本章的学习，可以学到多个知识点，比如OLED的驱动显示，ADC获取电量信息，Wi-Fi连接状态获取等等。涉及知识点 ADC的配置以及使用 OLED的使用 Wi-Fi配网 系统时钟获取（NTP...
Modbus驱动
若在容器内部做修改系统时间、使用mount命令等需要root权限的操作，则需要赋予容器privileged特权。说明 特权模式下，容器内部拥有宿主机的root权限，而且宿主机的所有设备会默认映射到容器内部，即无需配置 设备映射。设备映射 当 是否...
使用ping命令丢包或不通时的链路测试方法
当客户端访问目标服务器或负载均衡，使用ping命令测试出现丢包或网络不通时，可以通过链路测试工具进行链路测试来判断问题来源。本文介绍如何使用链路测试工具进行链路测试。链路测试流程 通常情况下，链路测试流程如下图所示。链路测试...
Echarts 颜色分段折线图
不触发：什么都不触发。坐标轴指示器：单击右侧的 眼睛 图标显示坐标轴指示器。类型：指示器类型，包括 直线指示器、阴影指示器 和 交叉指示器。自动吸附：勾选后，坐标轴指示器自动吸附到点上。这个功能在数值轴和时间轴上比较有意义，...
Echarts 颜色分段折线图
不触发：什么都不触发。坐标轴指示器：单击右侧的 眼睛 图标显示坐标轴指示器。类型：指示器类型，包括 直线指示器、阴影指示器 和 交叉指示器。自动吸附：勾选后，坐标轴指示器自动吸附到点上。这个功能在数值轴和时间轴上比较有意义，...
蓝牙Mesh本地定时统一协议
版本更新记录 版本迭代记录 更新日期 更新内容 V1.0.0 2022-06-09 基于2019年版v1定时协议修改，增加组播对时，时区，循环定时方式，多属性操作，定时索引全量ACK。V1.0.1 2022-08-11 增加对于重复周期（schedule）为0时的相关描述。V1.0.2...
配置规则：按模板（批量）
在 规则验证 页面您可以进行如下操作：校验规则配置的合理性：试跑 规则创建完成后，您可以选择单个或多个规则进行试跑，在弹出来的 试跑 对话框中选择调度时间（模拟给定校验被触发的时间），系统会根据此时间以及设定的分区表达式，计算...
网格模型
网格模型是在GeoSOT地球空间剖分理论的基础上发展出的一种离散化、多尺度区域位置标识体系。概述 您可以通过网格模型为地球空间（从地心至地上）中的各种对象赋予一个全球唯一编码，任意一个实体对象都可通过此编码在同一区城范围内和各种...
网格模型
网格模型是在GeoSOT地球空间剖分理论的基础上发展出的一种离散化、多尺度区域位置标识体系。概述 您可以通过网格模型为地球空间（从地心至地上）中的各种对象赋予一个全球唯一编码，任意一个实体对象都可通过此编码在同一区城范围内和各种...
网格模型
网格模型是在GeoSOT地球空间剖分理论的基础上发展出的一种离散化、多尺度区域位置标识体系。概述 您可以通过网格模型为地球空间（从地心至地上）中的各种对象赋予一个全球唯一编码，任意一个实体对象都可通过此编码在同一区城范围内和各种...
网格模型
网格模型是在GeoSOT地球空间剖分理论的基础上发展出的一种离散化、多尺度区域位置标识体系。概述 您可以通过网格模型为地球空间（从地心至地上）中的各种对象赋予一个全球唯一编码，任意一个实体对象都可通过此编码在同一区城范围内和各种...
Echarts 大规模散点图
大规模优化：是否开启大数据量优化，在数据图形特别多而出现卡顿时候可以开启。开启后配合 绘制优化阈值 配置项，在数据量大于指定阈值的时候对绘制进行优化。但是优化后不能自定义设置单个数据项的样式。绘制优化阈值：绘制优化的阈值，...
Echarts 大规模散点图
大规模优化：是否开启大数据量优化，在数据图形特别多而出现卡顿时候可以开启。开启后配合 绘制优化阈值 配置项，在数据量大于指定阈值的时候对绘制进行优化。但是优化后不能自定义设置单个数据项的样式。绘制优化阈值：绘制优化的阈值，...
使用EasyRec构建推荐模型
EasyRec可以帮助您快速构建推荐模型。本文以读取MaxCompute表数据为例，介绍如何使用EasyRec进行模型训练、配置任务例行化及部署模型。前提条件 开通OSS，并创建Bucket，详情请参见 开通OSS服务 和 控制台创建存储空间。重要 创建Bucket时...
气泡图（v5.0及以上版本）
气泡图使用气泡来展示数据，且可以自定义气泡的大小，能够直观生动地展示多个时间下离散数据的差异。本文介绍气泡图各配置项的含义。气泡图（v5.0及以上版本）组件的具体配置和BI分析组件模块中的气泡图组件保持一致，组件详细参数请参见 ...
分箱
通过分箱组件可以进行特征离散化，即将连续的数据进行分段，使其变为多个离散化区间。分箱组件支持等频分箱、等宽分箱及自动分箱。配置组件 您可以使用以下任意一种方式，配置分箱组件参数。方式一：可视化方式 在 Designer 工作流页面配置...
one-hot编码
当离散特征较多时，建议输出kv格式，table仅支持1024列，超出将报错。节点个数 节点的个数。单个结点内存大小 单个结点的内存大小，单位为MB。删除最后一个枚举量的编码 该参数为 true 时，可以保证编码后数据的线性无关性。忽略待编码数据...
气泡图（v4.x版本）
气泡图是散点图的一种，与散点图相比，气泡图使用气泡来展示数据，且可以自定义气泡的大小，能够直观生动地展示多个时间下离散数据的差异。本文介绍气泡图各配置项的含义。配置 重要 本文介绍v4.x版本的气泡图的配置项，如需查看5.0及以上...
气泡图
图表样式 气泡图是移动端组件中散点图的一种，与散点图相比，气泡图使用气泡来展示数据，且可以自定义气泡的大小，能够直观生动地展示多个时间下离散数据的差异。配置面板 搜索配置：单击 配置 面板右上角的 搜索配置，可在 搜索配置 面板...
气泡图
图表样式 气泡图是移动端组件中散点图的一种，与散点图相比，气泡图使用气泡来展示数据，且可以自定义气泡的大小，能够直观生动地展示多个时间下离散数据的差异。配置面板 搜索配置：单击 配置 面板右上角的 搜索配置，可在 搜索配置 面板...
气泡图（v3.0以下版本）
图表样式 气泡图是散点图的一种，与散点图相比，气泡图使用气泡来展示数据，且可以自定义气泡的大小，能够直观生动地展示多个时间下离散数据的差异。配置面板 搜索配置：单击 配置 面板右上角的 搜索配置，可在 搜索配置 面板中输入您需要...
气泡图（v3.x版本）
气泡图是散点图的一种，与散点图相比，气泡图使用气泡来展示数据，且可以自定义气泡的大小，能够直观生动地展示多个时间下离散数据的差异。本文介绍气泡图各配置项的含义。配置 重要 本文介绍v3.x版本的气泡图的配置项，如需查看v3.0以下...
气泡图
图表样式 气泡图使用气泡来展示数据，且可以自定义气泡的大小，能够直观生动地展示多个时间下离散数据的差异。样式面板 搜索配置：单击 样式 面板右上角的搜索配置项图标，可在搜索配置面板中输入您需要搜索的配置项名称，快速定位到该配置...
气泡图
图表样式 气泡图使用气泡来展示数据，且可以自定义气泡的大小，能够直观生动地展示多个时间下离散数据的差异。配置面板 搜索配置：单击 配置 面板右上角的 搜索配置，可在 搜索配置 面板中输入您需要搜索的配置项名称，快速定位到该配置项...
Label Encoder
一、组件说明 Label Encoder是一种用于将离散分类变量转换为数值变量的编码方法。它将每个离散变量的取值映射到一个整数，从而将离散变量转换为连续变量。例如，一个有三个取值的离散变量“颜色”（红色、绿色、蓝色），使用Label Encoder...
特征离散
取值如下：Isometric Discretization（等距离散）Isofrequecy Discretization（等频离散）Gini-gain-based Discretization（基于Gini增益离散）Entropy-gain-based Discretization（基于熵增益离散）离散区间个数 离散区间的个数。...
横向LabelEncoder
一、组件说明 Homo Label Encoder是一种用于将离散分类变量转换为数值变量的编码方法，适用于横向联邦场景。它将每个离散变量的取值映射到一个整数，从而将离散变量转换为连续变量。例如，一个有三个取值的离散变量“颜色”（红色、绿色、...
向量计算函数
向量缩放函数 vector_scale(array(double)vector1,double alpha)vector_scale(varchar vector1,double alpha)结合向量的加减法和向量的缩放，可以做任何线性变换。cosine_similarity 函数 计算两个向量的余弦相似度。使用示例 查询和分析...
交互分析管理
当选择 离散 时可以自定义设置步长。SQL参数命名 参数显示名称 自定义设置参数名。SQL参数名称 设置数值选择器的参数名称。说明 以SQL名称的方式将参数添加到查询中，参数的值可以通过调整数值选择器的值来实时更改。最小值参数名 设置数值...
基于分箱组件实现连续特征离散化
特征离散是将连续的数据进行分段，使其变为多个离散化区间。针对该场景，PAI推出了分箱组件和数据转换模块组件。首先使用分箱组件将连续特征离散化，再使用 数据转换模块 将原始数据从连续值转换为离散值。本文为您介绍如何使用Designer...
人口普查统计案例（旧版）
原PAI-Studio为组件提供了可视化显示结果的功能，实验运行完成后，您可以右键单击画布中的 直方图(多字段)-1，在快捷菜单，单击 查看分析报告，查看输入数据的分布情况，如下图所示。③ 统计学历对收入的影响：数据预处理 通过 SQL脚本 ...
One-Hot编码
一、组件说明 One-Hot编码是一种将离散特征转换成连续特征的方法。它将一个有m个取值的离散特征转换为m个0/1特征，每个特征表示原离散特征是否等于该取值。例如，假设原始数据集有一个表示“颜色”的特征，包含三个不同的取值：红色、绿色...
横向One-Hot编码
一、组件说明 横向One-Hot编码是一种将离散特征转换成连续特征的方法，用于横向场景。它将一个有m个取值的离散特征转换为m个0/1特征，每个特征表示原离散特征是否等于该取值。例如，假设原始数据集有一个表示“颜色”的特征，包含三个不同...
分区合并
场景 1：目标分区是不含二级分区的一级分区 对于离散分区（list/list column策略），合并多个分区后，新分区的values取合并前多个分区的values的合集；对于连续空间的分区（range/range column/hash/key），合并多个相邻分区后，新分区的...
排序
3 统计数值类特征的等频分箱，boundaries 用于对数值类特征做离散化。4 统计枚举类特征的唯一值数，用于设置模型的 embedding_dim 和 hash_bucket_size。5 打散 rec_sln_demo_sorting 模型的30天样本数据形成训练样本。6 汇总 rec_sln_demo...
系统内置基础特征
all_nid_ctr_1 BIGINT item 1天点击率（已进行离散化）system_all_nid_pv_30 BIGINT item 30天曝光量（已进行离散化）system_all_nid_pv_7 BIGINT item 7天曝光量（已进行离散化）system_all_nid_pv_1 BIGINT item 1天曝光量（已进行离散化...
离散值特征分析
本文为您介绍 Designer 提供的离散值特征分析。离散值特征分析统计离散特征的分布情况。包括gini，entropy，gini gain，information gain，information gain ratio等指标。计算每个离散值对应的gini，entropy，计算单列对应的gini gain，...
- 产品推荐
- 这些文档可能帮助您