配置弹性伸缩（仅Hadoop集群类型）
当您的业务量需求不断波动时，建议您开启弹性伸缩功能并配置相应的伸缩规则，以便于E-MapReduce（简称EMR）可以按业务量波动增加或减少Task节点。确保作业完成的同时，可以节省成本。本文为您介绍如何在EMR控制台配置弹性伸缩。前提条件 已...
功能发布记录
2024-02 功能名称 变更类型 功能描述 相关文档 实时监控 升级 新增推流过程质量监控接口，通过接口可以获取到主播到CDN节点的接收音视频帧率、音视频时间戳、接受头次数、音视频码率、最大音视频帧间隔、推流断开错误码。获取推流过程质量...
什么是AI通信加速库Deepnccl
多机优化 多机优化体现在通信算子编译优化、TCP多流优化、多机CPU-Reduce优化三个方面，具体说明如下：通信算子编译优化：针对阿里云上不同机型，以及网卡与GPU的不同拓扑连接等特点，相比较基于全局拓扑结构实现的Allreduce、Allgather或...
Designer概述
区分类型 详情 从使用场景来区分 传统机器学习组件 包括数据预处理、特征工程、统计分析、异常检测、推荐算法、时间序列及网络分析等算法组件。深度学习框架组件 包括基于PAI-Easy系列的视觉类算法、语音类算法、自然语言处理算法，以及...
通过消费组拉取指标数据进行智能巡检
如果您不确定特征项的取值范围，可以不设置特征数据的最大值和最小值。更多信息，请参见 如何设置数据特征中的最小值和最大值。在 算法配置 区域，完成以下配置，然后在 数据采样 中，选择一个实体，单击 预览采样数据，验证您所配置的参数...
数据滤波
最小值滤波：对输入信号做最小值滤波操作，取采样数据的最小值。FIR滤波：对输入信号做FIR滤波操作。算法采用的是低通FIR滤波，其原理是将输入信号中高于截止频率的频率成分滤除，只保留低于该截止频率的频率成分。低通FIR滤波器可以有效地...
行业算法模型介绍
智能推荐根据不同的行业提供了归档的如下几类算法模型，您可以通过在线实验平台的实验参数配置针对性的进行开启或关闭以及具体算法子类型的优化。一、基于物品的协同过滤算法 协同过滤算法主要分为基于物品的协同过滤算法、基于用户的协同...
Cost-based SQL诊断引擎
自动优化：自动优化服务自动识别业务数据库实例工作负载上的慢查询，主动完成诊断，生成优化建议，评估后编排优化任务，自动完成后续的优化上线操作及性能跟踪，形成全自动的优化闭环，提升数据库性能，持续保持数据库实例运行在最佳优化...
自定义召回模型
这种算法可以帮助我们挖掘人与人以及商品与商品的关联关系。协同过滤算法是一种基于关联规则的算法，以购物行为为例。假设有甲和乙两名用户，有a、b、c三款产品。如果甲和乙都购买了a和b这两种产品，我们可以假定甲和乙有近似的购物品味。...
财务规划
使用“节省计划购买方案优化”是根据企业的历史消费数据，通过消费预测算法、优化建议算法得出的结果，可以作为购买参考，用于调整节省计划每小时承诺付款，提升节省计划的覆盖率从而节省费用。资源包 许多云产品都会提供配套的资源包。...
图算法
支持选择多条边，对于部分可以用到边的权重字段的算法，可以选择边的权重字段，比如单源最短距离时可以用边的score字段表示边的长度，如果不选择权重字段，则边的长度默认为1 单源最短距离，需要填写的扩展参数为sourceIdLabel和...
资产安全概述
脱敏算法 脱敏算法模块可以看到目前支持的所有脱敏算法，主要包括 遮盖脱敏（如张三，脱敏为*三）、哈希脱敏（如加盐MD5）两大类算法。动态脱敏 不改变底层数据的存储，只在数据进行消费时，进行数据的脱敏。典型应用场景：数据分析场景的...
资产安全概述
脱敏算法 脱敏算法模块可以看到目前支持的所有脱敏算法，主要包括 遮盖脱敏（如张三，脱敏为*三）、哈希脱敏（如加盐MD5）两大类算法。动态脱敏 不改变底层数据的存储，只在数据进行消费时，进行数据的脱敏。典型应用场景：数据分析场景的...
LLM-N-Gram重复比率过滤（MaxCompute）
算法简介 将文本中的内容按照字符或词语进行大小为N的滑动窗口操作，形成了长度为N的片段序列。每一个片段称为Gram，对所有Gram的出现次数进行统计。最后统计 频次大于1的Gram的频次总和/所有Gram的频次总和 两者比率作为重复比率进行样本...
实时算法编排
本文为您介绍如何使用智能制造平台AICS实时算法编排模块。实时算法编排流程 新建画布。算法流程搭建。算法试运行与调试。算法发布与周期运行。参数趋势查看。新建画布 登录 工业大脑智能制造平台AICS。左侧导航栏单击 实时控制优化>实时...
行业算法版各规格对比
独享集群实例各方面资源独享，支持更多算法优化功能，支持行业模板，适用于存储、计算资源消耗较大，对搜索结果质量要求较高的场景。价格对比 共享型和独享型的费用会有一定差异，具体可参考产品购买页的购买金额。系统限制对比 功能列表 ...
概述
为什么需要冷启动 通常推荐系统通过协同过滤、矩阵分解或是深度学习模型来生成推荐候选集，这些召回算法一般都依赖于用户-物品行为矩阵。在真实的推荐系统中，会有源源不断的新用户、新物品加入，这些新加入系统的用户和物品由于缺乏足够...
JOIN优化和执行
PolarDB-X 支持了上述比较丰富的Join算法，优化器会根据统计信息选择相对于合理的Join算法。这里罗列下各个Join算法比较适合的场景。JOIN算法 使用场景 NLJoin 非等值JOIN场景。HashJoin 大部分等值Join都倾向于选择HashJoin，除非数据有...
功能更新动态（2022年）
2022年10月25日 华北2（北京）设置Dataphin实例的计算引擎 2022年10月27日 华东1（杭州）2022年11月01日 华南1（深圳）2022年11月03日 华东2（上海）数据集成：输入组件、数据源优化，提升体验感，数据源表存在性、表结构变动功能点优化，...
历史版本下载
优化求解器SDK的历史版本下载，并记录了每个版本的修改详情。重要 下载表示您确认 已阅读 并 接受 优化求解器的《服务试用条款》。优化求解器SDK 安装方式见 求解器SDK下载和安装。V1.2.0下载 发布时间：2024.04.19 Linux linux64x86 文件...
岭回归预测
算法原理 岭回归是一种专用于共线性数据分析的有偏估计回归方法，实质上是一种改良的最小二乘估计法，通过放弃最小二乘法的无偏性，以损失部分信息、降低精度为代价获得回归系数更为符合实际、更可靠的回归方法，对病态数据的拟合要强于...
多值数据查询
重要 在域查询信息中，aggregator 是必要条款，但是可以通过 none 来指明不做聚合运算。但是，TSDB多值模型不支持在同一个查询中有的域做聚合，有的域不做聚合。插值 如果某条时间线某个精度区间没有值且没有使用 fill policy 进行填值，而...
求解器用户手册
关于LP求解，当前我们线性规划（LP）的求解提供了Simplex（单纯形法）、IPM（Interior Point Method，内点法）、Concurrent（并发优化）算法。在求解时候，执行流程如下文的“执行流程”图片所示，会默认选Concurrent，您可以通过设置...
调整I2I算法策略，强化实时反馈的用户体验
本文将向您介绍，在终端用户在刷新推荐结果的过程中，如果想要更加直观地促进用户感受到“随着兴趣的变化，推荐结果进一步关怀用户兴趣”即“实时反馈”，应当如何配置算法策略、配合相关产品功能从而达到此效果。一、记录用户行为并实时...
通过SQL聚合指标数据进行智能巡检
如果您不确定特征项的取值范围，可以不设置特征数据的最大值和最小值。更多信息，请参见 如何设置数据特征中的最小值和最大值。在 创建智能巡检作业 配置向导的 算法配置 区域，完成以下操作。在 算法配置 区域，完成以下配置，然后在 数据...
滤波
最小值滤波：对输入信号做最小值滤波操作，取采样数据的最小值。趋势线拟合滤波：对输入信号按照指定的趋势线类型进行拟合滤波操作。趋势线拟合滤波的原理是基于信号中的趋势分析。它假设信号由一个趋势成分和一个噪声成分组成，通过拟合...
列存索引中GroupJoin算子的实现
从执行效率的角度来看，这两个操作可以合并成一个，使用dimension_table.key1建哈希表以及做聚合运算，使用fact_table.key1查哈希表以及做聚合运算，因此节省了使用fact_table.key1建哈希表的时间。这种将HASH JOIN与HASH GROUP BY两个算子...
阿里云云上成本管理解决方案白皮书
节省计划购买方案优化“节省计划购买方案优化”是根据您的历史消费数据，通过消费预测算法、优化建议算法得出的结果，可以作为购买参考，用于调整节省计划每小时承诺付款，提升节省计划的覆盖率从而节省费用。网络计费方式优化-CDT-公网...
快速开始
一、Contextual Bandit 算法的适用范围 Contextual Bandit 算法虽然可以用来解决冷启动问题，但如果在一些基础条件不满足时，算法可能不能很好地收敛。注意：探索流量是否足够。如果一个场景新品数量很大，每时每刻都有新品源源不断地加...
跨境电商语言工具介绍
阿里翻译深耕多年电商场景，支持全方位的多语言商品信息内容优化，提供标题&详描内容专属机器翻译引擎、商品标题质量诊断及智能优化、图片语种诊断及翻译等服务。助力跨境贸易平台及商家有效提升商品的多语言内容，从而获得更好的流量及...
通用行业/教育行业算法版对比
教育行业算法版介绍 教育行业算法版基于最新算法功能，贴合搜题场景的痛点和需求，提供了教育行业专属的搜题智能语义理解能力、向量召回、排序算法，为在线教育行业搜题业务的搜索性能和效果准确性提供双重保障，并有效的解决了超大题库...
如何高效地查询时序数据
通常情况下，一个时间序列可以标记一个产生时序数据的数据源。时序引擎会根据每个 标签列 建立索引，其索引形态是倒排索引，以标签列的列名和值作为索引键来索引所有拥有该键值对的时间序列，用于从时间序列维度快速定位某个标签对应的数据...
数据对接期
数据对接期 1、什么是场景ID，该如何进行埋点，如何在查询中使用，行为表和内容表场景ID是否需要对应，有什么作用？举例1.1内容表(item)中有一个itemA，其item_id为1，场景ID字段值为：1001,1002行为表(behavior)中有两条行为，分别为item_...
最小化窗口
1.组件介绍 说明 必要前置组件：获取窗口 利用本组件可以最小化Windows上指定运行程序的窗口。2.输入项 说明 请参照可视化编辑器内组件面板中各输入项的帮助信息 3.输出项 说明 请参照可视化编辑器内组件面板中各输入项的帮助信息 4.组件...
文档更新动态（2022年）
更新说明 什么是Dataphin 添加派生指标和衍生指标 新建注册上挂标签 2022年07月19日 增加回收站功能 可以将删除的数据处理任务还原。新增说明 管理回收站的资源对象 2022年07月19日 实时研发新增支持Ververcia Flink引擎 支持Flink SQL流批...
通用行业/游戏行业算法版对比
游戏行业算法版介绍 游戏行业算法版基于最新算法功能，贴合游戏搜索场景的痛点和需求，提供了游戏行业专属的智能语义理解能力、向量召回、排序算法，为游戏行业的搜索性能和效果准确性提供双重保障，并有效的解决了超大词库数据导致的搜索...
XGBoost训练
XGBoost算法在Boosting算法的基础上进行了扩展和升级，具有较好的易用性和鲁棒性，被广泛用在各种机器学习生产系统和竞赛领域，该算法支持分类和回归。XGBoost训练组件在XGBoost算法的基础上进行了包装，使功能和PAI更兼容，更易用。本文为...
关键概念
为了优化查询性能，可以重新调整数据的schema结构，使原来的field（butterflies 和 honeybees）变为tag，tag（location 和 scientist）变为field：name:census time location scientist butterflies honeybees 2015-08-18T00:00:00Z 1 ...
HaaS EDU场景式应用整体介绍
同时，您还可以基于陀螺仪的数据扩展出更多的算法，比如，用它来开发各种运动监测算法，打造出专属于你的运动监测器等等，将技术应用到身边的实际场景中。2.4 分歧争端机 还记得风靡全国的“摇一摇”吗？摇红包，摇奖券。那么，摇一摇是...
通用行业/内容社区行业算法版对比
内容行业算法版介绍 内容行业算法版基于最新算法功能，贴合IT内容搜索场景的痛点和需求，提供了内容行业专属的智能语义理解能力、向量召回、排序算法，为内容行业的搜索性能和效果准确性提供双重保障，并有效的解决了超大词库数据导致的...
- 产品推荐
- 这些文档可能帮助您