视频个性化推荐（协同过滤）
本案例将 以视频社交平台的'猜你喜欢'和'详情页相关推荐'为例，通过推荐算法为用户呈现最符合其兴趣的视频内容为背景，为您介绍在DataWorks中如何使用阿里云PAI的协同过滤算法 挖掘深层次的数据关联性，实现视频的个性化推荐。背景信息 ...
SQL优化技术
联动性：对于复杂的线上问题，有时需要综合治理，如突发的恶性慢SQL问题，DAS的自动SQL限流，自动SQL优化需要形成联动效应，实现问题的标本兼治。规模性：如何构建具备足够扩展性的服务架构，以支撑几十万级、百万级的大规模自动优化。实现...
工作原理
掌握所监控对象的时序数据变化情况，了解其稳定性、周期性，对异常形态有初步预期，从而完成算法参数的合理配置。按整时（例如整秒、整分钟、整小时）对齐巡检任务时间窗口，从而保证异常事件的告警及时性与多事件关联的准确性。模型训练 ...
新功能发布记录
2022.06.25 所有用户 数据智能诊断 数据质量是做出推荐效果的基础，推出数据诊断功能辅助分析数据存在的问题、优化的空间，从而获得更优质的推荐效果：每日凌晨将自动触发数据诊断，结合服务可用性、数据逻辑合理性、算法链路是否奏效等多...
添加TCP监听
当您的业务属于注重可靠性、对数据准确性要求高和速度可以相对较慢的场景，例如文件传输、发送或接收邮件和远程登录等，您可以为CLB实例添加一个TCP监听，在CLB实例上转发来自客户端的TCP协议请求至后端服务器进行处理。前提条件 您已经...
MaxCompute（原ODPS）数据源配置
开放数据处理服务MaxCompute（原ODPS）是一个开放的计算平台，如果您要导入到OpenSearch-行业算法版的数据是由MaxCompute平台计算而产生的，则可以在应用中配置MaxCompute源信息，在触发应用索引重建任务后，系统会自动去获取 MaxCompute ...
ModifyTunnelAttribute-修改VPN隧道信息
调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中使用，用来给RAM用户或RAM角色授予调用此API的权限。具体说明如下：操作：是指具体的权限点。访问级别：是指每个操作的访问级别，取值为写入（Write）、读取...
ModifyTunnelAttribute-修改VPN隧道信息
调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中使用，用来给RAM用户或RAM角色授予调用此API的权限。具体说明如下：操作：是指具体的权限点。访问级别：是指每个操作的访问级别，取值为写入（Write）、读取...
调用API商品
技术原理概述：客户端程序使用AppSecret，对一系列需要签名所需要的信息（详见 使用摘要签名认证方式调用API）进行哈希运算（一般会使用 hmacSha256 算法），得到签名结果（一串字符串）。在调用API时，Request Header增加签名结果和AppKey...
DAS Auto Scaling弹性能力
基于预测和机器学习的时序异常检测算法，目前的时序异常检测算法可提供周期性检测、转折点判定和连续异常区间识别等功能，目前对线上70w+的数据库实例进行1天后数据预测，误差小于5%的实例占比稳定在99%以上，并且预测14天之后的误差小于5%...
SetLoadBalancerUDPListenerAttribute-修改UDP协议...
CLB 不支持 wrr 和 rr 算法变更为一致性哈希算法，也不支持一致性哈希算法互转。wrr HealthyThreshold integer 否 健康检查连续成功多少次后，将后端服务器的健康检查状态由 fail 判定为 success。取值范围：1~10。4 UnhealthyThreshold ...
高维向量检索（PASE）
本文介绍 PolarDB PostgreSQL版 如何通过PASE插件（基于IVFFlat或HNSW算法）实现高维向量检索。背景信息 近年来，深度学习领域内的表示学习技术，作为人工智能的代表性技术，取得了长足性进展，在工业界中已经被大量应用，例如广告投放、...
高维向量检索（PASE）
本文介绍 PolarDB PostgreSQL版（兼容Oracle）如何通过PASE插件（基于IVFFlat或HNSW算法）实现高维向量检索。背景信息 近年来，深度学习领域内的表示学习技术，作为人工智能的代表性技术，取得了长足性进展，在工业界中已经被大量应用，...
配置执行任务
执行算法 为让当前计划选择执行的算法，由于不同的算法对摄像头的角度和画框区域有不同要求，所以算法选择后不允许被修改。计划周期 在时间范围内，每隔多少分钟执行一次计划，计划周期支持小时、分两种单位选择 淘汰策略 执行计划技术架构...
什么是推荐全链路深度定制开发平台PAI-REC
让用户能够轻松管理召回、排序组件、更新引擎参数 提供指标和报表管理后台，用户可自定义指标、按天和按小时了解实验效果 提供离在线特征一致性对比工具，避免因为一致性问题导致实验效果不符合预期 提供数据智能诊断，帮助开发者快速理解...
高效向量检索（PASE）
本文介绍RDS PostgreSQL如何通过PASE插件（基于IVFFlat或HNSW算法）实现高效向量检索。说明 PASE插件已不再维护，建议您使用 高维向量相似度搜索（pgvector）插件。前提条件 实例为RDS PostgreSQL 11或以上版本。背景信息 近年来，深度学习...
UUID生成器（UUID-OSSP）
UUID-OSSP简介 UUID-OSSP用来生成通用唯一识别码（UUID），它支持几种UUID产生的标准算法。同时它还提供了一些函数用来产生某些特定的UUID常量。UUID由32个16进制数字组成，标准格式为 一组8位字符+一组4位字符+一组4位字符+一组4位字符+一...
产品优势
深厚的模型原始积累和有针对性的独立工作区 自学习平台的工作区基于阿里云深厚的算法模型迭代生成的框架，能够保证用户在模型还未生成之前就比同等的初始模型多出一定比例的准确性，缩短模型优化时间，提升模型准确率。基于丰富的成功案例...
服务介绍
Search服务用来解决复杂的多维查询和全文检索。Solr是构建在Apache Lucene上的企业级搜索平台，是分布式全文检索的最佳实践之一，支持各种复杂的条件查询和全文检索，具有广泛的用户基础。通过深度融合HBase与Solr，我们推出了既能满足大...
新建实验
AutoML是PAI提供的机器学习增强型服务，集成了多种算法和分布式计算资源，无需编写代码，通过创建实验即可实现模型超参数调优，提高机器学习效率和性能。本文为您介绍如何新建实验。背景信息 AutoML的工作机制：实验会根据算法配置自动生成...
全文索引服务
全文索引Search服务用来解决复杂的多维查询和全文检索。警告 HBase增强版的全文索引特性目前处于关闭状态，相关能力已全面迁移到Lindorm中，更强大、更成熟、更好用，详情参见 Lindorm Searchindex。Solr是构建在Apache Lucene上的企业级...
IDMapping在离线一体化解决方案
3、更好的图算法经验：相比SparkX的解决方案，阿里云图计算团队提供更好的图算法经验。在社区发现、联通子图基于阿里达摩院和安全团队经验输出，提供最佳的解决方案。4、弱关系挖掘能力 针对没有特定强关联的数据，我们也提供一些解决方案...
什么是人工智能平台PAI
什么是机器学习 机器学习是一门多学科交叉专业，涵盖概率论知识、统计学知识、近似理论知识和复杂算法知识，它使用计算机作为工具并致力于真实、实时地模拟人类学习方式，并将现有内容进行知识结构划分来有效提高学习效率。机器学习对研究...
PolarDB MySQL版DDL操作指南
DDL操作说明 在MySQL生态中，DDL是一类非常复杂的操作，包括Index操作、Primary Key操作、Column操作、Table操作、Foreign Key操作、Generated Column操作等多种不同类型的操作。DDL操作不仅耗时长、消耗硬件资源多，而且其中涉及锁表操作...
使用向量检索插件（aliyun-knn）
算法说明 在算法上，目前向量检索引擎已经支持了hnsw算法以及linear算法，适用于单机数据量小（全内存）的业务场景。两种算法性能对比如下。表 1.hnsw算法和linear算法性能对比 表格中为阿里云Elasticsearch 6.7.0版本环境实测数据，测试...
政企安全加速
链路层安全：为您建立独立节点保障资源的隔离性，支持通过国密算法进行全链路安全传输，支持节点一致性校验确保内容防篡改。边缘高可用：客户为保障稳定性建立备源，SCDN侧提供主备切换、监控告警和离线模式等多种高可用模式。合规认证：...
IForest异常检测
IForest异常检测使用sub-sampling算法，降低了算法的计算复杂度，可以识别数据中的异常点，在异常检测领域有显著的应用效果。本文为您介绍IForest异常检测的参数配置。组件配置 您可以通过以下任意一种方式，配置IForest异常检测参数。方式...
开发流程
支持多种算法框架，超大规模分布式深度学习任务的运行以及自定义算法框架。DLC概述 ⑤ 为了方便您在提交任务时指定所需的数据集和代码仓，PAI支持添加文件系统NAS或对象存储OSS的数据集以及Git代码仓。准备工作 ⑥ 模型管理模块统一管理...
产品优势
编码 IndexableDelta算法，相比DIFF算法，保持相同压缩率，访问速度快一倍。推荐DIFF，随机访问较慢。冷热分离 冷热数据自动分层存储，冷数据使用高压缩和廉价存储介质，减少70%成本，热数据可提升访问性能15%，请参见 冷热分离。不支持 ...
如何选用安全类产品
其中架构较为复杂，对安全性有极高的要求，并且要求不能有业务中断的场景，对于这类场景我们可以采用以下思路：此客户使用阿里云产品超过20款，且用量较大，并且对安全有极高的需求。在这种情况下不能仅仅使用基础安全防护的产品，一定需要...
API概览
由于自签名细节非常复杂，需花费 5个工作日左右。因此建议加入我们的服务钉钉群（11370001915），在专家指导下进行签名对接。在使用API前，您需要准备好身份账号及访问密钥（AccessKey），才能有效通过客户端工具（SDK、CLI等）访问API。...
IDaaS 术语表
签名/验签 基于非对称性加密算法，衍生出的常见使用。举例：IDaaS 在 OIDC SSO 时，对签发的 id_token 使用 RSA-256 算法私钥签名，应用使用公钥验签，确保令牌未经伪造、篡改。 加密/解密 基于对称或非对称加密算法实现。举例：IDaaS...
什么是AutoML
您在训练模型时，如果超参组合复杂度过高，需大量训练资源和手工调试工作，可以使用AutoML来节省模型调参时间，提升模型调优效率和模型质量。基础概念 超参数：是训练机器学习模型时用到的外部配置参数，在模型训练开始前设置。超参数不同...
存储加密
KMS生成和管理您的主密钥CMK（Customer Master Key），并保障密钥的安全性。MaxCompute支持的加密算法为AES256、AESCTR和RC4。MaxCompute支持通过默认密钥（MaxCompute Default Key）和自带密钥（BYOK）加密或解密数据。创建MaxCompute项目...
技术原理
分布式事务 PolarDB-X原生支持分布式事务，并保证事务的ACID性质——原子性（Atomicity）、一致性（Consistency）、隔离性（Isolation）、持久性（Durability）。PolarDB-X通过引入中心授时节点（TSO），结合多版本并发控制（MVCC），保证...
机器学习
MADlib机器学习模块主要解决以下问题：分类/回归问题：提供一系列算法如K最近邻、MLP多层感知神经网络、SVM支持向量机、决策树等算法来解决二元分类/回归问题，集成最小二乘法、GLM广义线性回归、逻辑回归、多项式回归等模型来解决回归问题...
如何通过图算法能力获取OneID高质量人
本文将重点讲解如何将传统的用户登录信息进行离线处理，构建用户与设备间的多种复杂图关系，并基于图关系完成离线图算法分析，快速和精准的挖掘出多设备多账号对应的自然人信息。（一）背景 对于几乎所有的互联网企业，对于识别、追踪用户...
什么是图计算服务
Graph Compute支持复杂图关系数据的存储、查询和计算，高效对接图算法与模型，在搜索推荐广告、实时风控、知识图谱、社交网络等场景有着广泛的应用。为什么选择图计算服务 复杂关系，简化表达 通过KKV可高效表达图模型中的关联关系，将常用...
JOIN优化和执行
JOIN多数情况下是依赖等值条件做的JOIN，即Equi-Join，用来根据某个特定列的值连接两张表的数据。子查询是指嵌套在SQL内部的查询块，子查询的结果作为输入，填入到外层查询中，从而用于计算外层查询的结果。子查询可以出现在SQL语句的很多...
黄牛账号识别之GraphCompute解决方案
首先从离线算法出发：探索的路线从图传播算法——>图聚类算法——>图表征算法，挖掘更大范围，更深层次的风险。最开始使用图传播算法，可以快速地挖掘出少量风险实例且较高的准确率效果，但是半监督的图传播算法只能从局部出发，挖掘出已知...
- 产品推荐
- 这些文档可能帮助您