MapReduce
本文仅对MapReduce的基本原理做简单介绍，更多详情请参见 Hadoop Map/Reduce教程。说明 您无法通过MapReduce读写 外部表 中的数据。应用场景 MapReduce支持下列场景：搜索：网页爬取、倒排索引、PageRank。Web访问日志分析：分析和挖掘用户...
排序
推荐解决方案-排序的输入包括经过特征工程处理后的用户特征表、物品特征表、用户行为表，输出为排序模型，可用于模型部署。本文为您介绍推荐解决方案-排序的实现方法。前提条件 已运行推荐解决方案-特征工程工作流模板生成排序需要的数据集...
什么是AutoML
相关文档 AutoML工作原理（推荐）了解AutoML原理机制，实验、Trial、训练任务关系，帮助您理解后续配置项间的逻辑关系。新建实验 通过控制台创建新实验，以及了解其中的关键参数如何配置。AutoML使用案例汇总 您可以通过实际案例，来使用...
使用倚天CPU实例部署Stable Diffusion
背景信息 稳定扩散（Stable Diffusion，简称SD）是一种人工智能模型，其工作原理是通过学习逐步将噪声数据转化为有意义的图像数据。这一过程包括两个主要阶段：首先是噪声化过程，即将真实图像逐步添加噪声直至变成纯噪声；然后是去噪过程...
DSSM向量召回
前提条件 已运行推荐解决方案-特征工程工作流模板生成向量召回的数据集，具体操作请参见 特征工程。rec_sln_demo_user_table_preprocess_all_feature_v2 rec_sln_demo_item_table_preprocess_all_feature_v2 rec_sln_demo_behavior_table_...
特征工程
通过推荐算法定制生成的特征工程，对原始数据集（包括用户表、物料表和行为表等）进行处理，并生成新的特征表，以供后续的召回和排序使用。前提条件 已开通PAI（Designer），并创建默认工作空间。具体操作，请参见 开通PAI并创建默认工作...
图像内容风控解决方案
在线上业务的内容生产过程中，为了及时识别其中的高风险内容，PAI提供了图像内容风控解决方案。该方案使用Designer预置模板，基于人工智能算法快速构建符合业务场景的风控模型，并部署为EAS在线服务，助力您快速识别高风险内容，进而对其...
ModelScope魔搭社区
模型ID 向量维度 度量方式 向量数据类型 备注 damo/cv_resnet50_product-bag-embedding-models 512 Cosine Float32 说明 关于商品图像同款特征模型更多信息请参考：商品图像同款特征 使用示例 说明 需要进行如下替换代码才能正常运行：...
在GPU实例上使用RAPIDS加速图像搜索任务
本文以使用RAPIDS加速图像搜索任务为例，介绍如何在预装镜像的GPU实例上使用RAPIDS加速库。前提条件 使用本教程进行操作前，请确保您已经注册了阿里云账号。如还未注册，请先完成 账号注册。背景信息 RAPIDS（全称Real-time Acceleration ...
自定义特征
y2=x2/x1 计算逻辑原理 自定义特征：通过已有特征之间加减乘除的计算生成新的特征。参数说明 IN端口-输入参数 参数名 参数描述 是否必填 输入数据类型 数据源类型 特征变量 生成新特征需要的基础特征。是 整数或浮点数 说明 若存在非数值...
分布式工作流Argo集群概述
分布式工作流Argo集群（简称 工作流集群）采用无服务器模式，使用阿里云弹性容器实例ECI运行工作流，通过优化Kubernetes集群参数，实现大规模工作流的高效弹性调度，同时配合抢占式ECI实例，优化成本。本文介绍 工作流集群 的控制台操作...
FeatureStore Python SDK
特征视图定义了数据从哪里来（DataSource）、需要进行哪些预处理或转换操作（如特征工程/Transformation）、特征的数据结构（包含特征名称和类型在内的特征schema）、数据存储的位置（OnlineStore/OfflineStore），并提供特征元信息管理，...
工作原理
本文介绍智能巡检的背景信息、工作原理、功能特性、基本概念、调度与执行场景和使用建议。背景信息 基于时间的数据（例如日志、指标）日积月累后会积累大量的数据。例如，某个服务每天产生1000万条数据，则一年大约为36亿条数据。对于这些...
FeatureStore概述
阿里云FeatureStore为您提供特征项目和特征实体功能，通过特征实体的Join Id来关联各个项目中的特征视图，将一个特征实体的所有特征进行关联，最终结合Label表产出模型特征表Train Set表，并将Train Set表存在离线存储MaxCompute中。...
回源SNI
回源SNI的工作原理如下图所示。回源SNI的工作流程如下：当 全站加速 DCDN 节点以HTTPS协议访问源站时，需要在SNI中指定访问的具体域名（如：example.com）。源站接收到请求后，根据SNI中记录的域名，返回对应域名的证书（即example.com的...
DDoS基础防护
DDoS基础防护工作原理 NAT网关默认开启DDoS基础防护能力，提供不超过5 Gbps的基础DDoS防护能力。所有来自互联网的流量都要先经过云盾再到达NAT网关实例，云盾会针对常见的攻击进行清洗过滤。更多信息，请参见 什么是DDoS原生防护。说明 当...
什么是图像搜索
图像搜索（Image Search）以深度学习和机器视觉技术为核心，提取图片内容特征、建立图像搜索引擎，是一款用于图片间相似性检索的平台型产品。用户输入图片，可以快速在图片库中检索到与输入图片相似的图片集合。结合不同的行业和业务场景，...
自定义路由类型监听的工作原理
本文为您介绍自定义路由类型监听的工作原理、使用限制、使用示例、与智能路由类型监听的功能对比。工作原理 配置自定义路由类型监听后，全球加速 实例能够根据配置的监听端口范围、目标终端节点组协议和端口范围，以及终端节点（交换机...
鹿班介绍
基于图像智能生成技术，鹿班可以改变传统的设计模式，使其在短时间内完成大量banner图、海报图和会场图的设计，提高工作效率。用户只需任意输入想达成的风格、尺寸，鹿班就能代替人工完成素材分析、抠图、配色等耗时耗力的设计项目，实时...
SDK端接入
把该图片文件导入到工程中 res\drawable\ 目录，如果没有这个文件夹，请先在工程中创建，否则将无法正常工作。如果在安卓工程打包时启用了shrinkResources true，还需要在 keep.xml 文件中添加以下内容：*"/>离线人脸识别SDK会与App包名...
多主体识别最佳实践
多主体识别对于提高图像搜索的准确性和相关性非常重要，尤其是在复杂的搜索场景中，用户希望根据多个不同特征找到相关图像时。通过识别图像中的多个主体，搜索引擎可以更好地理解用户的搜索意图，并提供更精确的结果。向量检索版的主体识别...
案例：搭建以图搜图系统
以图搜图应用的核心模块有两个：特征提取模块：负责从图像中提取视觉特征，从而获得一个高维的特征向量，在这个高维特征空间中越相似的图像距离越近。向量检索模块：负责在海量的图像特征向量集中快速地查找与查询图片特征最接近的前k个...
图像人脸融合
功能描述 图像人脸融合功能可以将用户图中的人脸融合到模板图中的人脸位置，生成一张包含用户图人脸特征的新图像。特别注意的是，该功能严格要求使用者事先获得用户图和模版图的授权，不得用于非法或有违道德约束的场景中。关于该接口功能...
概述
特征层：负责处理从数据转换为特征的工作，包括数据接入、特征生成、数据同步和特征更新。模型层：负责处理模型相关的MLOps能力，包括模型创建、模型训练、模型评估、模型推理和模型管理。适用场景 如下图所示，PolarDB for AI 将传统的 DB...
评分卡信用评分
其原理是先将分箱后的原始数据进行特征工程变换，再使用线性模型建模。评分卡建模理论通常适用于信用评估领域，例如信用卡风险评估和贷款发放业务。在其它领域，评分卡建模也可以作为分数评估，例如客服质量打分和芝麻信用打分。前提条件 ...
PAI ArtLab电商背景生成
由于目前AIGC技术在文字生成上的壁垒，在当前工作流中，大家会选择AI结合PS等图像生成工具的方式。准备工作 使用 PAI ArtLab前，需要准备产品图片，本文以如下两张图片为例进行说明。蒙版的质量会直接影响到后续图片生成的边缘，因此必须要...
GBDT二分类
GBDT（Gradient Boosting Decision Tree）二分类算法的原理是设置阈值，如果特征值大于阈值，则为正例，反之为负例。组件配置 您可以使用以下任意一种方式，配置GBDT二分类组件参数。方式一：可视化方式 在 Designer 工作流页面配置组件...
组件参考：所有组件汇总
特征工程 特征重要性过滤 特征重要性过滤组件为线性特征重要性、GBDT特征重要性和随机森林特征重要性等组件提供过滤功能，支持过滤TopN的特征。主成分分析 该组件是研究如何通过少数主成分揭示多个变量间的内部结构，考察多个变量间相关性...
基于对象特征的推荐
在工作流列表，双击 基于对象特征的推荐 工作流，进入工作流。系统根据预置的模板，自动构建工作流，如下图所示。区域 描述 ① 特征工程。将仅有4个字段的原始数据通过特征工程的方法进行数据维度扩充，该实验中的特征包括推荐对象的特征和...
以图搜图
以图搜图服务，是物联网边缘计算为V（Vision）系列边缘一体机提供的图像对比算法应用，支持同时检索多个边缘一体机中的人脸和人体特征图片。本文介绍物联网边缘计算提供的以图搜图增值服务及其使用方法。前提条件 使用以图搜图服务前，您...
换脸鉴别
领先鉴别技术：基于图片中人像目标的高维度全量特征，换脸鉴别服务涵盖依据视频图像的像素、纹理级别的低阶特征，到具有全局语义的高阶特征，对图像进行全方位、高语义、多层次组合分析，攻防一体式的训练，极大提升合成人脸图片检出率。...
网格优化中心概述
基于访问日志分析自动推荐生成Sidecar资源对象的工作实现原理如下：通过分析数据平面网格代理产生的访问日志获取数据平面服务之间的调用依赖关系，为数据平面中的每个工作负载自动推荐生成相应的Sidecar资源对象。根据分析结果生成出...
多模态检索解决方案
id':0}]]} 服务调用示例 多模态、图像检索服务首先需要建立多模态、图像检索数据库，然后将注册到数据库中的多模态数据、图像进行特征提取，最后从多模态、图像数据库的数据中，对上传的多模态数据、图像进行相似快速检索。整个过程需要...
特征管理
本文介绍了在PolarDB for AI中，特征管理的适用场景，以及创建特征、更新特征、查看特征状态、查看特征列表以及删除特征的语法及其示例内容。适用场景 从原始数据直接构建机器学习模型往往比较困难。机器学习模型的输入一般会先对原始数据...
特征配置
特征的配置对应配置总览中的 FeatureConfs，FeatureConfs 是一个 Map[string]object 结构，其中 key 为场景名，可以根据不同场景配置不同的特征 特征加载 在精排之前，需要从特征存储源里获取到 user 或者 item 的特征数据。在某些情况下，...
2021年
2021-10-29 华东2（上海）批量添加人脸数据 2021年09月 类目名称 接口名称 功能描述 发布时间 发布地域 相关文档 人脸人体 智能瘦脸 输入一张人物图像，自动检测并分析人脸五官特征，生成脸部五官调整瘦脸后的图像。当图像中包含多人，最多...
AI视频生成-ComfyUI镜像部署
系统为每个用户分配独立的工作目录，便于管理和存储模型、输出图像/视频等文件。具体使用流程如下：部署EAS服务 根据您的具体使用场景，选择部署标准版、API版或集群版的服务。调用EAS服务 根据部署的服务版本，支持以下三种调用方式：通过...
K近邻
K近邻算法进行分类的原理是针对预测表的每行数据，从训练表中选择与其距离最近的K条记录，将这K条记录中类别数量最多的类，作为该行的类别。组件配置 您可以使用以下任意一种方式，配置K近邻组件参数。方式一：可视化方式 在 Designer 工作...
案例一：搭建以图搜图系统
它基于图像的视觉特征，例如颜色、纹理、形状等，通过计算机视觉和机器学习技术，将图像转换为可计算的特征向量，并将其与数据库中的其他图像进行比较和匹配。以图搜图的应用场景非常广泛。诸如：在电子商务领域，用户可以通过拍照或上传...
创建工作流
如果需要制作多码率、多音轨、多字幕或多格式等类型视频，或希望预先编排好一系列任务流程，然后按照编排好的环节和条件依次执行任务，您可以创建工作流并在工作流中设置转码、分析、截图、打包（封装）、审核、提取视频DNA、设置智能封面...
- 产品推荐
- 这些文档可能帮助您