组件参考：所有组件汇总
聚类模型评估 该组件是基于原始数据和聚类结果，评估聚类模型的优劣性，从而输出评估指标。混淆矩阵 该组件适用于监督学习，与无监督学习中的匹配矩阵对应。多分类评估 该组件是指基于分类模型的预测结果和原始结果，评估多分类算法模型的...
数据页面管理
在管理数据页面中，数据的类型分为 ...上传数据 管理数据页面中的数据类型有 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六大类，不同类型的数据可上传的数据格式互不相同，具体三种类型数据上传数据的详细说明请参见 上传数据。
数据页面管理
在管理数据页面中，数据的类型分为 ...上传数据 管理数据页面中的数据类型有 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六大类，不同类型的数据可上传的数据格式互不相同，具体三种类型数据上传数据的详细说明请参见 上传数据。
API概览
智能管理 智能管理 人脸聚类 人脸聚类 CreateFigureClusteringTask 创建人物人脸聚类任务 创建一个人物人脸聚类任务，通过智能算法，可以在您已索引到数据集的图片中，将属于不同人物的人脸进行聚类分组。CreateFigureClustersMergingTask ...
通过消费组读取文本日志进行模板发现
通识字段模板 在文本分析作业对日志进行预处理时，日志相似聚类算法会使用模板表达式匹配日志中的文本内容并将其替换为模板名称，有助于提高分析的准确性。例如 模板名称 为IP，模板表达式 为(?[^A-Za-z0-9])|^)(\d{1,3}\.\d{1,3}\.\d{1,3}...
日志聚类
本文介绍日志聚类功能及其操作，包括开启日志聚类、查看聚类结果和原始日志、对比不同时间段的聚类日志数量等。前提条件 已创建Standard Logstore。具体操作，请参见 创建Logstore。已采集日志。具体操作，请参见 数据采集。已配置索引。...
分析预警
本文为您介绍辅助线、趋势线、预测、异常检测、波动原因、聚类六种 分析方式。背景信息 分析预警支持从多个角度对当前数据进行分析，通过该功能可以直观了解数据的变化趋势和异常点。分析预警目前支持辅助线、趋势线、预测、异常检测、波动...
ST_ClusterKMeans
返回每个Geometry对象基于二维K均值算法生成的聚类结果数量。语法 integer ST_ClusterKMeans(geometry winset geom,integer numberOfClusters);参数 参数名称 描述 geom 目标Geometry对象。numberOfClusters 聚类数。描述 用于聚类的距离是...
ST_ClusterKMeans
返回每个Geometry对象基于二维K均值算法生成的聚类结果数量。语法 integer ST_ClusterKMeans(geometry winset geom,integer numberOfClusters);参数 参数名称 描述 geom 目标Geometry对象。numberOfClusters 聚类数。描述 用于聚类的距离是...
ST_ClusterKMeans
返回每个Geometry对象基于二维K均值算法生成的聚类结果数量。语法 integer ST_ClusterKMeans(geometry winset geom,integer numberOfClusters);参数 参数名称 描述 geom 目标Geometry对象。numberOfClusters 聚类数。描述 用于聚类的距离是...
生态集成
云原生数据仓库AnalyticDB PostgreSQL版 具备完善和开放的生态系统，支持无缝对接业界以及阿里云生态的数据管理工具，BI报表可视化工具，ETL工具，数据迁移工具，同时可以与业界流行的流式处理系统，日志类系统，大数据类系统，传统数仓及...
创建向量索引
在处理大型数据集或需要快速访问和检索数据的场景（数据库查询优化、机器学习和数据挖掘、图像和视频检索、空间数据查询等）中，创建向量索引是加速向量检索的有效方式，可以提高查询性能、加速数据分析和优化搜索任务，从而提高系统的效率...
Centauri对比
16亿*16亿数据集规模过大，只有CE的聚类分片方式可以成功运行，以下为基本运行数据信息。测试方法 聚类/AutoTunning耗时（秒）Build耗时（秒）Seek耗时（秒）Centauri 1127 19962 跑了两次均失败，OOM。CE 哈希 无 14637 跑了一次均失败，...
SQL请求行为识别
例如面对上百页的SQL模板，如果通过排序很难一个个去筛选问题SQL，此时可以使用 SQL请求行为识别，通过DAS后端算法找出相似的行为图像，帮助您将大量的SQL模板聚类，由此提高问题定位的效率。方案二：SQL请求行为识别 功能根据指标的异常...
机器学习（MADlib）
聚类问题：提供K-Means算法实现聚类分析。关联分析：提供Apriori算法实现关联分析，解决如“啤酒与尿布”的关联问题。时序分析：提供ARIMA自回归移动平均模型预测时间序列数据的未来值。其他：数据降维如通过PCA主成分分析模型来提炼主因子...
2023-11-03
数据服务分析洞察支持预处理函数 数据服务的分析洞察功能支持数据预处理函数，包括加权平均、滑动平均、相关性、聚类、极大值检测、时序分解、正态检验、分布检验等函数。数据服务API参数配置功能优化 数据服务API请求参数新增支持>=、、>...
功能特性
SQL洞察 安全审计 内置了超过900种高危操作规则，涵盖异常操作、数据泄露、SQL注入和漏洞攻击等4大类，能够更全面地支持自动识别高危操作、SQL注入和新增访问等风险。安全审计 空间与性能自治 空间分析 直观地查看数据库及表的空间使用情况...
工艺模式建模
案例特性优先：先基于历史案例库聚类，再在每类中筛选出优质案例。否 案例特性优先 案例指标优先 案例特性优先 模式类别数 输入期望的模式类别个数。缺省状态，算法会自动确定。否/[1,99999999]权重变量 未输入权重变量时，每个描述变量的...
标签传播聚类
算法说明 图聚类是根据图的拓扑结构，进行子图的划分，使得子图内部节点的连接较多，子图之间的连接较少。在用一个唯一的标签初始化每个节点之后，该算法会重复地将一个节点的标签社群化为该节点的相邻节点中出现频率最高的标签。当每个...
数据类型
QUANTILE_STATE/QUANTILE_STATE是一种计算分位数近似值的类型，在导入时会对相同的Key，不同Value进行预聚合，当Value数量不超过2048时采用明细记录所有数据，当Value数量大于2048时采用TDigest算法，对数据进行聚合（聚类）保存聚类后的...
新建及管理动态脱敏规则
动态脱敏是在不更改基础数据的情况下，仅改变最终展示的查询结果数据；脱敏规则用于管理脱敏的数据范围及具体的脱敏方式。本文为您介绍如何新建及管理动态脱敏规则。背景信息 动态脱敏规则常用于查询某些敏感的生产数据场景。对满足条件的...
新建及管理动态脱敏规则
动态脱敏是在不更改基础数据的情况下，仅改变最终展示的查询结果数据；脱敏规则用于管理脱敏的数据范围及具体的脱敏方式。本文为您介绍如何新建及管理动态脱敏规则。背景信息 动态脱敏规则常用于查询某些敏感的生产数据场景。对满足条件的...
安装Proxima CE包
在使用向量计算功能之前，您需要安装Proxima CE包，本文为您介绍Proxima CE的环境准备、安装包获取方式、上传及输入数据准备等过程。环境准备 已创建MaxCompute项目，详情请参见 创建MaxCompute项目。已创建DataWorks工作空间，并绑定...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
智能异常分析概述
由聚类所生成的簇是一组数据对象的集合，这些对象与同一个簇中的对象彼此相似，与其他簇中的对象不同。无监督 根据类别未知（未被标记）的训练样本解决模式识别中的各种问题。有监督 有监督的学习是从标签化训练数据集中推断出函数或模型的...
非结构化分析
功能说明 向量分析实现原理是通过AI算法提取非结构化数据的特征，然后利用特征向量唯一标识非结构化数据，向量间的距离用于衡量非结构化数据之间的相似度。AnalyticDB PostgreSQL版 向量检索分析基于MPP查询架构构建，帮助用户实现基于SQL...
产品简介
在舆情监控、话题审核、口碑分析聚类等商业领域有广大的应用空间。中心词提取 基于海量数据，使用电商标题中心词以及类目进行训练，通过给每个词计算一个相关性分数来衡量每个词与句子的相关性程度，进而识别并提取出句子的中心词。适用于...
2022年
2022-09-30 华东2（上海）2022-8 功能名称 功能描述 发布时间 发布地域 相关文档 Designer 新增多种算法组件 Designer 新增多种算法组件，包括XGBoost、DBSCAN、高斯聚类、岭回归以及Lasso回归的训练及预测组件。您可以在Designer平台的...
产品简介
服务内容 服务大类 服务类型 服务内容 大数据专家咨询服务 大数据技术架构方案咨询 为客户提供构建和优化大数据体系的技术架构方案咨询服务，覆盖离线/实时数仓体系建设管理、数仓建模管理，数据开发管理，数据安全管理、数据质量管理、...
数据服务入门
步骤一：创建数据源并配置网络连通性 使用数据服务创建API前，您需将数据库或数据仓库添加为DataWorks的数据源，并保障数据服务资源组与您的目标数据源网络连通，以便调用API时DataWorks可成功访问数据源。说明 DataWorks工作空间将集群或...
控制台发布记录
本章节介绍了 云原生数据库PolarDB 的产品功能动态和对应的文档。2024年3月 功能名称 功能描述 发布时间...同时 PolarDB for AI 提供了一系列内置的机器学习和人工智能算法，包括：分类算法、回归算法和聚类算法等。2022-07-08 PolarDB for AI...
2023年
使用do-while节点实现复杂的数据分析 2023-09-20 新增通过跨项目数据访问实现不同地域MaxCompute项目数据迁移 新说明 本文为您介绍如何通过跨项目数据访问实现不同Region的MaxCompute项目数据迁移，包括两种使用场景：同云账号内不同Region...
2023年
polar_sql_mapping 2023年4月 时空数据库（Ganos v5.4）类别 说明 相关文档 发布时间 新增 新增ST_ClusterDBSCAN函数，支持在经纬度坐标下计算DBScan聚类。ST_ClusterDBSCAN 2023年4月 新增ST_CurveRecognize函数，识别轨迹中的弯道、转弯...
MapReduce
自然语言处理：基于大数据的训练和预测。基于语料库构建单词同现矩阵，频繁项集数据挖掘、重复文档检测等。广告推荐：用户单击（CTR）和购买行为（CVR）预测。MapReduce流程说明 MapReduce处理数据过程主要分成Map和Reduce两个阶段。首先...
聚水潭：云原生数据仓库助力企业实现商业洞察
本文介绍聚水潭通过引入 AnalyticDB PostgreSQL版 构建企业级云原生数据仓库，解决业务需求过大、资源弹性扩展难等问题。客户介绍 上海聚水潭网络科技有限公司成立于2014年，是一家从事SaaS ERP应用服务研发且拥有完全自主知识产权的软件...
深度解析Lindorm搜索索引（SearchIndex）特性
按照某个字段进行聚类统计，求取sum/max/min/avg等，或者返回去重后的结果集。模糊查询。查询以'阿里'开头的数据，可以匹配出'阿里云'的结果集，类似MySQL的like语法。诸如此类对海量数据低成本存储和检索多样化的需求，成为越来越多业务的...
支持的数据脱敏算法
本文介绍支持的数据脱敏算法。算法分类 分类描述 算法描述 输入参数 适用类型和典型场景 哈希脱敏 不可逆算法。适用于密码或需要通过对比进行敏感数据确认的场景。支持常见的哈希算法，并支持偏移量（加盐值）配置。MD5 Salt值 敏感类型：...
2021年
2021-12-03 全部地域 参考：渐进式计算 MaxCompute物化视图功能增强 MaxCompute物化视图支持创建分区和聚簇，在查询物化视图时如果发现有分区数据不存在物化视图中时，可以设置系统自动穿透去查询源表，并返回源表和物化视图的汇总数据。...
Proxima Cluster参数
1.聚类 1.1 KmeansCluster/BatchKmeansCluster 参数名 类型 默认值 备注 proxima.general.cluster.count UINT32 0 中心点数量 proxima.kmeans.cluster.count UINT32 0 中心点数量，优先级高于 general，低于 suggest 的 K 值 proxima....
- 产品推荐
- 这些文档可能帮助您