功能特性
监控告警 数仓和数据湖 功能集 功能 功能描述 参考文档 数据存储 数据缓存 云数据库SelectDB支持数据缓存功能，当您需要管理缓存数据并提升云数据库 SelectDB 版的访问速度时，可以根据该文档对缓存进行有效管理，并利用LRU和TTL管理策略，...
全文检索
人们通常选择数据库或数据仓库存储文本数据，但是将文本数据中有价值的信息提取出来并进行高效分析，往往需要涉及多个数据处理系统配合来实现，用户的使用门槛通常较高、维护成本较大。通常在使用数据仓库进行文本数据的加工和分析时，离不...
产品简介
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
产品简介
数据源 提供数据的源点，会根据这些数据来构建私域知识库，用于后续的检索、知识问答 大模型 大规模预训练语言模型是指使用海量文本数据进行预训练的语言模型。它通过学习大量的语言知识和语境信息，能够生成高质量的文本或提供语义理解。...
组件参考：所有组件汇总
文本分类训练（MaxCompute）（即将下线）该算法组件集成了基于BERT的文本分类模型、传统深度文本分类（例如TextCNN）模型及PAI自研的DGCNN模型。文本匹配训练（MaxCompute）（即将下线）该组件的输入为两个句子，输出它们是否匹配。序列...
高效基因序列检索助力快速分析肺炎病毒
云原生数据仓库AnalyticDB MySQL版 是云端托管的PB级高并发低延时数据仓库，通过 AnalyticDB MySQL版 向量检索功能构建的基因检索系统，支持毫秒级针对10亿级别的向量数据进行查询分析，更加快速、高效的为肺炎病毒防控、研发治疗药物以及...
关键词抽取
模块 实 现了 基于 自由 形状 变形 网格 变形 算法 遗传算法 差分 进化 算法 飞机 表面积 计算 算法 基于 矩 积分 飞 机 体积 计算 算法 开发 基于 VTK 数据 可视化 格式 工具 PAI命令 PAI-name KeywordsExtraction-DinputTableName=maple_...
数据智能概述
算法模板 物联网平台提供算法模板供您使用，您可以查看算法模板的详情信息，如：算法详细介绍、运行算法所需数据、算法产出的数据等。实例管理 您可以在算法实例页面，根据实际业务需求购买算法实例和对已购买的算法实例进行续费和升配。...
BERT模型离线推理
它通过在大量文本数据上预训练，学习到文本的深层双向表示，然后可以通过少量的微调应用到各种下游的NLP任务中。该算法组件使用已经训练完的BERT分类模型，将输入表中的文本分类成训练时指定的某个类别。可视化配置参数 您可以在Designer中...
快速体验
DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力，本文以一个零售电商行业的数仓搭建实验为例，为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现，帮助您深入了解阿里云...
模型配置
算法模型的优劣依赖于训练数据，数据质量越高，数据量越大，算法效果越好。算法模型使用的行为数据集的数据要求与一般数据集有所不同，请参见 行为数据集样例 准备数据。数据存储于ADB3.0类型的数据源中，且数据源已接入Quick Audience，请...
产品简介
该产品支持文本实体抽取、文本分类、关键短语抽取、情感分析、关系抽取、短文本匹配、商品评价解析等 NLP 定制化算法能力，用户无需拥有丰富的算法背景，仅需标注或上传适量文档数据，即可通过平台获得优质的 NLP 算法模型。教学视频 功能...
模型配置
算法模型的优劣依赖于训练数据，数据质量越高，数据量越大，算法效果越好。算法模型使用的行为数据集、商品标签数据集的数据要求与一般数据集有所不同，请分别参见 行为数据集样例、商品标签数据集样例 准备数据。行为数据集、商品标签数据...
OpenSearch产品选型
采用高可用工程架构，数据可水平拓展，保障数据实时性、高并发检索可靠性 召回引擎版 大规模文本召回检索场景，同时有高性能低成本诉求，需支持灵活定制搜索服务的企业及开发者，可接入此类型 内置灵活的索引策略及搜索策略，支持海量大...
自媒体：易撰
所属行业：自媒体 网站地址：易撰 客户介绍 长沙营智信息技术有限公司是专业的新媒体大数据服务商，其旗下知名品牌易撰，基于新媒体大数据挖掘技术及NLP算法分析，为各内容创客、广告主提供全面、科学、精准的大数据分析服务以及大数据架构...
概述
Row-oriented AI NL2BI：用自然语言实时查看BI报表 典型解决方案 ID-Mapping在游戏领域的解决方案 通义千问大模型数据推理和交互 核心算法 LightGBM算法 DeepFM算法 K均值聚类算法（K-Means）随机森林回归算法（Random Forest Regression）...
Echarts 热力图
刷新频率：手柄拖拽时触发大屏更新周期，单位为毫秒，调大这个数值可以改善性能，但是降低体验。y轴：请参考 x轴 样式进行配置。视觉映射：单击右侧的 眼睛 图标显示视觉映射。最小值：手动输入数值或选择 数据最小值，修改视觉映射的最小...
Echarts 热力图
刷新频率：手柄拖拽时触发大屏更新周期，单位为毫秒，调大这个数值可以改善性能，但是降低体验。y轴：请参考 x轴 样式进行配置。视觉映射：单击右侧的 眼睛 图标显示视觉映射。最小值：手动输入数值或选择 数据最小值，修改视觉映射的最小...
Quick Audience数据集样例
为保证数据顺利快速分析，不同数据表需事先按照特定格式进行数据存储。本章节分别介绍V3的用户标签数据集、RFM模型、AIPL模型、行为数据集、商品标签数据集 的数据表存储样例。用户标签数据集样例 ADS大宽表样例：user_id user_id_2 user_...
构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
工作原理
定时分析数据：文本分析中的算法以时间窗口为单位分析数据。结果输出：将分析结果输出到目标日志库中，并生成相应的仪表盘对分析结果进行可视化展示。基本概念 日志服务文本分析功能涉及的基本概念如下表所示。术语 说明 作业 一个文本分析...
Designer使用案例汇总
基于文本分析算法实现新闻分类 介绍如何通过PAI提供的文本类组件，快速构建文本分类模型。基于回归算法实现农业贷款发放预测 介绍如何通过农业贷款的历史发放情况，使用线性回归方法实现贷款发放预测。基于分箱组件实现连续特征离散化 介绍...
基于文本分析算法实现新闻分类
仅针对业务场景介绍文本分析算法的使用方法，未对数据集进行特征工程处理及细节调优。因为本工作流模板已为 过滤与映射 配置了 过滤条件，所以您可以直接查看 append_id 为115、292、248及166的新闻。如果需要查看其它新闻，则可以参见如下...
算法说明
文本分析中的算法采用LogParser和异常检测技术，提供日志分析报表帮助您了解日志的全局信息和可能存在的异常情况，包括：通过日志报表快速定位可能出现异常的日志类别（例如新出现的日志类别，异常分数Top5的日志类别等），缩小人工排查的...
词云（v1.x版本）
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
X-Engine最佳实践
由于图片空间业务存储的图片元信息大部分为文本内容，特别是一些URL属性，非常适合X-Engine引擎中使用的前缀压缩算法。再结合X-Engine中的紧凑数据页和通用压缩算法。迁移到X-Engine引擎之后的图片空间业务，所使用的磁盘空间只有使用...
瀑布图（v4.x版本）
差值文本：柱状图内每个类目的差值数据文本的样式，包括字体样式、文字粗细、字号和颜色。单击 图标可开启或关闭差值文本。总计：总计数据类目的名称。单击 图标可开启或关闭总计。其它 海量数据交互增强：柱状图的数据过多时可设置数据...
LLM-MD5去重（MaxCompute）
LLM-MD5去重组件主要用于大语言模型（LLM）的文本数据预处理工作，可以计算文本的MD5哈希值，根据哈希值对文本进行去重。使用限制 仅支持MaxCompute计算引擎。算法简介 对所有输入的文本数据使用 hashlib.md5 哈希算法计算哈希值。哈希值...
数据类型转换
MySQL 数据库 OceanBase 数据库 MySQL 租户 YEAR YEAR DATE DATE TIME TIME TIMESTAMP TIMESTAMP DATETIME DATETIME 大对象和文本类型 MySQL 数据库 OceanBase 数据库 MySQL 租户 TINYBLOB TINYBLOB MEDIUMBLOB MEDIUMBLOB BLOB BLOB ...
测试数据构建
数据管理DMS的测试数据构建功能拥有强大的算法引擎，支持批量生成各类随机值、地区名、虚拟IP地址等信息，可以大大减轻准备测试数据的负担。本文介绍构建测试数据的方法。前提条件 支持的数据库类型：MySQL：RDS MySQL、PolarDB MySQL版、...
质量规则参数配置
统计值（重复行数/重复率）重复行数用于检查数据中重复了的行数的多少，仅计算多出来的行数，算法为总行数-去重行数。重复率=重复行数/总行数。如果需要重复数据的全部行数/重复率计算，可以使用唯一值校验模板的异常行数/异常率指标。及时...
质量规则参数配置
统计值（重复行数/重复率）重复行数用于检查数据中重复了的行数的多少，仅计算多出来的行数，算法为总行数-去重行数。重复率=重复行数/总行数。如果需要重复数据的全部行数/重复率计算，可以使用唯一值校验模板的异常行数/异常率指标。及时...
高维向量检索（PASE）
在大数据量的情况下，使用HNSW算法的性能提升相比其他算法更加明显，但邻居点的存储会占用一部分存储空间，同时召回精度达到一定水平后难以通过简单的参数控制来提升。HNSW的算法原理参见下图。算法流程说明：构造多层图，每层图都是下层图...
高维向量检索（PASE）
在大数据量的情况下，使用HNSW算法的性能提升相比其他算法更加明显，但邻居点的存储会占用一部分存储空间，同时召回精度达到一定水平后难以通过简单的参数控制来提升。HNSW的算法原理参见下图。算法流程说明：构造多层图，每层图都是下层图...
高效向量检索（PASE）
在大数据量的情况下，使用HNSW算法的性能提升相比其他算法更加明显，但邻居点的存储会占用一部分存储空间，同时召回精度达到一定水平后难以通过简单的参数控制来提升。HNSW的算法原理请参见下图。算法流程说明：构造多层图，每层图都是下层...
什么是智能众包
人工智能众包（AI Crowdsourcing）基于共享人力资源模式，为人工智能算法提供数据采集、清洗、标注等服务，帮助企业快速构建算法数据集。人工智能众包（AI Crowdsourcing）基于共享人力资源模式，为人工智能算法提供数据采集、清洗、标注等...
智能异常分析概述
智能异常分析应用是一个可托管、高可用、可扩展的服务，主要提供智能巡检、文本分析和根因诊断三大能力。本文介绍智能异常分析应用的产品架构、功能优势、适用场景、核心名词、使用限制和费用说明等信息。重要 目前仅限白名单用户使用根因...
引擎简介
核心能力 低成本 支持多种高效压缩算法，有效降低索引存储成本，同时借助冷热分离机制，可以将历史数据转储到更低廉的存储介质上。云原生弹性 基于云原生存储计算分离架构设计，可快速弹性扩展副本，高效应对流量高峰。高可用 分布式高可用...
迁移时源库为Oracle的注意事项及限制
如果迁移的源数据库类型为自建Oracle，您需要在配置具体的迁移任务前，参考本文的注意事项及限制，以保障数据迁移任务的正常运行。源库为Oracle的迁移方案概览 根据如下迁移方案，查看迁移任务的注意事项及限制：自建Oracle迁移至PolarDB ...
客户案例
MaxCompute已被广泛应用于各大领域处理云上大数据，帮助众多企业解决了海量数据分析问题，同时降低企业运维成本，企业人员可更专注于业务开发。本文为您介绍MaxCompute的精选客户案例。MaxCompute的全量客户案例信息，请参见 行业客户案例...
- 产品推荐
- 这些文档可能帮助您