组件参考：所有组件汇总
PS-SMART二分类 参数服务器PS（Parameter Server）致力于解决大规模的离线及在线训练任务，SMART（Scalable Multiple Additive Regression Tree）是GBDT（Gradient Boosting Decision Tree）基于PS实现的迭代算法。PS逻辑回归二分类 该组件...
文档检索和LLM集成
集成LangChain LangChain是一套基于大语言模型（LLM）构建应用的开源框架，可实现通过一整套接口和工具将模型和外部数据连接。下文将展示如何将 AnalyticDB PostgreSQL版 的检索能力集成到LangChain中实现一个问答系统。安装模块 pip ...
概述
应用场景 特色优势 支持大规模存储：依靠阿里云视觉智能开放平台的弹性架构实现TB级数据的准实时处理。低接入成本：可视化配置事件订阅，面向事件数据编程，无需感知API差异。数据隐私合规性与保护：兼容BYOK、HTTPS传输等安全措施，租户...
某健康体检公司迁移SQL Server到Lindorm
通过专利内存管理技术CCSMap和BucketCache，结合AliJDK深度定制ZGC算法，实现GC停顿小于5ms，更好的满足实时在线查询。开启 云原生多模数据库 Lindorm 压缩优化特性，显著减少存储空间开销。借助 云原生多模数据库 Lindorm 集群冷热分离...
通过导入实现列更新
本文介绍如何在 云数据库 SelectDB 版 实例中，通过数据导入实现高效的 数据更新。概述 在SelectDB的Unique或Aggregate模型中，可以通过数据导入实现列更新能力。列更新支持高频的并发写入，写入成功后数据即可见，系统自动通过MVCC机制来...
互联网、电商行业离线大数据分析
通过阿里云MaxCompute、云数据库RDS MySQL、DataWorks等产品，可以实现互联网、电商网站的离线数据分析，且支持通过DataV大屏展示分析后的业务指标数据。概述 电商网站的销售数据通过大数据进行分析后，可以在大屏幕展示销售指标、客户指标...
产品优势
灵活、可定制 开发者可基于自身业务特性与数据，定制相应的算法模型、应用结构、数据处理、查询分析、排序等配置，满足个性化搜索需求，提升搜索结果点击率，实现业务快速迭代，极大缩短需求上线的周期。安全、稳定 提供7×24小时的运行...
构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
OSS数据安全防护最佳实践
智能化：运用大数据和机器学习能力，通过智能化的算法，对敏感数据和高风险活动，诸如数据异常访问和潜在的泄漏风险进行有效识别和监控，并提供修复建议。提供定制化的敏感数据识别能力，便于客户自定义识别标准，实现精准识别和高效防护。...
应用场景
数据审计 智能解析数据库及大数据的通信流量，细粒度审计数据访问行为，通过对数据源全量行为的审计溯源、危险攻击的实时告警、风险语句的智能预警，为您最敏感的数据库资产做好最安全的监控保障。个人信息合规 可精准区分和保护个人数据，...
客户案例
MaxCompute已被广泛应用于各大领域处理云上大数据，帮助众多企业解决了海量数据分析问题，同时降低企业运维成本，企业人员可更专注于业务开发。本文为您介绍MaxCompute的精选客户案例。MaxCompute的全量客户案例信息，请参见 行业客户案例...
LightGBM算法
LightGBM可以减少数据对内存的使用、减少通信代价以及提升多机并行时的效率，在数据计算上实现线性加速。使用场景 LightGBM是一个算法框架，包括GBDT模型、随机森林和逻辑回归等模型。通常应用于二分类、多分类和排序等场景。例如：在个性...
什么是MaxCompute
Quick BI 基于Quick BI对MaxCompute数据进行报表制作，实现数据可视化分析。MaxCompute融合的更多阿里云产品信息，请参见 支持的云服务。视频简介 核心功能 MaxCompute提供的核心功能如下。详细功能清单，请参见 功能特性。功能分类 功能...
SmartData 3.1.x版本简介
并且针对MD5MD5CRC算法实现了可传入block size的扩展接口以及支持相应的Shell命令，从而能够更好地支持和HDFS文件的比对。文件透明压缩功能，支持对目录设置压缩策略，对目录下新写入的文件数据块进行压缩后存储到OSS后端存储上，对于一些...
如何将一棵LSM-Tree塞进NVM
其中，为了进一步减少针对PM的随机写入提高写入的性能，ROR算法中采用batch的方式将小的ChainLog合并成更大的数据块。如下图所示，ChainLog保证任意大小数据写入PM的原子性，batching用于聚合小的事务缓存批量写入PM以减少PM的随机写，并发...
基于二部图GraphSAGE算法实现推荐召回
基于二部图GraphSAGE算法实现推荐召回 进入Designer页面。登录 PAI控制台。在左侧导航栏单击 工作空间列表，在工作空间列表页面中单击待操作的工作空间名称，进入对应工作空间内。在工作空间页面的左侧导航栏选择 模型开发与训练>可视化...
什么是数据资源平台
支持流式计算、批量离线计算等类型的计算节点在一个工作流中统一编排，通过可视化操作界面，通过拖拉拽的方式连接计算节点迅速实现数据加工流程编辑。支持通过空间算子编辑器零代码实现对空间数据的处理，包括地址空间化（依赖达摩院地址...
机器翻译定制化服务产品介绍
专家定制 达摩院机器翻译算法专家全程主导定制链路，通过对客户业务领域分析、领域数据挖掘、算法调优实现翻译效果高阶满足。适用场景 适用于无算法背景，但对非通用领域翻译质量要求较高，且至少有上万条高质量双语语料的用户。适用场景...
什么是交通云控平台
交通云控平台是阿里云面向交通行业打造的，可提供地图、数据、智能算法、云边协同、控制下发、视觉渲染六大能力的大数据开放平台。产品介绍 交通云控平台为交通行业应用的开发提供图、数、智、控、云、视等能力，交通行业开发者可基于平台...
数据量
存储数据量 存放存储介质的实际数据大小，与备份数据量不同，存储数据量取决于备份数据量、备份数据存储格式、压缩算法等因素。空间大小：数据库磁盘空间（RDS/ECS）>数据文件空间（实际使用）>备份数据量（DBS）>存储数据量（内置存储）。
典型场景
本文将介绍 云原生数据仓库AnalyticDB ...通过MADlib插件扩展，内置多种机器学习算法，实现AI Native DB。支持通过向量检索，实现非结构化数据（如图片、语音、文本）的高性能检索分析。支持JSON等格式，支持日志等半结构化数据处理分析。
简介
系统兼容开源GeoMesa、GeoServer等生态，内置了高效的时空索引算法、空间拓扑几何算法、遥感影像处理算法等，结合云数据库HBase强大的分布式存储能力以及Spark分析平台能力，广泛应用于空间、时空、遥感大数据存储、查询、分析与数据挖掘...
通过RAM角色授权模式配置数据源
因此，云账号负责人可以为大数据团队创建自定义角色 BigDataOssRole，并限制可以使用角色的人员为大数据团队的相关人员，实现团队间的权限管控。创建自定义角色。本案例示例创建可信实体为 阿里云账号、角色名称为 BigDataOssRole 的自定义...
什么是AI分布式训练通信优化库AIACC-ACSpeed
集合算法层 在集合算法层，ACSpeed通过集合通信编译技术，针对不同的机型构建自适应拓扑算法，实现NCCL Runtime充分兼容的无感集合通信拓扑优化。网络层 在网络层，ACSpeed通过对阿里云的VPC、RDMA或者eRDMA网络基础设施进行适配优化，实现...
基于外卖评论实现舆情风控
本文为您介绍如何基于外卖评论实现舆情风控。背景信息 许多商家都有线上留言或评论反馈平台，消费者可以留言以表达自己对消费商品的反馈。消费者的反馈包括表扬性的正向反馈和批评性的负向反馈，商家需要掌握消费者对于商品的整体舆论取向...
用户价值
数据资源平台为用户提供了一站式数据资产定义、生产、管理与服务平台，提供企业级数据资产构建能力和一致性使用体验，助力客户快速构建数据智能平台，实现数据资源统一管理，挖掘潜在规律，优化业务决策，让大数据真正的驱动客户业务。...
FM算法
组件配置 Designer 提供的FM算法模板包括FM训练和FM预测组件，您可以在原PAI-Studio控制台首页的 FM算法实现推荐模型 区域，单击 从模板创建；或在 Designer 控制台 工作流模板 的 基于Alink框架的FM推荐 区域，单击 创建，快速构建FM实验...
AIOps 解决方案专家服务内容说明
在方案设计中我们提供包括时序预测和根因分析、历史数据预测的3大类算法场景的设计，更多具体算法详见《10.1算法列表》《智能故障发现设计方案》3 定制化业务风险巡检方案设计 基于阿里云业务资源和技术能力，为企业定制化业务风险巡检能力...
什么是OceanBase
数据编码是基于数据库关系表中不同字段的值域和类型信息，所产生的一系列的编码方式，它比通用的压缩算法更懂数据，从而能够实现更高的压缩效率。高兼容：兼容常用MySQL/ORACLE功能及MySQL/ORACLE前后台协议，业务零修改或少量修改即可从...
应用场景：低成本历史库
支持自适应压缩，针对数据的不同类型和特点，系统将自动选择混合的字典、前缀、Delta、熵编码等压缩算法，相比业界通用算法，整体压缩率提升10%~30%。云原生弹性 Lindorm基于 存储计算分离 的架构，支持计算资源、存储资源的独立弹性伸缩，...
时序异常检测
算法分类 时序引擎支持以下异常检测算法，算法名称和适用场景如下表：算法名称 适用场景 esd 检测对象为单个数据点。适用于尖刺型异常。对于数据点中有少量显著离群点的情况，检测结果准确。nsigma 检测对象为单个数据点。原理简单，便于...
低成本RDS历史库
支持自适应压缩，针对数据的不同类型和特点，系统将自动选择混合的字典、前缀、Delta、熵编码等压缩算法，相比业界通用算法，整体压缩率提升10%~30%。云原生弹性 Lindorm基于 存储计算分离 的架构，支持计算资源、存储资源的独立弹性伸缩，...
高效向量检索（PASE）
本文介绍RDS PostgreSQL如何通过PASE插件（基于IVFFlat或HNSW算法）实现高效向量检索。说明 PASE插件已不再维护，建议您使用 高维向量相似度搜索（pgvector）插件。前提条件 实例为RDS PostgreSQL 11或以上版本。背景信息 近年来，深度学习...
X-Engine最佳实践
在交易数据库迁移为X-Engine之后，因为X-Engine所采用的紧凑物理页存储格式以及高效的压缩算法，阿里实现了在单库上存储及处理20 TB的原始数据集。相对原有采用InnoDB引擎的实例，单实例处理的数据量提升了3倍。同时因为交易信息库的访问...
用自然语言实时查看BI报表
相关文档 关于PolarDB for AI PolarDB for AI使用说明 PolarDB for AI算法介绍 通过AAT连接AI和数据库表 自然语言到数据库查询语言转义 通义千问大模型数据推理和交互 更多免费体验 您可以前往 PolarDB for AI：在数据库中通过SQL实现AI...
OpenSearch产品选型
开箱即用，无需运维，可一键式完成行业智能搜索全链路配置 高性能检索版 有订单、优惠券、物流、保单等高性能大数据检索场景需求，需低成本一站式快速搭建搜索系统的企业及开发者，可接入此类型 基于自研搜索引擎实现千亿数据毫秒级响应，...
某新能源汽车造车新势力
方案亮点：车联网、高并发、高吞吐、存储计算分离、弹性伸缩能力、成本下降60%。客户感言 阿里 云原生多模数据库 Lindorm 相比于其他存储引擎和HBase开源版本，提供了更...通过合理的使用Lindorm的冷热分离、压缩算法，实现运行成本下降60%。
管理敏感数据
提供灵活的脱敏算法管理，实现不同场景、不同字段的差异化脱敏，解决最细粒度授权、最小范围敏感数据接触问题。提供测试环境，可对脱敏规则、识别规则进行测试。对敏感数据进行监控、审计和预警，方便对敏感数据进行溯源。说明 RDS控制台中...
基本概念
通过数据集成服务，可将Lindorm数据导入MaxCompute，实现大规模的数据计算。更多信息，请参见 什么是MaxCompute。MongoDB 提供稳定可靠、弹性伸缩、完全兼容MongoDB协议的数据库服务。数据结构多样时，可以选择将结构化数据存储在Lindorm，...
HLL近似去重
SelectDB HLL函数 HLL是基于HyperLogLog算法的工程实现，用于保存HyperLogLog计算过程的中间结果，它只能作为表的Value列类型、通过聚合来不断的减少数据量，以此来实现加快查询的目的。基于它得到的是一个估算结果，误差大概在1%左右。HLL...
- 产品推荐
- 这些文档可能帮助您