概述
AnalyticDB PostgreSQL版 向量分析可以通过AI算法提取非结构化数据的特征，并利用特征向量作为非结构化数据的唯一标识，帮您快速且低成本地实现对非结构化数据检索和对结构化数据关联分析。向量数据库简介 在现实世界中，绝大多数的数据都...
功能特性
传输加速 创建存储空间 在上传文件（Object）到OSS之前，您需要创建一个用于存储文件的存储空间（Bucket）。存储空间具有各种配置属性，包括地域、访问权限、存储类型等。您可以根据实际需求，创建不同类型的存储空间来存储不同的数据。...
方案分析
根据Feed流中的数据类型，本文分别设计系统存储、同步与元数据方案。不同类型的Feed流产品架构存在差异，本文设计的产品是基于单向关系的时间排序Feed流，类似于微博。存储 Feed流系统中的存储库主要存放具体的用户Feed消息，而Feed消息...
现代IM系统中的消息系统—模型
本章节主要介绍表格存储（Tablestore）的Timeline模型基本功能以及核心组件，并且会通过IM消息系统场景，介绍如何基于Timeline实现IM场景下消息同步、存储和索引等基本功能。Timeline模型 Timeline模型以简单为设计目标，核心模块主要包括...
存储加密
当MaxCompute项目中存有敏感信息如个人身份信息、财务记录、健康记录等，开启数据存储加密可保护这些数据不被未授权者访问。MaxCompute支持通过密钥管理服务KMS（Key Management Service）对数据进行加密存储，提供数据静态保护能力，满足...
文件存储NAS
您可以在一个阿里云账号下创建并管理多个RAM用户，并给RAM用户分配不同的授权策略，从而实现不同RAM用户拥有不同的云资源访问权限。使用RAM还可以让您避免与其他用户共享云账号密钥（AccessKey），按需为用户分配最小权限，从而降低您的...
接入点概述
您可以为NAS的目录创建多个接入点，对不同的接入点配置不同的访问策略，并将接入点应用于不同的业务，从而降低多业务访问共享数据集的权限管理复杂度。背景信息 在容器计算场景中，NAS作为容器CSI插件缺省支持的存储形态，在日常生产中作为...
如何打造千万级Feed流系统
在互联网领域，Feed流产品已被广泛...方案实现 本方案使用Timeline模型实现Feed流系统的存储与同步功能，包含示例代码并支持一键部署，详情请参见 方案实现。后续步骤 针对本技术方案没有讨论到但是您可能需要关注的问题，请参见 方案扩展。
车辆数据分析和价值挖掘
本文以一个摩托车数字化场景下设备运营分析的真实需求为背景，介绍如何使用物联网平台的数据服务完成对设备数据的深度业务分析，以实现更多用户的摩托车增值价值。背景信息 企业数字化进程如火如荼，更多传统企业拥抱数字化改造，期望从...
存储空间地域属性
OSS同城冗余存储提供99.9999999999%（12个9）的数据设计持久性以及99.995%的服务可用性。✓×转换存储冗余类型 OSS支持将存储空间（Bucket）的存储冗余类型从本地冗余存储转换为同城冗余存储，从而具备抵抗可用区级别故障的能力。✓×OSS高...
索引介绍
针对多列的多个条件，在每列的倒排表中找到对应的List，这称为一个倒排链，而筛选符合多个条件的数据即为计算多个倒排链的交并集，此处底层有着大量的优化，可以高效地实现这一操作。因此多元索引在处理多条件组合查询方面效率很高。此外，...
创建存储空间
在上传文件（Object）到OSS之前，您需要创建一个用于存储文件的存储空间（Bucket）。存储空间具有各种配置属性，包括访问权限、存储类型等。您可以根据实际需求，创建不同类型的存储空间来存储不同的数据。注意事项 创建存储空间本身不收取...
CreateDataFlow-创建数据流动
如果多个 CPFS 的数据流动、或者同一个文件存储 CPFS 的多个数据流动的源端存储是同一个 OSS Bucket，为了防止多个文件存储 CPFS 向同一个源导出数据产生数据冲突，需要该 OSS Bucket 开启版本控制。不支持跨地域的 OSS 数据流动，OSS ...
哪些操作会更新Object的LastModified？
CopyObject 修改加密算法 CopyObject 覆写Object 通过PutObject上传同名文件 通过CopyObject拷贝同名文件 重要 通过控制台、ossutil、ossbrowser、SDK等方式修改Object存储类型本质是通过覆写Object并指定新的存储类型的方式来实现。...
开发后端逻辑流操作代码
步骤三、代码编写 对于每个后端逻辑流自定义操作，都会在 custom-action-core 模块中生成一个实现类，每个自定义操作执行的入口方法都是实现类中重写的execute方法，开发者可根据自定义操作中的业务逻辑进行开发。步骤四、输入输出 魔笔...
存储空间概述
在上传数据（例如文档、图片、音视频等）到OSS之前，您需要在OSS所支持的地域中创建一个存储空间（Bucket），然后将无限数量的对象（Object）上传到该Bucket中。背景信息 Bucket和Object都是OSS资源，OSS提供了相关的API接口来管理这些资源...
高效向量检索（PASE）
本文介绍RDS PostgreSQL如何通过PASE插件（基于IVFFlat或HNSW算法）实现高效向量检索。说明 PASE插件已不再维护，建议您使用 高维向量相似度搜索（pgvector）插件。前提条件 实例为RDS PostgreSQL 11或以上版本。背景信息 近年来，深度学习...
K均值聚类算法（K-Means）
简介 K-Means算法是一种迭代求解的聚类分析算法。该算法原理为：先将数据分为K组，随机选取K个对象作为初始的聚类中心，然后计算每个对象与各个种子聚类中心之间的距离，将每一个对象分配给距离它最近的聚类中心，聚类中心以及分配给它们的...
方案实现
基于 方案设计，表格存储实现了一个Tablestore-Grid的library，基于这个library您可以非常方便地实现气象格点数据的存储、查询和管理。提供以下接口：public interface GridStore {/*创建相关的meta、data表，数据录入前调用。throws ...
功能概述
表格存储 面向海量结构化数据提供Serverless表存储服务，适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。基本概念 在使用 ...
XGBoost训练
XGBoost算法在Boosting算法的基础上进行了扩展和升级，具有较好的易用性和鲁棒性，被广泛用在各种机器学习生产系统和竞赛领域，该算法支持分类和回归。XGBoost训练组件在XGBoost算法的基础上进行了包装，使功能和PAI更兼容，更易用。本文为...
方案背景
本文介绍了表格存储结合实时计算Flink实现大数据分析的样例场景、架构设计等。背景信息 云数据库RDS MySQL基于阿里巴巴的MySQL源码分支，经过双十一高并发、大数据量的考验，拥有优良的性能。RDS MySQL支持实例管理、账号管理、数据库管理...
方案选择
本文主要为您介绍针对订单系统的一些传统解决方案，以及面对亿量级订单，表格存储提供的更全面的解决方案。传统方案一：MySQL分库分表 MySQL自身拥有强大的数据查询、分析功能，基于MySQL创建订单系统，可以应对订单数据多维查询和统计场景...
评分卡训练
约束的实现依赖于底层带约束的优化算法，可以在分箱组件中通过可视化方式设置约束，设置完成后分箱组件会生成一个JSON格式的约束条件，并将其自动传递给下游连接的训练组件，详情请参见如下演示操作。系统支持如下六种JSON约束：“<”：...
创建同城冗余存储Bucket
OSS 采用多可用区（AZ）内的数据冗余存储机制，将用户的数据冗余存储在同一地域（Region）的多个可用区。当某个可用区不可用时，仍然能够保障数据的正常访问。OSS同城冗余存储提供99.9999999999%（12个9）的数据设计持久性。本文介绍如何...
什么是表格存储
表格存储（Tablestore）面向海量结构化数据提供Serverless表存储服务，同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、...
高级管理FAQ
当文件系统中包含每月访问频率或每季度访问频率低于2次的文件时，可以开启通用型NAS生命周期管理功能，符合生命周期管理策略的文件将自动转储至低频存储或归档存储，采用低频存储计费方式，从而降低存储成本。为什么我的文件系统不支持生命...
为什么云存储网关与OSS上的文件不一致
通过这样的机制，可以把多个网关共享组成一个组，这样OSS Bucket上的增量变化就可以被该组内的所有网关共享感知到，实现 组内所有网关共享的快速秒级同步。基于API触发的单次反向同步 除了使用过程中自动触发的元数据同步，针对同步指定...
定制排序模型
创建特征描述流程 创建 独享型 集群规格的OpenSearch-行业算法版实例之后，进入开放搜索 控制台 页面，左侧导航栏选择：OpenSearch 行业算法版>搜索算法中心>排序配置>定制排序模型，在右侧的 特征描述 页签下，点击 创建 按钮：填写 特征...
创建安全联邦学习任务（任务模式）
参数 描述 算法分类 支持的算法分类为FL决策树、FL线性回归、FL逻辑回归、FL深度学习。FL决策树支持的算法为 XGBoostWithDp:Decision_Tree，用于二分类、多分类、回归。FL线性回归支持的算法为 LinearRegressionWithHe:Linear_Regression_...
推荐的性能设计模式
在设计从OSS上传和下载数据的应用程序时，请使用我们推荐的性能设计模式，使应用程序达到最佳性能。我们还提供性能优化指导原则，供您在规划应用程序架构时参考。对频繁访问的内容使用缓存 如果您的应用程序需要支持同一地区大量用户同时...
数据开发
数据开发为用户提供一站式计算节点开发能力，通过对数据加工流程的开发、部署、调试等环节的一体化管理，数据开发实现数据加工工作流编排、加工逻辑的复用，大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构，提高系统的工程化...
AIOps 解决方案专家服务内容说明
智能算法列表 类型 算法名称 算法逻辑 异常诊断类算法 One-Class SVM 基于历史批量数据的做算法学习并进行异常诊断 异常诊断类算法 孤立深林 基于历史批量数据的做算法学习并进行异常诊断 异常诊断类算法 Robust Covariance 基于历史批量...
步骤二：添加算法语句
在编辑页面，以Shell语言编写算法文件的脚本内容，并填写相关参数，更多请参见 基本属性。说明 以Shell语言编写算法文件的脚本，脚本中引用算法文件时，必须包含算法文件的后缀。单击 图标。说明 当未保存修改，直接关闭当前页面，本地会...
步骤二：添加算法语句
在编辑页面，以Shell语言编写算法文件的脚本内容，并填写相关参数，更多请参见 基本属性。说明 以Shell语言编写算法文件的脚本，脚本中引用算法文件时，必须包含算法文件的后缀。单击 图标。说明 当未保存修改，直接关闭当前页面，本地会...
音视频转码
存储在OSS上的多媒体音视频数据，可以通过经济、弹性、高扩展的阿里云媒体转码服务，转换成适合在移动端、PC、TV上播放的格式。媒体转码核心能力包括：转换媒体格式，支持多平台播放。保证相同画质质量的前提下，调整视频码率、提高视频...
概述
使用Spark计算引擎访问表格存储时，您可以通过E-MapReduce SQL或者DataFrame编程方式对表格存储中数据进行复杂的计算和高效的分析。应用场景 功能特性 对于批计算，除了基础功能外，Tablestore On Spark提供了如下核心优化功能：索引选择：...
使用函数计算
通过函数计算访问表格存储，对表格存储增量数据进行实时计算。背景信息 函数计算（Function Compute，简称FC）是事件驱动的全托管计算服务。使用函数计算，您无需采购与管理服务器等基础设施，只需编写并上传代码或镜像。函数计算为您准备...
表操作
表格存储Java SDK提供了多种表级别的功能。使用表格存储时，您需要创建数据表用于数据存储。一般情况下，创建不带二级索引的数据表即可。您也可以根据实际场景创建所需数据表。如果要使用二级索引加快数据查询效率，请创建带二级索引的数据...
索引选择
本地二级索引 同步方式 异步方式 同步方式 第一列主键要求 可选数据表中的任意主键列或者预定义列 必须和数据表的第一列主键相同 同步延迟 毫秒级别 实时 读取一致性 最终一致性 强一致性 多元索引 一个多元索引是一系列数据结构的组合，...
- 产品推荐
- 这些文档可能帮助您