FeatureStore概述
离线KV数据同步到线上存储场景：该场景下的特征数据包括商品属性表、用户属性等，通过使用FeatureStore，简化离线数据到线上存储的同步调度任务。功能特性 数据源能力 FeatureStore封装了整个特征到模型的流程，支持多种离线和实时数据源，...
配置FeatureStore项目
FeatureStore 项目会对应一个离线数据源和在线数据源，各个项目中彼此独立，而项目内可共享所有的离线、在线特征表。本文为您介绍如何配置特性平台项目。功能原理 阿里云特征平台 FeatureStore 为您提供数据源能力，可分别对接离线存储和...
GenerateDataKey
3.将数据密钥的密文（通过响应中的CiphertextBlob字段返回），和本地离线加密后的数据一并进行存储。在本地解密数据：调用 Decrypt 接口解密本地存储的数据密钥的密文。该操作将返回数据密钥的明文。使用数据密钥的明文，在本地完成离线...
GenerateDataKey
3.将数据密钥的密文（通过响应中的CiphertextBlob字段返回），和本地离线加密后的数据一并进行存储。在本地解密数据：调用 Decrypt 接口解密本地存储的数据密钥的密文。该操作将返回数据密钥的明文。使用数据密钥的明文，在本地完成离线...
快速入门
文件存储 HDFS 版 适用于互联网行业、金融行业等有大数据计算与存储分析需求的行业客户进行海量数据存储和离线计算的业务场景，充分满足以Hadoop为代表的分布式计算业务类型对分布式存储性能、容量和可靠性的多方面要求。开通 文件存储 ...
混合云存储阵列如何实现数据的云端容灾备份？
混合云存储阵列支持用户在...混合云存储阵列也能支持本地存储和云端存储的文件数据同步，实现数据在云端的异地容灾存放。混合云存储阵列还能和传统备份软件（Veritas，Commvault等）结合，作为传统备份软件的备份存储，把备份数据推送上云。
管理离线数据归档
对离线存储中较为久远的数据暂无数据分析需求时，可以通过配置数据归档，来降低数据的存储成本。本文介绍数据归档的使用和计费说明及开启、更改和撤销归档的具体操作。前提条件 已开启产品数据备份。存储数据的归档周期必须小于实例下设备...
SA混合云存储阵列
数据压缩和去重，提升数据在云端和本地存储无缝流动的效率。支持完备的主机端协议，包括FC/iSCSI/FCoE、NFS/CIFS、Cinder等。提供多版本快照、复制等丰富的企业数据服务。支持免网关阵列双活容灾，护驾企业关键应用。支持异构虚拟化，提高...
10.1.60 系列
H5 容器和离线包 新增 支持自定义 JSAPI 和 Plugin 的存储路径。更新 底层性能优化，扩展 JSAPI、Plugin。小程序 新增 新增 API 和组件支持，基础库升级到 1.14.1 版本，详情参考 小程序。新增 新增 IDE 真机预览和调试功能。更新 ...
方案背景
通过Spark实现实时数据和离线数据处理并将聚合结果保存到表格存储的数据表中。实时流计算通过Spark Structured Streaming实时统计一个窗口周期内订单数量和订单金额的聚合结果。离线批计算通过Spark SQL离线聚合原始订单数据的总金额和用户...
H5 容器自动化埋点
H5_AL_SESSION_FALLBACK 加载本地离线包失败，走 fallback 请求在线页面。H5_OPEN_PAGE_FINISH 页面加载完成。H5_AL_PAGE_APPEAR 页面首次出现。异常埋点：seedId 含义 H5_AL_NETWORK_PERFORMANCE_ERROR 资源请求异常。H5_PAGE_ABNORMAL ...
SmartData使用说明（EMR-3.20.0~3.22.0版本）
概述 JindoFS是一种云原生的文件系统，结合OSS和本地存储，成为E-MapReduce产品的新一代存储系统，为上层计算提供了高效可靠的存储。JindoFS提供了块存储模式（Block）和缓存模式（Cache）的存储模式。JindoFS 采用了本地存储和OSS的异构多...
基本概念
轨迹分段线模型时空索引效率高于线模型，且存储成本和二级索引代价低，可同时实现低成本存储、实时和复杂分析查询，适用于对实时查询和离线分析都有需求的场景。Lindorm Ganos同时支持三种模型的存储，批量轨迹点可以直接以点模型写入，也...
【邀测】同步备份
功能特点 云-端数据双向同步：在本地存储和编辑的最新文件/文件夹实时同步至云端，云端已上传及更新的文件实时同步至本地。多终端同步：支持多设备终端与云端自动同步，文件实时更新，打通设备之间的壁垒，在任何一个设备上都可以访问所需...
SmartData使用说明（EMR-3.22.0~3.25.1版本）
JindoFS是一种云原生的文件系统，结合OSS和本地存储，成为E-MapReduce产品的新一代存储系统，为上层计算提供了高效可靠的存储。本文主要说明JindoFS的配置使用方式，以及介绍一些典型的应用场景。概述 JindoFS提供了块存储模式（Block）和...
OSS存储卷概述
针对读写场景，即OSS存储卷访问模式为ReadWriteMany时，请避免将OSS存储卷作为本地存储和ext4的块存储卷使用，避免使用随机写和Append操作，避免直接在OSS存储卷上进行解压缩、压缩等操作。由于写操作导致的元数据和数据的不一致性问题，...
应用场景
可以基于一份数据进行事务（OLTP）与分析（OLAP）混合处理，免去了在线数据库和离线数据仓库之间海量数据的复制、传输、加载和存储，降低存储成本的同时极大的缩短了数据分析的延迟，使得即席分析决策系统成为可能。物联网 物联网有着数据...
数据湖投递概述
表格存储 数据湖投递可以全量备份或实时投递数据到数据湖OSS中存储，以满足更低成本的历史数据存储，以及更大规模的离线和准实时数据分析需求。应用场景 利用数据湖投递可以实现如下场景需求：冷热数据分层 数据湖投递结合 表格存储 的 ...
管理 H5 离线包
发布 H5 离线包后，您可以管理已发布的离线包。管理操作包括查看、暂停、结束发布、导出、删除 H5 离线包。查看离线包发布任务 进入 mPaaS 控制台，完成以下步骤：单击左侧导航栏的 实时发布>离线包管理 菜单。在 H5App 列表中，选择目标 H...
使用NAS静态存储卷
ACK Serverless数据卷支持配置本地存储和云存储。本地存储：支持配置项（ConfigMap）、保密字典（Secret）和临时目录，将对应的挂载源挂载到容器路径中。更多信息，请参见 Volumes。云存储：支持云存储类型。本例中配置了一个NAS类型的数据...
通过NFS使用NAS静态存储卷
本地存储：支持主机目录（HostPath）、配置项（ConfigMap）、保密字典（Secret）和临时目录，将对应的挂载源挂载到容器路径中。更多信息，请参见 Volumes。云存储：支持云存储类型。本例中配置了一个NAS类型的数据卷，将该NAS存储卷挂载到...
物联网存储介绍
支持将全增量数据投递到数据湖OSS，来满足更低成本的历史数据存储以及更大规模的离线和准实时数据分析需求。访问安全性 支持身份验证保障用户数据的私密性，支持VPC网络及HTTPS访问。提供多种鉴权和授权机制以及阿里云账号与RAM用户功能，...
Kafka数据接入
云消息队列 Kafka 版 广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等大数据领域，已成为大数据生态中不可或缺的部分。更多信息，请参见 什么是云消息队列 Kafka 版？说明 基于Tablestore Sink Connector，您也可以将...
客户部署混合云存储阵列时，现有IT架构或应用是否需要...
客户无需改变现有IT架构或应用，就可以像使用本地存储一样，使用混合云存储阵列，同时利用本地存储空间和云端存储空间，无需关注本地设备存储协议和云存储协议之间的兼容转换，配置简单，易于使用。
清除本地存储
环境限制 清除本地存储操作仅用于 Web 场景下（PC、H5）前端逻辑流环境。配置属性 清除本地存储操作属性由以下部分组成，逻辑流通用属性部分请参考 逻辑流操作通用属性：基础属性 示例 说明 全部删除 设置是否清空本地存储。选择是，则清空...
写入本地存储
环境限制 写入本地存储操作仅用于 Web 场景下（PC、H5）前端逻辑流环境。配置属性 写入本地存储操作属性由以下部分组成，逻辑流通用属性部分请参考 逻辑流操作通用属性：基础属性 示例 说明 属性名 用于设置写入本地存储的属性名。此处需要...
存储冗余概述
对象存储OSS提供本地冗余存储和同城冗余存储两种存储冗余类型，覆盖从单可用区到多可用区的数据冗余机制，以保证数据的持久性和可用性。本地冗余存储（LRS）采用单可用区（AZ）内的数据冗余存储机制，将用户的数据冗余存储在同一个可用区内...
整体架构
为满足不同场景需求，首先将一份全量数据存储在低成本高吞吐存储介质中，低成本离线处理场景直接读写低成本存储介质中的数据，可降低数据存储和数据IO成本，保证高吞吐。其次将实时数据存储在单独的存储IO节点（EIU）上，保证行级的数据...
使用 H5 离线包
操作步骤 在控制台下载离线包 AMR 文件和离线包配置文件到本地。将下载到的离线包 AMR 文件和离线包配置文件放在工程中的 assets 目录下。将离线包预置到应用内。推荐在 APP 启动的时候注册，在本教程中在 MyApplication 类中进行注册。...
存储冗余
存储冗余类型 服务可用性 价格 本地冗余存储 99.9%存储空间-日志存储 0.0115元/GB/天 存储空间-日志低频存储 0.005元/GB/天 存储空间-日志归档存储 0.0017元/GB/天 同城冗余存储 99.99%存储空间-日志存储 0.0115元/GB/天 存储空间-日志低频...
什么是混合云存储
混合云存储包括 SA混合云存储阵列、CPFS并行文件存储、SDS分布式存储 和 HCI超融合 等多种形态，您可以像使用本地存储一样使用和管理本地和云端的各种存储资源（块、文件和对象）。本地存储可以通过云缓存、云同步、云分层、云备份等方式...
配置本地存储卷自动扩容
在ACK集群中，如需使用ECS本地盘或云盘存储具体波峰波谷特性的临时数据，您可以创建并配置本地存储卷。本地存储将根据节点本地存储容量进行调度，并在存储容量达到设定值时执行数据卷自动扩容。本地存储介绍 本地存储架构主要由以下三部分...
创建混合云集群
支持不挂载文件存储、使用本地文件存储和使用云上存储 本地集群存储挂载地址 使用本地文件存储时，本地存储的地址。挂载路径 使用本地文件存储时，要挂载存储的集群路径。本地路径 使用本地文件存储时，要挂载到集群的本地路径。按文件夹...
将MaxCompute数据同步到表格存储
如果需要将MaxCompute计算分析后的数据同步到表格存储中存储或者使用，您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现全量数据导出。全量数据导出到表格存储后，您可以使用表格存储查询与分析数据。背景信息 表格存储...
通过命令行工具快速使用云存储网关软件版
说明 激活云存储网关软件版需要您提供Region（这里的Region和线上云存储网关软件版支持的地域是一致的。以北京地域为例，region为cn-beijing）、用户AccessKey以及AccessKey Secret信息。可以使用RAM用户AccessKey和AccessKey Secret，用户...
同步增量数据到MaxCompute
如果需要将 表格存储 中新增和变化的数据定期同步到MaxCompute中备份或者使用，您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现周期性增量数据同步。前提条件 已新增 表格存储 数据源。具体操作，请参见 注意事项。已...
通过函数计算转存离线日志
通过阿里云的函数计算转存离线日志功能，当CDN产生新的离线日志时，它会触发预设的函数计算逻辑，自动地、无服务器地将这些日志文件传输到对象存储服务（OSS）。这样，无需人工干预或额外运维成本，就能实现日志数据的安全、高效、稳定的...
yoda
yoda是由多个组件构成的本地磁盘管理系统，目标是解决当前 Kubernetes 本地存储能力缺失问题。通过yoda，使用本地存储会像集中式存储一样简单。目前 yoda 已经开源，可以点击 Github 进行查看。运维能力 共享池配置 PV动态供应 存储卷扩容 ...
名词术语
为了更好理解DataTrust平台的安全管控机制...RDS 租户提供，本地数据库引擎，存储处理和保护本地数据源。MaxCompute 租户提供，全托管的在线数据仓库服务，提供高性能可扩展的计算和存储能力。用于存储和保护本地数据源和多方安全计算的引擎。
同步增量数据到OSS
如果需要将表格存储中新增和变化的数据定期同步到OSS中备份或者使用，您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现周期性增量数据同步。注意事项 此功能适用于 表格存储 宽表模型和时序模型。宽表模型：导出 表格存储...
- 产品推荐
- 这些文档可能帮助您