转换元数据
OSS-HDFS服务支持在未部署任何导入和导出工具的情况下，直接将OSS元数据转换为OSS-HDFS元数据。...重要 执行增量转换任务过程中，会产生大量的重复数据，占用额外的存储空间。因此，在执行增量转换任务之前，建议您先清理已转换完成的文件。
可靠性和一致性说明
本文介绍云存储网关的可靠性和一致性。可靠性 网关缓存模式采用同步IO（Sync IO）落盘，确保掉电不丢失数据。云上网关依托于阿里云云盘的高可靠性，确保了缓存盘的数据持久可靠。本地部署的网关依赖于您虚拟环境后端存储的可靠性，建议您...
常见问题
本文主要为您介绍使用MaxCompute访问表格存储的相关...logview invalid end_point 原因：在执行过程中，会返回logview URL地址，如果使用浏览器访问该地址返回错误，则可能是配置错误，请检查MaxCompute配置。如果仍未解决问题，请 提交工单。
为什么云存储网关与OSS上的文件不一致
基于按需扫描机制的常规反向同步 云存储网关默认采用基于按需扫描机制的 反向同步 功能，将OSS上的变化按需同步至网关本地，这一过程是 由用户访问操作触发、按需执行的。具体而言，云存储网关在文件夹层级上设置了同步时间，当检测到当前...
PutBucketLifecycle
您可以基于最后一次修改时间以及最后一次访问时间的策略创建生命周期规则，定期将存储空间（Bucket）内的多个文件（Object）转储为指定存储类型，或者将过期的Object和碎片删除，从而节省存储费用。本文为您介绍如何调用 ...
错误处理
在将Kafka数据导入到表格存储的过程中可能产生错误，如果您不希望导致Sink Task立即失败，您可以配置错误处理策略。可能产生的错误类型如下：Kafka Connect Error 此类错误发生在Sink Task执行数据导入前，例如使用Converter进行反序列化...
列举存储空间
存储空间（Bucket）是用来存储对象（Object）的容器。对象都隶属于存储空间。存储空间按照字母顺序排列。您可以列举当前账号所有地域下符合指定条件的存储空间。列举所有存储空间 以下代码用于列举当前账号所有地域下的存储空间。const OSS...
列举存储空间
存储空间（Bucket）是用来存储对象（Object）的容器。对象都隶属于存储空间。存储空间按照字母顺序排列。您可以列举当前账号所有地域下符合指定条件的存储空间。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域...
列举存储空间
存储空间（Bucket）是用来存储对象（Object）的容器。对象都隶属于存储空间。存储空间按照字母顺序排列。您可以列举当前账号所有地域下符合指定条件的存储空间。列举存储空间 以下代码用于列举当前账号所有地域下的存储空间。require '...
控制面安全性
控制面流程包括函数权限控制、代码及配置的增删改查，主要包括函数元数据、代码、层和镜像缓存等安全传输及存储。本文介绍 函数计算 的控制面安全保障类型。权限控制通过阿里云访问控制（RAM）服务保障安全 事件源触发：用户需要为事件源...
控制面安全性
控制面流程包括函数权限控制、代码及配置的增删改查，主要包括函数元数据、代码、层和镜像缓存等安全传输及存储。本文介绍 函数计算 的控制面安全保障类型。权限控制通过阿里云访问控制（RAM）服务保障安全 事件源触发：用户需要为事件源...
使用函数计算清洗数据
表格存储高并发的写入性能以及低廉的存储成本非常适合物联网、日志、监控数据的存储。将数据写入到表格存储时，您可以通过函数计算对新增的数据做简单的清洗，将清洗后的数据写回到表格存储的另一种数据表中。同时，您也可以实时访问表格...
列举存储空间
存储空间（Bucket）是用来存储对象（Object）的容器。对象都隶属于存储空间。存储空间按照字母顺序排列。您可以列举当前账号所有地域下符合指定条件的存储空间。列举所有存储空间 以下代码用于列举当前账号所有地域下的存储空间。...
使用函数计算
通过函数计算访问表格存储，对表格存储增量数据进行实时计算。背景信息 函数计算（Function Compute，简称FC）是事件驱动的全托管计算服务。使用函数计算，您无需采购与管理服务器等基础设施，只需编写并上传代码或镜像。函数计算为您准备...
创建同城冗余存储Bucket
OSS 采用多可用区（AZ）内的数据冗余存储机制，将用户的数据冗余存储在同一地域（Region）的多个可用区。当某个可用区不可用时，仍然能够保障数据的正常访问。OSS同城冗余存储提供99.9999999999%（12个9）的数据设计持久性。本文介绍如何...
列存索引技术架构介绍
在SQL执行器层，重写了一套面向列存的执行器引擎框架（Column-oriented），该执行器框架充分利用列式存储的优势，如以4096行的一个Batch为单位访问存储层的数据，使用SIMD指令提升CPU单核心处理数据的吞吐，所有关键算子均支持并行执行。...
列举存储空间
存储空间（Bucket）按字母序排列。您可以结合实际场景列举当前账号下的所有存储空间、指定前缀的存储空间、指定个数的存储空间等。列举条件 您可以通过设置prefix、marker或者max-keys参数列举满足指定条件的存储空间。参数名称 描述 ...
将HBase数据同步到表格存储
使用DataX将HBase数据库中的全量数据同步到表格存储（Tablestore）中。准备工作 开通表格存储服务，并创建实例和数据表。具体操作，请参见 通过控制台使用宽表模型 或者 通过命令行工具使用宽表模型。说明 创建数据表时建议使用HBase原主键...
缓存
入参 名称 类型 必填 描述 key String 是 缓存数据的 key success Function 否 调用成功的回调函数 fail Function 否 调用失败的回调函数 complete Function 否 调用结束的回调函数（调用成功、失败都会执行）代码示例 my.removeStorage({ ...
列举存储空间
存储空间（Bucket）是用来存储对象（Object）的容器。对象都隶属于存储空间。存储空间按照字母顺序排列。您可以列举当前账号所有地域下符合指定条件的存储空间。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域...
初始化OTSClient
OTSClient是表格存储服务的客户端，它为调用者提供了一系列的方法，可以用来操作表、读写单行数据、读写多行数据等。使用Python SDK发起请求，您需要初始化一个OTSClient实例，并根据需要修改OTSClient的默认配置项。注意事项 表格存储从...
使用Fuse-DFS挂载文件存储 HDFS 版
本文主要介绍如何使用Fuse-DFS工具实现 文件存储 HDFS 版 在本地文件系统的映射。前提条件 已 创建文件系统 和 添加挂载点。已为Hadoop集群所有节点安装JDK，且JDK版本不低于1.8。建议您使用的Hadoop版本不低于2.7.2，本文使用的Hadoop版本...
初始化
CNAME是指将自定义域名绑定到存储空间的过程。conf.IsCname=true;创建OssClient实例。var client=new OssClient(endpoint,accessKeyId,accessKeySecret,conf);使用STS新建OssClient 以下代码用于使用STS新建一个OssClient。using Aliyun....
背景
了解表格存储表设计最佳实践的背景。选择使用表格存储后，根据实际业务场景，选择直接使用表格存储提供的数据模型或者根据最佳实践进行表设计。为什么选择表格存储 如上图所示，表格存储提供了丰富、通用的功能，并具有如下优势：零运维，...
生命周期管理FAQ
删除策略之前，如果数据已经转储到低频存储或归档存储，数据仍会继续保存在低频存储或归档存储中，并将按照低频存储或归档存储的费用收取存储费用。如果您是想将存储至低频存储或归档存储中的数据取回通用型NAS存储空间，请参见 创建数据...
列举存储空间
存储空间（Bucket）是用来存储对象（Object）的容器。对象都隶属于存储空间。存储空间按照字母顺序排列。您可以列举当前账号所有地域下符合指定条件的存储空间。注意事项 使用示例前，需要初始化ossClient用于列举存储空间，初始化方法如下...
列举存储空间
存储空间（Bucket）是用来存储对象（Object）的容器。对象都隶属于存储空间。存储空间按照字母顺序排列。您可以列举当前账号所有地域下符合指定条件的存储空间。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域...
冷热分层存储
针对以上问题，OSS-HDFS服务支持数据的冷热分层存储，对于经常需要访问的数据以标准类型进行存储，对于较少访问的数据以低频、归档以及冷归档类型进行存储，从而降低总存储成本。前提条件 已在OSS-HDFS服务中写入数据。华东1（杭州）、华东...
功能特性
服务器端加密 客户端加密 OSS客户端加密是在数据上传至OSS之前，由用户在本地对数据进行加密处理，确保只有密钥持有者才能解密数据，增强数据在传输和存储过程中的安全性。客户端加密 合规保留策略 OSS保留策略具有WORM（Write Once Read ...
方案背景
场景需求 车辆在行驶的过程中会定时上报大量的状态数据，例如车辆识别代码、行驶速度、发动机转速、车内温度等。在业务上，用户可以基于这些车辆状态信息来实现车辆行为分析、行驶状态监控、轨迹分析、车辆状态检索等。通过持久化存储和...
转换文件存储类型
OSS提供标准、低频访问、归档、冷归档和深度冷归档多种存储类型，全面覆盖从热到冷的各种数据存储场景。本文主要介绍如何转换文件（Object）的存储类型。注意事项 当您使用webpack或browserify等打包工具时，请通过 npm install ali-oss 的...
管理存储空间读写权限
存储空间（Bucket）是存储对象（Object）的容器。对象都隶属于存储空间。本文介绍如何设置和获取存储空间读写权限（ACL）。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域的其他阿里云产品访问OSS，请使用内网...
容量和清理说明
本文介绍代码库容量限制，如何清理代码库容量，以及代码库的大文件（二进制文件）如何管理和清理。1.代码库存储空间容量是否有限制？企业代码库数量不限，默认单个代码库 10GB 空间，包括 5GB Git 容量和 5GB 大文件存储（Git LFS）空间。...
高级管理FAQ
删除策略之前，如果数据已经转储到低频存储或归档存储，数据仍会继续保存在低频存储或归档存储中，并将按照低频存储或归档存储的费用收取存储费用。如果您是想将存储至低频存储或归档存储中的数据取回通用型NAS存储空间，请参见 创建数据...
使用NAS静态存储卷
NAS存储卷是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。本文介绍如何使用阿里云NAS静态存储卷，以及如何实现持久化存储与共享存储。前提条件 已创建 ACK Serverless集群。具体操作，请参见 创建ACK Serverless集群。已...
迁移开源HDFS的数据到文件存储 HDFS 版
本文档介绍如何将开源HDFS的数据平滑地迁移到 文件存储 HDFS 版。背景信息 当前业界有很多公司是以Hadoop技术构建数据中心，而越来越多的公司和企业希望将业务顺畅地迁移到云上。文件存储 HDFS 版 可以帮助您实现将开源HDFS的数据迁移到云...
列举存储空间
存储空间（Bucket）是用来存储对象（Object）的容器。对象都隶属于存储空间。存储空间按照字母顺序排列。您可以列举当前账号所有地域下符合指定条件的存储空间。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域...
开发后端逻辑流操作代码
自定义后端逻辑流操作基于Java编写...重要 魔笔平台不负责存储您的自定义操作源代码，请您妥善保管，以便复用。若当前逻辑流中包含历史自定义逻辑流操作，请在构建前将历史源码拷贝到对应的实现文件内，避免对应的自定义逻辑流操作不可执行。
文件存储 HDFS 版和对象存储OSS双向数据迁移
本文档介绍 文件存储 HDFS 版 和对象存储OSS之间的数据迁移操作过程。您可以将 文件存储 HDFS 版 数据迁移到对象存储OSS，也可以将对象存储OSS的数据迁移到 文件存储 HDFS 版。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和...
通用型NAS计费
低频存储读流量 1 GiB×0.06元/GiB=0.06元 低频存储写流量 2 GiB×0.06元/GiB=0.12元 存储包+按量计费 假设张先生在华北2（北京）地域购买了500 GiB的存储包，需支付总费用165.195元，计费明细如下：计费项 费用 说明 通用型存储容量（容量...
- 产品推荐
- 这些文档可能帮助您