准备工作
本文介绍环境准备和数据准备工作。环境准备 已创建阿里云E-MapReduce的Hadoop集群。具体操作，请参见 创建集群。已下载E-MapReduce的最新 SDK，SDK包的名称格式为emr-datasources_shaded_*.jar，...用于添加表格存储数据源在大屏上显示数据。
存储说明
存储价格估算如下：本地盘实例存储为0.04 元/GB/月 OSS标准型存储为0.12 元/GB/月 OSS归档型存储为0.033 元/GB/月 OSS深度归档型存储为0.015 元/GB/月 高效云盘存储为0.35 元/GB/月 SSD云盘存储为1.00 元/GB/月 说明 实际价格请以控制台...
方案分析
在开源方案中，通常会在选择了关系型数据库作为存储系统的基础上，选择开源Redis，这样既能覆盖上述的几个特征，还能保证Feed流系统正常运行起来，但是也会带来一些其他问题：表格存储 Redis 存储成本 磁盘性数据库，费用比内存性的要低几...
对接DataV
通过DataV控制台添加表格存储数据源后，您可以使用DataV可视化展现表格存储的数据。前提条件 首次使用表格存储时，请开通表格存储服务以及创建实例和数据表等。具体操作，请参见 通过控制台使用 或者 通过命令行工具使用。首次使用DataV时...
消息存储和清理机制
本文为您介绍 云消息队列 RocketMQ 版 中消息的存储机制，包括消息的存储粒度、判断依据及后续处理策略等。背景信息 参考 云消息队列 RocketMQ 版 中 队列 的定义，消息按照达到服务器的先后顺序被存储到队列中，理论上每个队列都支持无限...
CDH6数据迁移
本文介绍如何将CDH中本地HDFS的数据迁移到 文件存储 HDFS 版，实现存储计算分离。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已在阿里云上创建ECS实例并安装CDH6集群。...
0014-00000026
以下以请求中添加转换存储类型的Transistion元素为例。PUT/?lifecycle HTTP/1.1 Host: oss-example.oss-cn-hangzhou.aliyuncs.com Content-Length: 336 Date: Mon ,6 May 2019 15:23:20 GMT Authorization:OSS qn6q*:77Dv*?xml version="1....
什么是对象存储OSS
数据存储到阿里云OSS以后，您可以选择标准存储（Standard）作为移动应用、大型网站、图片分享或热点音视频的主要存储方式，也可以选择成本更低、存储期限更长的低频访问存储（Infrequent Access）、归档存储（Archive）、冷归档存储（Cold ...
在文件存储 HDFS 版上使用Apache HBase
HBase不使用自己的ZooKeeper export HBASE_MANAGES_ZK=false#在HBASE_CLASSPATH中添加文件存储 HDFS 版Java SDK export HBASE_CLASSPATH=path/to/aliyun-sdk-dfs-x.y.z.jar:${HBASE_CLASSPATH} 步骤三：验证Apache HBase 执行以下命令，...
在文件存储 HDFS 版上使用Presto
本文主要介绍如何在 文件存储 HDFS 版 上搭建及使用Presto。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已搭建Hadoop集群并且所有集群节点已安装JDK，JDK版本不低于1.8...
配置高级告警规则
添加文件存储NAS。单击 当前账号 后面的 图标。在 添加产品 对话框，选择 文件存储NAS，再单击 确定。为文件存储NAS添加监控指标。先单击 文件存储NAS，再单击 添加指标。在 添加指标 对话框，先选择目标监控指标，再单击 确定。说明 目前...
配置高级告警规则
添加文件存储NAS。单击 当前账号 后面的 图标。在 添加产品 对话框，选择 文件存储NAS，再单击 确定。添加CPFS监控指标。先单击 文件存储NAS，再单击 添加指标。在 添加指标 对话框，先选择目标监控指标，再单击 确定。创建报警规则。在 ...
扩大磁盘容量
随着业务发展和应用数据增长，当云电脑的磁盘空间不足时，您可以扩大磁盘的存储容量，即磁盘扩容。本文为您介绍什么是磁盘（系统盘或数据盘）扩容、磁盘扩容的限制信息、计费和操作步骤。背景信息 关于磁盘 无影云电脑（专业版）的企业办公...
配置自定义Topic数据存储
通过数据存储的时序数据存储规则功能，可将指定的自定义Topic数据流转到时序数据存储空间进行存储。本文介绍如何通过配置时序存储规则，将自定义Topic数据存储到时序存储空间中。前提条件 当前实例为标准型或尊享型企业版实例，并已购买...
诊断项与诊断结果说明
实例健康诊断功能是一种自助诊断方式，可以对实例的计算服务状态、存储服务状态、网络服务状态、实例配置管理和实例操作系统内相关配置进行全方位的诊断，帮助您了解实例的健康情况，及时发现并解决常见的问题。本文介绍轻量应用服务器支持...
HDFS DiskBalancer介绍
当您的集群因大量的写入和删除，或者由于磁盘更换和扩容等操作，导致数据在节点上的磁盘之间分布不均匀，引起HDFS并发读写性能的下降等问题时，可通过HDFS Diskbalancer将数据均匀地分布在DataNode的所有磁盘上。本文为您介绍HDFS ...
使用NAS静态存储卷
您可以通过阿里云提供的Flexvolume插件使用阿里云NAS文件存储服务。本文介绍如何使用NAS静态存储卷。前提条件 使用存储卷时请将Flexvolume插件更新到最新版本。具体操作，请参见 安装与升级Flexvolume组件。已通过kubectl连接Kubernetes...
SetGatewayADInfo
调用SetGatewayADInfo接口可以给云存储网关添加或清除AD服务器信息。调用该接口时，您需要注意：如果您要添加一个AD服务器，请确保该AD服务信息有效，并可以被网关的DNS解析访问，您可以通过SetGateWayDNS接口设置云存储网关的DNS。如果您...
功能特性
数据管理 功能集 功能 功能描述 参考文档 存储类型 标准存储 提供高可靠、高可用、高性能的对象存储服务，面向温热数据，适合支持频繁的数据访问。标准存储 低频访问存储 提供高持久性、较低存储成本的对象存储服务。有最小计量单位（64 KB...
ECU详解
大存储：以字母S开头的ECU为大存储实例，采用SSD/HDD分层存储架构，热点数据存储在SSD磁盘中，冷数据存储在HDD磁盘中。适用于并发稍低、性能要求不高（可接受数据查询响应时间受超过10秒以上）的业务场景。ECU规格 系列 型号 内存 磁盘类型...
功能支持情况
如果您希望像使用本地文件夹和磁盘那样使用OSS，您可以通过云存储网关将OSS的Bucket作为文件系统挂载至ECS实例中使用。不适用 管理目录 与传统文件系统中的层级结构不同，OSS内部使用扁平结构存储数据。即所有数据均以Object的形式保存在...
冷热数据分层存储
为了降低数据存储成本、提高查询性能和系统资源利用率。云数据库ClickHouse 提供了冷热数据分层存储的功能。您可以根据查询频率将数据存储在不同类型的磁盘中。本文介绍如何开启冷热数据分层存储功能和设置分层存储策略。前提条件 云数据库...
选择存储卷类型
ACK 集群支持通过 Pod 自动绑定使用阿里云云盘、NAS、OSS 存储服务。在实际业务场景中，您可以根据需求，选择适合的存储卷类型。本文将分别介绍阿里云云盘、NAS 以及 OSS 存储服务及其应用场景。阿里云云盘 阿里云云盘 是阿里云为云服务器 ...
混合存储型（已停售）
与 Redis社区版 不同，Tair 混合存储型整合了内存和磁盘二者的优势，在提供高速数据读写能力的同时满足了数据持久化的需求。说明 混合存储型已停止售卖，更多信息，请参见【通知】Redis混合存储型实例停止售卖。推荐选择 持久内存型 实例。...
新购ECS时挂载NAS文件系统
存储：单击 共享盘NAS（选填），选择 添加文件存储 进行配置。配置说明如下：图例标识 配置参数 配置内容 ① 文件系统 Linux镜像仅支持选择NFS协议的文件系统。Windows镜像仅支持选择SMB协议的文件系统。② 挂载地址 用于NAS和ECS间的网络...
阿里云文件存储NAS挂载使用
VMware服务的主机不但可以提供计算、网络资源，还提供存储资源。通过VMware vSAN统一管理主机的NVME SSD，提供全闪的分布式存储。当VMware服务实例的存储资源不足时，可以通过如下两种方式为SDDC增加存储空间：VMware服务实例增加主机节点...
EMR Kafka磁盘故障运维
业务场景 Kafka将日志数据存储到磁盘中，当磁盘出现故障时，会导致磁盘IO能力下降、集群吞吐下降、消息读写延时或日志目录offline等问题。这些情况有可能影响到线上业务平稳运行、数据丢失、Kafka集群容错能力下降，单块盘故障甚至有可能...
通过缓存优化性能
Delta缓存通过使用快速中间数据格式在节点的本地存储中创建远程文件的副本来加速数据读取。每当需要从远程位置获取文件时，数据都会自动缓存。然后在本地的连续读取上述数据，从而显著提高读取速度。说明 详细内容可参考Databricks官网文章...
磁盘
磁盘即为云服务器 ECS 提供的数据块级别的块存储产品，具有低时延、高性能、持久性、高可靠等特点。磁盘类型 根据性能分类，磁盘分为以下几类：ESSD 云盘：基于新一代分布式块存储架构的超高性能云盘产品。更多详情，请参见 ESSD云盘。SSD ...
产品架构
EMR Serverless StarRocks架构 EMR Serverless StarRocks的产品架构主要由以下三个层次构成：存储层：存算一体版：StarRocks内表使用云盘或本地盘作为数据存储的介质，使用StarRocks Table Format存储格式。存算分离版：StarRocks内表使用...
使用函数计算清洗数据
表格存储高并发的写入性能以及低廉的存储成本非常适合物联网、日志、监控数据的存储。将数据写入到表格存储时，您可以通过函数计算对新增的数据做简单的清洗，将清洗后的数据写回到表格存储的另一种数据表中。同时，您也可以实时访问表格...
回切至本地物理机
本地恢复 注意 目前仅支持本地磁盘恢复，暂不支持FC共享存储、iSCSI存储、动态磁盘、UEFI启动系统等物理机的恢复。准备工作。由于物理机的特殊性，目前仅支持恢复到原物理机，且磁盘型号、大小、顺序务必要保持一致。请务必在本地恢复前，...
监控
AnalyticDB for MySQL 集群中包含多个存储节点，磁盘数据使用量是指单个读写节点的最大磁盘使用量，热数据使用量是指所有读写节点的磁盘数据使用量之和。预留模式跨规格变配为弹性模式后，监控界面看到 CPU平均使用率增大，是什么原因？...
使用函数计算
通过函数计算访问表格存储，对表格存储增量数据进行实时计算。背景信息 函数计算（Function Compute，简称FC）是事件驱动的全托管计算服务。使用函数计算，您无需采购与管理服务器等基础设施，只需编写并上传代码或镜像。函数计算为您准备...
如何在本地数据中心部署云存储网关
本文介绍如何在本地数据中心安装云存储网关镜像，完成虚拟机的部署。前提条件 已下载镜像文件到本地主机。如果您要部署的是本地文件网关。具体操作，请参见 下载镜像。如果您要部署的是本地块网关，具体操作，请参见 下载镜像。背景信息 您...
常见问题
通过 df 命令显示的磁盘空间大小仅作为展示值，并不代表OSS存储空间实际容量。其中，Size（磁盘空间总大小）和Avail（磁盘空间剩余可用大小）固定为256 TB，Used（已使用磁盘空间大小）固定为0 TB。OSS存储空间容量无限制，存储空间使用量...
云平台一键迁移
存储空间：阿里云轻量应用服务器磁盘（包括系统盘和数据盘）的存储空间必须大于等于腾讯云轻量应用服务器。重要 如果目标实例的磁盘容量小于迁移源磁盘容量，建议先对目标实例的磁盘进行扩容。具体操作，请参见 升级配置 和 扩容数据盘。...
存储引擎对比
项目 云存储 Local存储 底层算法 阿里云云盘算法 原生Apache Kafka的ISR复制算法 实例版本要求 无 副本机制 分布式3副本机制 标准版：如果您购买300 GB磁盘，则实际存储业务的磁盘大小为100 GB，其余200 GB为备份容量。专业版：如果您购买...
什么是OSS-HDFS服务
通过JindoFuse充分支持POSIX，可以在ClickHouse这类OLAP场景中替换本地磁盘来实现存储与计算分离方案。同时，得益于缓存系统进行加速，达到较优性价比。HBase存储与计算分离 OSS-HDFS服务原生支持文件、目录语义和操作，并支持flush操作，...
使用NAS实现共享存储和持久化存储-Flexvolume
NAS提供了共享存储和持久化存储的服务，满足您需要多个Pod共享数据的应用场景。本文介绍如何使用NAS实现共享存储和持久化存储。前提条件 创建Kubernetes托管版集群。获取集群KubeConfig并通过kubectl工具连接集群。已在文件存储控制台创建...
- 产品推荐
- 这些文档可能帮助您