在文件存储 HDFS 版上使用Apache HBase
本文主要介绍在 文件存储 HDFS 版 上使用Apache HBase的方法。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK，且JDK版本不低于1.8。已部署...
基于GitHub公开事件数据集的离线实时一体化实践
本文为您介绍如何基于GitHub实时事件数据通过...创建用于转换OSS中存储的JSON文件的外部表 githubevents：CREATE EXTERNAL TABLE IF NOT EXISTS githubevents(col STRING)PARTITIONED BY(hr STRING)STORED AS textfile LOCATION 'oss:/oss-...
基于GitHub公开事件数据集的离线实时一体化实践
本文为您介绍如何基于GitHub实时事件数据通过...创建用于转换OSS中存储的JSON文件的外部表 githubevents：CREATE EXTERNAL TABLE IF NOT EXISTS githubevents(col STRING)PARTITIONED BY(hr STRING)STORED AS textfile LOCATION 'oss:/oss-...
计费概述
文件存储CPFS支持创建不同类型的CPFS文件系统，不同类型的文件系统计费标准不同，本文介绍文件存储CPFS的计费情况。计费方式 文件存储CPFS支持以下计费方式。计费方式 说明 按量计费 默认付费方式。先使用，后付费，适用于业务用量经常有...
概述
文件存储HDFS版 文件存储HDFS版（Apsara File Storage for HDFS）是一款面向阿里云ECS实例及容器服务等计算资源的文件存储服务，满足以Hadoop为代表的分布式计算业务类型对分布式存储性能、容量和可靠性的多方面要求。表格存储 表格存储...
文件存储 HDFS 版和对象存储OSS双向数据迁移
本文档介绍 文件存储 HDFS 版 和对象存储OSS之间的数据迁移操作过程。您可以将 文件存储 HDFS 版 数据迁移到对象存储OSS，也可以将对象存储OSS的数据迁移到 文件存储 HDFS 版。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和...
数据安全
文件存储NAS提供服务器端加密和客户端加密，可有效防止数据在云端的潜在安全风险。数据加密 数据传输加密 文件存储NAS支持TLS传输链路加密，开启TLS功能后，NAS客户端和服务端之间的通信会进行TLS数据传输加密。开启TLS功能的介绍，请参见 ...
卸载并释放E-MapReduce HDFS使用的云盘
背景信息 当E-MapReduce已经成功运行在阿里云 文件存储 HDFS 版 上时，ECS挂载的云盘只用来存储运算中的临时Shuffle文件，可以选择卸载原来用于构建E-MapReduce HDFS服务的云盘，降低集群的拥有成本。重要 从数据安全性考虑，数据迁移后...
如何选用NAS、OSS和EBS？
本文介绍文件存储NAS与对象存储OSS、块存储EBS的区别和部署架构，帮助您更好地选用合适的阿里云存储服务。产品对照表 文件存储NAS、对象存储OSS和块存储EBS的主要区别如下表所示。对比项 文件存储NAS 对象存储OSS 块存储EBS 特点 原有使用...
【公告】数据库文件存储按量付费价格下调
尊敬的阿里云用户，阿里云将于2023年01月30日起调整数据库文件存储（公测）按量付费价格。调整时间 2023年01月30日00:00:00。调整地域 华东1（杭州）、华东2（上海）、华北2（北京）、华南1（深圳）。调整内容 版本类型 调整前单价（GB/...
使用在线迁移服务迁移数据
使用在线迁移服务，您可以轻松实现文件存储NAS之间的数据迁移。本文介绍如何通过在线迁移服务实现阿里云文件存储NAS之间的数据迁移。使用在线迁移服务，您只需在控制台填写源NAS和目标NAS的地址信息，并创建迁移任务即可。迁移任务启动后，...
集群吞吐性能测试
测试环境 配置名称 配置说明 计算VM配置 CPU核数：4核 内存：16 GB 机器数量：6台 网络带宽：1.5 Gbps 文件存储 HDFS 版 配置 实例大小：10 TB 吞吐限速：1000 MB/s 软件配置 Apache Hadoop：Hadoop 2.7.6 测试工具 TestDFSIO是Hadoop系统...
常见问题
本文介绍了文件存储NAS产品简介中的常见问题。什么是文件存储NAS？阿里云文件存储NAS是一个可共享访问、弹性扩展、高可靠、高性能的分布式文件系统。NAS兼容了POSIX文件接口，可支持数千台计算节点共享访问，可以挂载到弹性计算ECS、神龙裸...
ECS支持说明
支持挂载数据库文件存储（DBFS）的ECS实例规格如下：存储增强通用型g7se 存储增强计算型c7se 存储增强内存型r7se
常见问题排查
本文介绍使用 文件存储 HDFS 版 文件系统SDK时遇到的常见问题及排查方法。提示 java.lang.ClassNotFoundException 信息 执行 hadoop 命令或者任务失败，提示 java.lang.ClassNotFoundException:Class ...
修改文件系统
本文介绍如何在 文件存储HDFS版 控制台修改某个文件系统的存储容量、基本信息以及吞吐模式。前提条件 已创建文件系统。具体操作，请参见 创建文件系统。操作步骤 登录 文件存储HDFS版控制台。在顶部菜单栏，选择地域。在左侧导航栏，选择 ...
使用函数计算方式的录音文件识别
概述 对于将音频文件存储在阿里云OSS上的用户，除使用SDK集成录音文件识别的开发方式外，还可以通过函数计算的方式，录音文件识别通过触发器函数自动执行，将识别结果保存回OSS或者其他存储器上，您只需关注最终的识别结果，减少SDK集成...
基本概念
本文介绍了 文件存储 HDFS 版 使用的一些基本概念。术语 描述 文件系统实例 一个拥有全局命名空间，可用来存储数据的文件系统。您可以通过挂载点访问文件系统实例中的数据。挂载点 挂载点是文件系统实例在专有网络或经典网络内的一个访问...
使用Kafka（离线与实时）
odps-sink-connector.json 文件内容示例如下，关于 odps-sink-connector.json 文件详情介绍，请参见 配置并启动Kafka-connector任务。{"name":"odps-test-text","config":{"connector.class":...
目录和文件访问权限
文件存储 HDFS 版 为目录和文件提供了一种访问权限，该访问权限类似于POSIX文件系统的权限模型。本文简要介绍访问权限的概念、使用方式及其相关注意事项。访问权限介绍 文件存储 HDFS 版 文件系统中的每一个文件或者目录会关联到三个权限...
产品优势
本文档主要为您说明阿里云数据库文件存储DBFS的主要优势。数据库文件存储DBFS是阿里云推出的一款针对数据库场景的文件存储。它在性能、弹性、高可用、成本及数据安全等维度上做了诸多技术创新与优化。适合云上自建数据库使用，提供企业级...
文件存储 HDFS 版支持Python SDK吗？
文件存储 HDFS 版 提供两种SDK，分别为管控系统SDK和文件系统SDK。仅管控系统支持Python SDK，文件系统仅支持Java SDK。更多有关管控系统支持的SDK语言，请参见 OpenAPI。
在文件存储 HDFS 版上使用Apache Spark
本文主要介绍如何在挂载 文件存储 HDFS 版 的Hadoop集群上安装及使用Apache Spark。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK，且JDK...
文件存储CPFS
文件存储CPFS（Cloud Paralleled File System）是一种并行文件系统。CPFS的数据存储在集群中的多个数据节点，并可由多个客户端同时访问，从而能够为大型高性能计算机集群提供高IOPS、高吞吐、低时延的数据存储服务。适用场景 文件存储CPFS ...
企业业务上云
本文列举了文件存储NAS助力企业业务上云的解决方案。企业搬站的关键：企业级存储如何助力核心业务系统上云？企业用户多账号合并之存储迁移集中
NAS存储卷概述（ASK）
功能介绍 阿里云文件存储NAS（Apsara File Storage）是面向阿里云ECS实例、E-HPC和容器服务等计算节点的文件存储服务。它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。NAS基于POSIX文件接口，天然适配原生操作系统，...
账单查询
您可以通过阿里云管理控制台查看 文件存储 HDFS 版 的费用账单。查看文件系统费用账单 登录 用户中心。在左侧导航栏，单击 账单管理>账单详情。在 明细账单 页签中，设置查询 账期，并在列表中筛选产品为 文件存储 HDFS 版。您还可以通过 ...
在文件存储 HDFS 版上使用Apache Flink
本文介绍如何在挂载 文件存储 HDFS 版 的Hadoop集群上安装及使用Apache Flink。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK，且JDK版本不...
生命周期管理概述
阿里云文件存储NAS推出的生命周期管理功能，可以帮助您将低频访问的冷文件数据从标准存储转换到低频存储或归档存储中，并采用低频存储或归档存储计费方式，从而减少文件系统的存储费用。本文主要介绍生命周期的策略、使用限制、应用场景、...
CPFS存储卷概述
功能介绍 文件存储CPFS是阿里云推出的全托管、可扩展的高性能共享文件存储系统，支持POSIX、MPI-IO和NFS协议。针对GPU和CPU多机计算场景进行了深度优化，提供对数据百GB/s吞吐、亚毫秒级的访问和百万级IOPS的数据读写请求，CPFS提供了统一...
查看快照容量
您可以按照以下步骤在数据库文件存储控制台查看某一个文件系统所有快照所占的容量。登录 数据库文件存储控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 快照，然后单击 快照链 页签。在 快照链 页面，搜索的下拉列表选择文件...
数据操作
scan-o D:\\0testreport\\myh3.json-b '["86",6771]'-e '["86",6775]' 导入数据 导入本地JSON文件中的数据到表中。重要 如果本地JSON文件所在路径中存在汉字，则导入数据时会出错。命令格式 import-i/localpath/filename.json-ignore_...
JSON格式
oss:/oss-shipper-chengdu/ecs_test/2022/01/26/20/54_1453812893059571256_937.json 未压缩的JSON文件可下载到本地，以文本方式打开查看。文件样例如下所示。{"_time_":"1453809242","_topic_":"","_source_":"10.170.*.*","ip":"10.200.*...
管理挂载点
本文介绍如何在 文件存储 HDFS 版 控制台上管理挂载点，包括添加挂载点、查看挂载点信息、删除挂载点、修改挂载点权限组、禁用和激活挂载点等。前提条件 已创建文件系统。具体操作，请参见 创建文件系统。挂载点说明 一个阿里云账号最多...
DataV封装ECharts功能介绍
本文从index.js文件、package.json文件以及实操演示三个方面介绍DataV自定义组件如何封装Echarts。课程说明 index.js与package.json文件的作用 package.json是用来定义接入DataV时组件的配置项，例如开放给您配置的组件样式、组件静态数据...
容灾备份
在文件存储NAS服务中，保障数据安全性和业务连续性十分重要。本文列举了NAS文件备份的最佳实践及数据保护方案。阿里云NFS NAS数据保护实战 HBR云上统一备份 阿里云SMB NAS数据保护实战
API概览
本产品（文件存储 HDFS 版/2018-06-20）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求...
资源包抵扣规则
本文介绍文件存储NAS资源包的抵扣规则和抵扣顺序。生效和抵扣时间 资源包购买后立即生效，将在购买时间段的按量付费账单中体现抵扣效果。假如您在2021年08月12日10:30:30购买了有效期为1个月的1 TiB极速型NAS资源包，则实际抵扣时间需要...
Kafka Rebalancer工具介绍
需要借助kafka-reassign-partitions.sh工具对运维的过程进行监控，因此需要注意手工保存reassignment的JSON文件，该文件将用作kafka-reassign-partitions.sh的verify输入参数。Rebalancer工具功能 在EMR集群Broker的ECS实例上，可以直接...
JSON
CREATE SCHEMA dla_oss_db with DBPROPERTIES(catalog='oss',location 'oss:/dlaossfile1/dla/')JSON文件必须满足以下条件，否则无法在DLA中为JSON文件创建表：无论JSON数据是否为嵌套格式，必须将一条完整的JSON数据放在一行中，否则无法...
- 产品推荐
- 这些文档可能帮助您