存储空间计费问题
Q：按容量计费（按量计费）和按空间计费（包年包月）两种存储计费类型有什么区别？A：按容量计费（按量计费）无需预设置存储空间上限，存储空间按照实际数据量自动Serverless弹性并按量计费，支持资源包抵扣；按空间计费（包年包月）购买时...
使用DLF元数据
支持的数据源类型有hive、hudi、iceberg、deltalake。dlf.catalog.id 否 待读取的DLF Catalog ID。如果不添加该配置，则使用默认DLF Catalog。hive.metastore.type 是 配置MetaStore类型。固定值为DLF。查询数据。通过SHOW DATABASES查看...
新建数据模型
字段类型 选择字段类型，新增字段有以下几种字段类型可选：INTEGER：整型数据，一般用于存储整数类型的数据。LONG：是一种长整型数据，一般用于存储长整型数据。DECIMAL：存储小数类型的数据，精度比较高，适用于需要精密数学的运算。...
411错误
本文介绍OSS返回411错误的原因和解决方案。...解决方案：请确保请求头采用了 chunked encoding 的编码方式，或者设置了 Content-Length。ObjectNotAppendable The object is not ...请通过 ListObjects（GetBucket）接口获取Object的存储类型。
RestoreObject
延长后的总时长不能超过每种存储类型的解冻状态持续时间的最大值。解冻状态结束后，Object再次返回到冷冻状态。注意事项 RestoreObject接口只针对归档、冷归档和深度冷归档类型的Object，不适用于标准类型和低频访问类型的Object。对于...
生命周期费用说明
低频访问、归档、冷归档、深度冷归档存储类型Object有最小计量单位限制。单个Object小于64 KB，按照64 KB计算；大于或等于64 KB，按照实际大小计算。当低频访问、归档、冷归档、深度冷归档存储类型Object在不足规定时长时通过生命周期策略...
OSS文件处于冻结状态无法正常访问
问题原因 阿里云对象存储OSS中的文件处于冻结状态有以下几种情况：在对象存储OSS中，如果Bucket的存储类型是归档存储或者冷归档存储时，默认存放到该Bucket的文件都是冻结状态。上传文件时设置了文件存储类型为归档存储或者冷归档存储，也...
0013-00000104
问题原因 该错误有两种原因：当前操作不支持指定存储类型为ColdArchive，例如AppendObject操作。当前用户或者当前地域不支持ColdArchive存储类型。问题示例 例如，您发起了AppendObject请求，请求中通过 x-oss-storage-class 请求头将...
0013-00000105
问题原因 该错误有两种原因：当前操作不支持指定存储类型为ColdArchive，例如AppendObject操作。当前用户或者当前地域不支持ColdArchive存储类型。问题示例 例如，您发起了PutObject请求，请求中通过 x-oss-storage-class 请求头将Object...
OSS小时数据
由于低频访问、归档、冷归档以及深度冷归档存储类型有最小计量容量64 KB的限制，因此这几种存储类型的计量容量与计费容量可能会出现不相等的情况。StorageType String standard 数据存储类型。取值如下：standard：标准存储-本地冗余 IA：...
云计算资源支持类型
本文主要介绍数据探索支持的云...计算资源管理 支持的计算资源类型有MaxCompute、Hive、RDS MySQL、*Hive Storage、*Spark on yarn、*Spark Cluster、*Zerg Standalone、*ADB MySQL 2.0。说明 带星号（*）的云计算资源仅支持在特定场景使用。
存储费用
重要 归档存储类型文件有最小计量单位限制。单个文件小于64 KB，按照64 KB计算；大于或等于64 KB，按照实际大小计算。按量付费：存储费用=计费存储量（GB）×月单价÷30（天）÷24（小时）归档-本地冗余存储包 打开 对象存储OSS资源包 购买...
使用EasyRec读取Hive表
EasyRec支持csv和Parquet两种Hive文件存储格式。本文通过示例为您介绍，如何基于Hive在Data Science集群进行EasyRec模型训练、评估和预测。前提条件 已创建Hadoop集群，详情请参见 创建集群。已创建DataScience集群，且选择了EasyRec和...
切换存储计费类型
PolarDB的计算和存储分离，计算支持 按量付费 和 包年包月 两种计费类型，存储支持 按容量计费（按量付费）和 按空间计费（包年包月）两种计费类型。按容量计费（按量付费）和按空间计费（包年包月）两种存储计费类型不支持单独互转，仅...
Hive访问EMR HBase数据
EMR HBase开启Kerberos 如果EMR HBase开启了Kerberos，Hive关联HBase表并进行查询时，则需要设置Kerberos相关参数，设置方式有以下两种：Hive命令行设置 set hbase.security.authentication=kerberos;set hbase.master.kerberos.principal=...
Hive访问EMR HBase数据
EMR HBase开启Kerberos 如果EMR HBase开启了Kerberos，Hive关联HBase表并进行查询时，则需要设置Kerberos相关参数，设置方式有以下两种：Hive命令行设置 set hbase.security.authentication=kerberos;set hbase.master.kerberos.principal=...
数据中心
数据中心包含数据管理、数据配置。数据管理 数据管理模块展示并管理用户添加的数据。主要功能包括数据表引入、本地数据导入。...数据配置 计算资源管理 支持用户在系统内添加云计算资源，支持的计算资源类型有：ODPS、hive等。
Hive数据源
您可以基于HDFS文件和Hive JDBC两种方式读取数据：基于HDFS文件读取数据 Hive Reader插件通过访问HiveMetastore服务，解析出您配置的数据表的HDFS文件存储路径、文件格式、分隔符等信息后，再通过读取HDFS文件的方式读取Hive中的表数据。...
使用Hive查询JindoFS上的数据
Hive scratch目录 Hive会把一些临时输出文件和作业计划存储在scratch目录，可以通过设置hive-site的hive.exec.scratchdir把地址指向到JindoFS，也可以通过命令行传参。bin/hive-hiveconf hive.exec.scratchdir=jfs:/emr-jfs/scratch_dir ...
上传文件概述
OSS Java SDK提供了以下几种文件上传方式：简单上传：包括流式上传和文件上传。最大不能超过5GB。表单上传：最大不能超过5GB。追加上传：最大不能超过5GB。断点续传上传：支持并发、断点续传、自定义分片大小。大文件上传推荐使用断点续传...
常见问题
产品简介FAQ 云存储网关提供哪些服务？云存储网关支持哪些协议？产品原理FAQ 文件网关中的文件与OSS间的映射关系如何？文件网关缓存的淘汰机制是什么？文件网关的缓存有什么作用？云存储网关文件上传原理解析是什么？极速同步如何保证反向...
0015-00000216
目前OSS仅支持LRS和ZRS两种类型，指定其他类型都会报错。某地域不支持同城冗余类型。例如，目前仅部分地域支持ZRS。如果在不支持的区域指定创建ZRS类型的Bucket则会报此错误。问题示例 在英国（伦敦）创建ZRS类型的Bucket：PUT/...
备份存储空间
本文介绍备份OSS数据的几种主要方式。说明 备份存储空间会产生请求、数据取回等费用，费用详情请以实际备份方式为准。通过定时备份功能进行备份 云备份（Cloud Backup）可创建备份计划，并按计划将您OSS内的数据备份到 云备份（Cloud ...
Hive数据导入
E-MapReduce集群业务场景为 新版数据湖，元数据类型为 自建 RDS 或 内置 MySQL，具有Hive服务，且 Hive 存储模式 为HDFS（即去勾选 数据湖存储）。具体操作，请参见 创建集群。重要 元数据类型为 DLF 统一元数据 的E-MapReduce集群，暂不...
查看集群日报与分析
存在分区热点的表详细信息 表分区均衡度倒排Top 表分区平均数据量倒排Top 表数据量Top 表数据量日环比Top 表分区数Top 表分区日环比Top 表读请求数Top 表读请求数日环比Top 表写请求数Top 表写请求数日环比Top Hive存储资源 详细分析 该...
ip4r
单一地址数据类型及其类型转换 以下三种数据类型用于存储单一IP地址数据：ip4：输入形式必须满足 nnn.nnn.nnn.nnn，其实际存储的数据为32位无符号整型数据。ip6：输入形式必须是IPv6地址的标准十六进制表示形式，其实际存储的数据为两个64...
物联网存储介绍
基于物联网场景中多源异构数据存储、高并发吞吐、海量数据高性价比存储、多维度数据处理与分析等需求，表格存储推出了一站式物联网存储IoTstore解决方案，为物联网设备元数据、消息数据、时序轨迹等海量数据提供存储、查询、检索、分析、...
CDH6与文件引擎集成
三、安装HIVE服务 安装MySQL数据库，并创建用来存储hive元数据信息的数据库。登入CDH6任意的一台机器，执行如下指令，进行安装。切换到 root sudo su-#下载 MySQL的rpm 源 root@cdhlindorm001~/tool$wget ...
与Hive、MySQL、Oracle数据类型映射表
MaxCompute数据类型 Hive数据类型 Oracle数据类型 MySQL数据类型 BOOLEAN BOOLEAN 无 说明 Oracle自23C开始有此数据类型。无 说明 使用过程用 TINYINT(1)替代。TINYINT TINYINT NUMBER(3,0)TINYINT SMALLINT SMALLINT NUMBER(5,0)SMALLINT ...
数据治理
当前仅支持面向E-MapReduce中的几类Hive表提供数据预览功能，若无法进行Hive表数据预览，请联系集群管理员确认集群类型及存储类型是否满足以下要求。说明 其中 表示支持预览，表示不支持预览。EMR集群类型 元数据存储类型 数据存储类型：...
环境准备
通道服务提供了增量、全量、增量加全量三种类型的分布式数据实时消费通道。通过为数据表建立数据通道，您可以通过流式计算的方式对表中历史存量和新增数据进行消费处理。使用实时计算Flink服务 首次使用实时计算Flink时，请根据如下步骤...
功能特性
阿里云云存储网关提供文件网关和块网关两种类型，各类型网关分为多种规格。本文介绍不同类型规格的网关支持的功能特性。文件网关 文件网关支持NFS和SMB这两种网络传输协议，两者都是基于局域网的网络文件传输协议。NFS协议主要用于Unix操作...
服务地址
服务地址类型 服务地址包括公网地址、公网（双栈）地址、VPC地址和经典网地址四种类型。通过不同网络访问 表格存储 实例时需要使用相应服务地址。说明 关于专有网络和经典网络的更多信息，请参见 网络类型。访问场景 选择Endpoint 通过...
迁移工具
将MySQL数据同步迁移到表格存储 将HBase数据同步到表格存储 将MaxCompute数据同步到表格存储 将表格存储数据同步到MaxCompute 将表格存储数据同步迁移到OSS 将表格存储数据表中数据同步到另一个数据表 将表格存储时序表中数据同步到另一个...
Hive作业配置
E-MapReduce默认提供了Hive环境，您可以直接使用Hive来创建和操作创建的表和数据。前提条件 已创建好项目，详情请参见 项目管理。已准备好Hive SQL的脚本，并上传到OSS的某个目录中（例如 oss:/path/to/uservisits_aggre_hdfs.hive）。...
表格存储系统权限策略参考
阿里云访问控制（RAM）产品提供了两种类型的权限策略：系统策略和自定义策略。系统策略统一由阿里云创建，策略的版本更新由阿里云维护，用户只能使用不能修改。自定义策略由用户管理，策略的版本更新由用户维护。用户可以自主创建、更新和...
文件存储NAS系统权限策略参考
阿里云访问控制（RAM）产品提供了两种类型的权限策略：系统策略和自定义策略。系统策略统一由阿里云创建，策略的版本更新由阿里云维护，用户只能使用不能修改。自定义策略由用户管理，策略的版本更新由用户维护。用户可以自主创建、更新和...
基于模型生成ETL代码
选择 绑定DataStudio节点：发布至MaxCompute、EMR Hive引擎的表与已有的相应引擎类型的DataStudio节点绑定，您可在绑定成功后单击绑定好的节点名称直接跳转至对应的节点页面。说明 后续如果您还需要继续绑定其他节点，可再次单击顶部的 ...
通道服务概述
通道服务提供了增量、全量、增量加全量三种类型的分布式数据实时消费通道。通过为数据表建立数据通道，您可以简单地实现对表中历史存量和新增数据的消费处理。背景信息 表格存储适合元数据管理、时序数据监控、消息系统等服务应用，这些...
通过NFS使用NAS动态存储卷
容器服务 Kubernetes 版 CSI支持subpath方式和filesystem方式两种类型的NAS动态存储卷挂载，您可以通过容器服务控制台或kubectl两种方式进行挂载。本文介绍如何使用阿里云NAS动态存储卷，以及如何验证NAS存储卷的持久化存储与共享存储特性...
- 产品推荐
- 这些文档可能帮助您