创建文件系统
参数 说明 StorageType 文件系统的存储规格，取值：advance，表示存储规格类型为高级型 例如，高级型文件系统创建了快照B_Snapshot，使用快照B_Snapshot创建文件系统时，StorageType 必须配置为 advance。ProtocolType 文件系统支持的协议...
cp（拷贝文件）
拷贝文件（Object）是指在不改变文件内容的情况下，将同一地域下的源存储空间（Bucket）内的文件复制到目标Bucket，或者将文件复制到相同存储空间（Bucket）的其他目录。您可以通过ossutil的 cp 完成拷贝。注意事项 要拷贝文件，您必须具有...
数据上云工具
MaxCompute平台支持丰富的数据...MMA迁移工具 MMA利用Meta Carrier连接用户的Hive Metastore服务，抓取用户的Hive Metadata，并利用这些数据生成用于创建MaxCompute表和分区的DDL语句以及用于迁移数据的Hive UDTF SQL。详情请参见 MMA概述。
静态网站托管概述
您可以通过静态网站托管功能将您的静态网站托管到OSS的存储空间（Bucket），并使用Bucket的访问域名访问这个网站。使用说明 配置静态网站托管时，您需要指定网站的默认首页和默认404页：默认首页是您通过浏览器访问静态网站域名时，OSS返回...
备份Tablestore数据
为了防止重要数据被误删或者恶意篡改导致业务异常，建议您使用 表格存储 数据备份功能备份实例中的重要数据。本文介绍了如何定期备份 表格存储 的全量数据或者增量数据。注意事项 首次使用数据备份功能时，云备份 将自动创建服务关联角色...
导入概述
为了更好地满足各种不同的业务场景，StarRocks支持多种数据模型，StarRocks中存储的数据需要按照特定的模型进行组织。本文为您介绍数据导入的基本概念、原理、系统配置、不同导入方式的适用场景，以及一些最佳实践案例和常见问题。背景信息...
开始使用OSS
对象存储OSS支持多种方式访问和管理对象。本文为您介绍如何通过控制台、命令行管理工具ossutil、图形化管理工具ossbrowser、OSS SDK、REST API等多种方式管理OSS。开通OSS服务 打开 OSS开通页面。在OSS开通页面，按照界面指引完成开通操作...
高级管理FAQ
删除策略之前，如果数据已经转储到低频存储或归档存储，数据仍会继续保存在低频存储或归档存储中，并将按照低频存储或归档存储的费用收取存储费用。如果您是想将存储至低频存储或归档存储中的数据取回通用型NAS存储空间，请参见 创建数据...
Hive数据源
ALTER DATABASE 此事件的影响主要有更改数据库的属性信息，注释及默认存储位置等，这些改变不影响SelectDB对外部数据目录的查询操作，因此目前会忽略此event。CREATE TABLE 在对应数据库下创建表。DROP TABLE 在对应数据库下删除表，并失效...
初始化
Client是OSS的Ruby客户端，用于管理存储空间和文件等OSS资源。使用Ruby SDK发起OSS请求，您需要初始化一个Client实例，并根据需要修改Client的默认配置项。初始化Client 您可以通过以下多种方式新建Client。使用OSS域名新建Client 以下代码...
配置说明
取值范围如下：normal（默认）：同步数据到表格存储的数据表。timeseries：同步数据到表格存储的时序表。tablestore.access.key.id string 是 LTAn*登录账号的AccessKey ID和AccessKey Secret，获取方式请参见 获取AccessKey。tablestore....
使用CNFS自动扩容NAS存储卷
通过定义CNFS中托管的NAS存储卷的自动扩容策略，当NAS存储卷的使用率高于某个阈值时，触发NAS存储卷的自动扩容。本文介绍如何使用CNFS实现NAS存储卷的自动扩容。前提条件 已创建Kubernetes托管版集群，且存储插件选择为CSI。若需要新建集群...
异构数据源访问
提供以下功能：多种数据存储访问：支持多种数据存储系统，允许 AnalyticDB PostgreSQL版 数据库直接访问存储在HDFS、Hive、MySQL，PostgreSQL，PolarDB MySQL等多种外部系统中的数据。数据格式透明：支持常见的数据格式，如CSV、ORC、...
数据加密
例如，深度学习样本文件的存储、在线协作类文档数据的存储。针对不同的应用场景，OSS有以下两种服务器端加密方式：使用KMS托管密钥进行加解密（SSE-KMS）上传文件时，可以使用默认KMS（Key Management Service）托管的CMK（Customer Master...
错误处理
表格存储Go SDK目前采用“异常”的方式处理错误。本文介绍了表格存储错误处理方式、异常处理信息和出错时的重试策略。方式 表格存储Go SDK目前采用“异常”的方式处理错误，如果调用接口没有抛出异常，则说明操作成功，否则失败。说明 批量...
Paimon与Trino集成
hive：元数据同步到指定的Hive MetaStore中。dlf：元数据同步到DLF中。重启Trino服务。在Trino服务配置页面，选择右上角的 更多操作>重启。在弹出的对话框中，输入 执行原因，单击 确定。在 确认 对话框中，单击 确定。查询Paimon数据。...
初始化
OSSClient是OSS的Java客户端，用于管理存储空间和文件等OSS资源。使用Java SDK发起OSS请求，您需要初始化一个OSSClient实例，并根据需要修改ClientConfiguration的默认配置项。前提条件 初始化OSSClient前，您需要配置访问凭证。详情请参见...
包年包月
基础价格默认不包含，可扩展范围为 5,000~500,000 GB 云防火墙默认存储7天的审计日志，支持审计事件日志、流量日志和操作日志。如需要更长时间日志存储或满足等保要求，需要开通日志分析功能。日志分析存储容量的扩展费用：500元/1,000 GB/...
分词
分隔符分词（Split）表格存储提供了基于通用词典的分词，但是有些特殊行业需要一些自定义的辞典做分词，为了解决此问题，表格存储提供了分隔符分词，也叫自定义分词，用户先按照自己的方式分词，再按照特定分隔符分隔后写入表格存储。...
作业上线问题
118)at org.apache.flink.connectors.hive.HiveTableSource.lambda$getDataStream$0(HiveTableSource.java:209)at org.apache.flink.connectors.hive.HiveTableSource$Lambda$972/1139330351.get(Unknown Source)at org.apache.flink....
通过外表导入至数仓版
Hive的其他基本数据类型（如 BOOLEAN）与 AnalyticDB MySQL版 的数据类型一一对应，但 BINARY、CHAR(n)和 VARCHAR(n)类型均对应 AnalyticDB MySQL版 中的 VARCHAR 类型。创建OSS Parquet格式或OSS ORC格式外表 以Parquet格式为例，创建OSS...
EMR Hive功能增强
本文为您介绍E-MapReduce（简称EMR）各版本对应的Hive组件版本，以及各版本中Hive相对开源增强的功能。Hive针对开源功能增强的功能如下表。EMR版本 组件版本 功能增强 EMR-5.2.1 Hive 3.1.2 修复使用DLF元数据执行 show create table 命令...
添加主机
存储资源包 是一种预付费的存储容量资源包，可以抵扣同一地域下按量付费的存储容量费账单，建议您购买 存储资源包 来降低存储成本。地域 主机所在的地域。可用区 主机所在可用区。建议将主机分布在不同可用区提高可用性。集群类型 默认为 ...
添加主机
存储资源包 是一种预付费的存储容量资源包，可以抵扣同一地域下按量付费的存储容量费账单，建议您购买 存储资源包 来降低存储成本。地域 主机所在的地域。可用区 主机所在可用区。建议将主机分布在不同可用区提高可用性。集群类型 默认为 ...
Echarts 弦图
高度：手动输入数值，调整元素的高度，默认值为 auto，自适应元素的高度。静态：勾选后，标签为静态无法交互。图例联动：勾选后，启动图例hover时的联动。悬浮动画：勾选后，开启鼠标hover时的动画效果。环形布局 旋转标签：勾选后，文字...
Echarts 网络图
高度：手动输入数值，调整元素的高度，默认值为 auto，自适应元素的高度。力导图配置 斥力因子：单击+或-号，或手动输入数值，修改节点之间的斥力因子。引力因子：单击+或-号，或手动输入数值，修改节点受到的向中心的引力因子。边长度：...
Echarts 弦图
高度：手动输入数值，调整元素的高度，默认值为 auto，自适应元素的高度。静态：勾选后，标签为静态无法交互。图例联动：勾选后，启动图例hover时的联动。悬浮动画：勾选后，开启鼠标hover时的动画效果。环形布局 旋转标签：勾选后，文字...
Echarts 网络图
高度：手动输入数值，调整元素的高度，默认值为 auto，自适应元素的高度。力导图配置 斥力因子：单击+或-号，或手动输入数值，修改节点之间的斥力因子。引力因子：单击+或-号，或手动输入数值，修改节点受到的向中心的引力因子。边长度：...
快速创建入口
数据库类型为 Microsoft SQL Server、Redis 的主机存储类型默认为 ESSD云盘。主机规格 选择 主机规格。您可以通过核数、内存以及规格分类筛选目标数据。说明 关于主机规格的详细信息，请参见 主机规格详情。存储空间 主机对应的存储空间，...
0014-00000026
问题描述 PutBucketLifecycle请求的请求体XML中 Rule 节点下缺少生命周期操作元素。问题原因 PutBucketLifecycle请求的请求体XML中Rule节点下缺少必选的生命周期操作元素Transition或者Expiration。Transition：达到Object生命周期中指定的...
文件存储NAS系统权限策略参考
本文描述文件存储NAS支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制（RAM）产品...
EMR-4.10.x版本说明
修改了E-MapReduce控制台上，Hive服务配置页面的 hive-env 页签的配置项名称为大写，便于用户使用。优化文件系统与MetaStore不一致时写Hive表的报错信息。Hive on JindoFS（Block）支持批量元数据优化功能，默认未开启。Ranger 修复了...
EMR-5.2.x版本说明
修改E-MapReduce控制台上，Hive服务 配置 页面的 hive-env 页签的配置项名称为大写，便于用户使用。修复UDF（User Define Function）导致HiveServer2内存泄露的问题。优化文件系统与MetaStore不一致时写Hive表的报错信息。HDFS 支持ZSTD...
Spark应用配置参数说明
默认OSS路径Spark应用ID的文件夹下存储的内容如下：名称为 Spark应用ID-000X 的文件存储用于Spark UI渲染的Spark Event日志。名称为 driver 和数字的文件夹存储对应的节点日志。名称为 stdout 和 stderr 的文件夹存储Linux操作系统的输出...
环境准备
使用Hive/HadoopMR来访问表格存储中的表前，您需要完成JDK、Hadoop环境、Hive环境、表格存储Java SDK和阿里云EMR SDK的安装。使用Hive/HadoopMR来访问表格存储中的表 通过 表格存储 及 E-MapReduce 官方团队发布的依赖包，可以直接使用Hive...
购买云防火墙服务
云防火墙默认存储最近7天的日志，如果您需要更长时间日志存储或满足等保要求，需要开通日志分析功能，最多支持存储6个月的日志，并支持导出日志。更多信息，请参见 日志分析 和 日志分析计费方式。云防火墙默认存储最近7天的日志，如果您...
EMR-3.36.x版本说明
修改E-MapReduce控制台上，Hive服务 配置 页面的 hive-env 页签的配置项名称为大写，便于用户使用。优化文件系统与MetaStore不一致时写Hive表的报错信息。HDFS 支持ZSTD（Zstandard）压缩格式。Flink 升级Flink至1.12-vvr-3.0.2版本。说明 ...
生命周期配置元素
Prefix元素 基于您指定的元素，将生命周期规则应用于存储空间中的所有或部分Object。Filter元素 Filter元素是生命周期规则的过滤条件，仅当符合Filter下所有条件的Object才会被视为匹配该规则。Not元素 如果您希望按照生命周期规则对与前缀...
使用Hive查询JindoFS上的数据
Hive scratch目录 Hive会把一些临时输出文件和作业计划存储在scratch目录，可以通过设置hive-site的hive.exec.scratchdir把地址指向到JindoFS，也可以通过命令行传参。bin/hive-hiveconf hive.exec.scratchdir=jfs:/emr-jfs/scratch_dir ...
数据容灾
跨区域复制可满足您的以下业务需求：合规性要求：虽然OSS默认对每个存储的对象在物理盘上有多份副本，但合规性要求所规定的数据需要跨一定距离保存一份副本。通过跨区域复制，可以在远距离的OSS数据中心之间复制数据以满足这些合规性要求。...
- 产品推荐
- 这些文档可能帮助您