迁移工具

使用DataWorks/DataX、表格存储的通道服务等迁移工具,在不影响业务的情况下,您可以实现表格存储数据的全量迁移、增量迁移或者实时同步。本文介绍如何选择迁移工具。迁移工具选择 迁移数据时,请根据实际业务选择合适的迁移工具。表格存储...

将表格存储数据下载到本地文件

表格存储支持通过命令行工具或者DataX工具直接下载数据到本地文件。您也可以通过DataWorks工具将数据同步到OSS后再在OSS侧下载数据到本地文件。下载方式 请根据所需文件格式选择合适的方式进行数据下载,详细说明请参见下表。导出文件格式 ...

管理存储空间访问权限

您可以在创建存储空间(Bucket)时设置存储空间的访问权限(ACL),也可以在创建存储空间后根据自己的业务需求修改存储空间的访问权限。本文介绍如何设置和获取存储空间的访问权限。读写权限类型 存储空间的访问权限有以下三类:访问权限 ...

0013-00000108

问题描述 当前地域不支持您指定的存储类型。问题原因 仅部分地域支持冷归档存储、深度冷归档存储类型。问题示例 无 解决方案 确认当前地域支持冷归档存储、深度冷归档存储类型。更多信息,请参见 存储类型介绍。相关文档 PutBucket

归档存储服务等级协议

归档存储服务的所有具体功能请详见阿里云在官网上提供的详细说明文档、技术文档及帮助文档。归档存储所有可能影响用户的功能性变更都将向用户公告。2.8.服务可用性 服务可用性:不低于99.9%。归档存储可用性按服务周期统计,一个服务周期为...

0017-00000131

问题描述 x-oss-storage-class 请求头的值不能为空字符串。问题原因 用于指定存储类型的请求头 x-oss-storage-class 的值为空字符串。...x-oss-storage-class 请求头的值不为空字符串。x-oss-storage-class 用于指定Object...相关文档 PutObject

Hive

Hive数据仓库工具能将存储在HDFS系统中的结构化的数据文件映射为一张数据库表,并提供SQL查询功能,能将SQL语句转变成Map/Reduce任务来执行。操作步骤 初始化Spark。val spark:SparkSession=SparkSession.builder().config("hive.metastore...

计算与分析概述

表格存储支持通过MaxCompute、Spark、Hive或者HadoopMR、函数计算、Flink、Presto、表格存储多元索引以及表格存储SQL查询进行计算与分析。分析工具选择 表格存储支持 宽表模型、时序模型 等多种数据模型。使用不同数据模型时支持的分析工具...

OSS有哪些批量操作?

批量上传 您可以使用以下方法,批量上传文件:ossimport工具 支持从服务器本地、第三方云存储(S3、Azure、腾讯COS等)、OSS等数据源将数据批量迁移到OSS,特别适合数据量很大的情况。详情请参见 ossimport概述。ossutil工具 使用ossutil...

0015-00000229

问题描述 已存在的Bucket不支持修改存储类型(StorageClass)。问题原因 您发起了PutBucket请求修改已存在Bucket的信息,但是您指定的StorageClass与Bucket当前StorageClass不一致,OSS不支持您修改已存在Bucket的StorageClass配置。问题...

2022-01-27

数据模型存储管控通知 平台将会对数据模型功能进行管控,将于2022-03-01开始清理30天前数据,并且对新写入数据的存储周期更改为30天,30天后数据将会被清理,请及时消费数据进行存储。提供Modbus、BacNet协议点位配置工具 提供Modbus、...

0025-00000002

问题描述 OSS ON云盒不支持指定的存储类型。问题原因 您发起了PutBucket请求,但是OSS ON云盒场景下,不支持指定的存储类型。问题示例 当前OSS ON云盒场景下,不支持 ColdArchive 存储类型。PUT/HTTP/1.1 Host: cb-f8z7yvzgwfkl9q0h*....

0016-00000702

问题描述 当前Object的存储类型不支持解冻操作。问题原因 您对标准或低频访问类型的Object发起了RestoreObject请求。问题示例 您对标准或低频访问类型的Object(oss.jpg)发起了RestoreObject请求,而RestoreObject接口仅适用于归档、冷...

OSS

例:读取在存储空间名称为databricks-demo-hangzhou文件路径为demo/The_Sorrows_of_Young_Werther.txt的文件/从oss地址读取文本文档 val dataRDD=sc.textFile("oss:/databricks-demo-hangzhou/demo/The_Sorrows_of_Young_Werther.txt")读...

使用流程

表格存储 提供了控制台、命令行工具(Tablestore CLI)和Tablestore SDK三种访问方式。本文介绍通过控制台和命令行工具快速使用宽表模型和时序模型的流程。背景信息 使用表格存储前,您需要了解表格存储相关介绍,例如产品概述、基本概念等...

计费概述

计费方式 计费类别 说明 适用场景 相关文档 按计算资源付费 数据湖分析CU版根据购买的CU规格进行计费,费用跟运行查询扫描的数据量没有关系。计费模式如下。包年包月。按量付费。适用于查询频率高、查询数据量较大的场景,同时也能够给您...

概述

大部分阿里云用户以CSV格式将数据存储在OSS上,若要提高数据扫描性能,需要借助第三方工具对文件进行格式转换,然后将转换后的数据上传至OSS,整个过程比较繁琐。为减轻用户工作量,您可以直接使用DLA来转换文件格式。假设将1.2GB的数据以...

ORC

ORC(Optimized Row Columnar)是Apache开源项目Hive支持的一种经过优化的列存储文件格式,与CSV文件相比,ORC文件不仅节省存储空间,而且数据查询性能更高。本文介绍如何在DLA中为ORC类型的文件创建表。前提条件 请参见文档 文件格式转换...

Parquet

Parquet是Apache开源项目Hadoop支持的一种列存储文件格式,同一份数据以ORC格式和Parquet格式存储时,其数据扫描性能要优于普通文本CSV格式。本文介绍如何在DLA中为Parquet类型的文件创建表。前提条件 请参见文档 文件格式转换,准备...

常见术语

本文档主要介绍云原生数据湖分析(Data Lake Analytics,DLA)文档中涉及的基本概念。数据湖 数据湖是一个集中式存储库,允许您以任意规模存储所有结构化和非结构化数据,数据湖支持存储EB级别的数据,阿里云数据湖存储以OSS为代表!数据湖...

作业提交示例

例:读取在存储空间名称为databricks-demo-hangzhou文件路径为demo/The_Sorrows_of_Young_Werther.txt的文件/从oss地址读取文本文档 val text=sc.textFile("oss:/databricks-demo-hangzhou/demo/The_Sorrows_of_Young_Werther.txt")步骤一...

文本文件

例:读取在存储空间名称为databricks-demo-hangzhou文件路径为demo/The_Sorrows_of_Young_Werther.txt的文件/从oss地址读取文本文档 val dataRDD=sc.textFile("oss:/databricks-demo-hangzhou/demo/The_Sorrows_of_Young_Werther.txt"实例 ...

新功能发布记录

本文介绍 混合云存储 每次发布涉及的功能变更及对应的文档,帮助您了解 混合云存储 的发布动态。2019年3月 功能名称 功能描述 发布时间 支持地域 相关文档 Apsara SA系列混合云存储阵列发布 Apsara SA混合云存储阵列融合IP SAN、FC SAN、...

文档处理概述

文档智能处理 参见具体文档 对OSS中的文档进行AI处理,包括文档内容翻译、文档内容润色、文档摘要生成、文档续写、文档内容丰富以及文档语气改写六大类。操作方式 您可以通过异步处理接口x-oss-async-process对文档进行转换处理。操作方式...

文档智能处理

文档智能处理是由智能媒体管理(IMM)提供的针对文档的AI处理功能,包括文档内容翻译、文档内容润色、文档摘要生成、文档续写、文档内容丰富以及文档语气改写六大类。您可以将原始文档上传到阿里云对象存储OSS中,通过OSS的RESTful数据处理...

迁移说明

本文介绍了如何将NAS中的数据迁移至其他存储介质,或者将数据由其他存储介质迁移至NAS的方法。非阿里云服务存储数据迁移至云上NAS 如果您想将线下数据、IDC数据、本地数据等非阿里云服务存储数据迁移至阿里云文件存储NAS,可参照以下方式...

数据集成服务

数据导入的迁移方案包括同步MySQL数据到表格存储、同步Oracle数据到表格存储、同步Kafka数据到表格存储、同步HBase数据到表格存储、同步MaxCompute数据到表格存储、同步表格存储数据表中数据到另一个数据表和同步表格存储时序表中数据到另...

概述

本文简要说明非阿里云数据迁移至阿里云文件存储NAS的费用说明、操作流程及迁移工具选择。费用说明 非阿里云数据迁移至阿里云NAS时,会涉及如下费用:文件存储NAS存储费用,推荐购买资源包抵扣。关于NAS的计费详情,请参见 计费概述。如果您...

OSS管理控制台概览

OSS管理控制台是OSS为您提供的一款简单且易于上手的网页平台管理工具,您可以在OSS管理控制台的概览页面了解您所有存储空间(Bucket)的概况,例如Bucket数量、存储用量、流量、API请求数等。快速了解OSS 如果您首次使用OSS,建议通过 概览...

概述

您可以根据业务需求使用DataX、DTS或者canal工具将MySQL数据库中的数据同步迁移到表格存储(Tablestore)中。使用场景 数据架构变化 随着业务的变化,如果现有业务对数据库并发读写需求、扩展性和可用性需求较高,或需要复杂的检索,原有...

文档转换

使用REST API 转换信息 转换前 文档格式:DOCX 文档名称:example.docx 处理方式:文档格式转换 转换后 文件格式:PNG 文件存储路径:oss:/test-bucket/doc_images/{index}.png b_dGVzdC1idWNrZXQ:转码完成后保存到名为test-bucket的...

OSS和NAS之间的数据迁移

本文介绍如何通过ossutil工具或在线迁移服务实现阿里云对象存储OSS和文件存储NAS之间的数据双向迁移。费用说明 使用ossutil工具迁移 ossutil工具本身不收取费用,但是由于迁移数据时涉及到API请求,所以会产生一定的API请求费用。OSS数据...

常见问题

表格存储 适用于以下场景:元数据 用户存储海量的文档、媒体文件等数据的同时,对文件元数据的存储和分析不可或缺。此外,电商的订单、银行流水、运营商话费账单也需要存储及分析大量的元数据。表格存储 单表支持PB级存储、千万QPS以及多种...

游戏管理

上传工具的上传步骤为:将客户指定的文件夹打包成tar文件 校验该tar文件 将该文件整体上传 由于该流程中会把文件夹再次打包,同时另外预留40%左右的存储容量,因此请您确定您的磁盘中有源文件夹240%的容量大小,以确保整个上传流程可以正常...

对象存储OSS

抵扣顺序 OSS存储费用的抵扣顺序为:地域存储包>中国大陆通用存储包>SCU>按量计费 抵扣案例 用户A于2021年6月在华东1(杭州)购买了500 GB的 标准-本地冗余存储包 和20 GB的SCU,其6月份在华东1(杭州)地域标准存储(本地冗余)类型文件...

前言

背景信息 表格存储 提供了宽表模型、时序模型、消息模型等多种数据模型,SDK参考文档中主要介绍使用宽表模型和时序模型时的功能操作。请根据要使用的数据模型执行相应操作,具体功能的使用流程说明请参见下表。说明 关于消息模型的更多信息...

前言

本文介绍对象存储OSS的Go SDK各种使用场景下的示例代码。SDK源码和API文档 请访问 GitHub 获取OSS Go SDK源码。更多信息,请参见 OSS Go SDK API文档。示例程序 OSS Go SDK提供丰富的示例程序,方便您参考或直接使用。示例包括以下内容:...

前言

本文介绍表格存储Node.js SDK的使用流程、SDK下载、版本等。本文内容适用于4.x.x以上版本。使用流程 表格存储 提供了宽表模型、时序模型、消息模型等多种数据模型,表格存储 Node.js SDK只支持使用宽表模型的功能操作。宽表模型的一般使用...

Midway Serverless OTS数据库示例

阿里云云开发平台是阿里云提供的一站...阿里云表格存储,是一个按需付费的 Nosql 数据库。环境需求:可以上网的浏览器,额,IPad 也可以!手把手教学 Step 1 进入云开发 点击主页上的免费云开发按钮登录阿里云账号,没有账号注册后登录即可。...

ORC文件

例:读取在存储空间名称为databricks-demo-hangzhou文件路径为demo/The_Sorrows_of_Young_Werther.txt的文件/从oss地址读取文本文档 val dataRDD=sc.textFile("oss:/databricks-demo-hangzhou/demo/The_Sorrows_of_Young_Werther.txt"实例 ...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
混合云存储 云存储网关 文件存储NAS 对象存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用