获取存储空间信息
存储空间（Bucket）是存储对象（Object）的容器。本文介绍如何获取存储空间的信息。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域的其他阿里云产品访问OSS，请使用内网Endpoint。关于OSS支持的Region与...
概述
基于Tablestore Sink Connector，您可以将Apache Kafka中的数据批量导入到表格存储（Tablestore）的数据表或者时序表中。背景信息 Kafka是一个分布式消息队列系统，不同的数据系统可以通过Kafka Connect工具将数据流输入Kafka和从Kafka获取...
准备工作
创建目标存储空间 当目的端为阿里云OSS时，需创建目标存储空间，用于存放迁移的数据。具体操作，请参见 创建存储空间。当目的端为CPFS智算版时，无需执行此操作。创建RAM用户并授予相关权限 说明 请使用阿里云账号创建相应RAM用户并授予...
并发导出数据
columnsToGet ParallelScan目前仅可以扫描多元索引中的数据，需要在创建多元索引时设置附加存储（即store=true）。sessionId 本次并发扫描数据任务的sessionId。创建Session可以通过ComputeSplits API来创建，同时获得本次任务支持的最大...
使用前须知
数据加工任务名为Internal Job:SLS Audit Service Data Sync for OSS Access、Internal Job:SLS Audit Service Data Sync for SLB、Internal Job:SLS Audit Service Data Sync for ALB、Internal Job:SLS Audit Service Data Sync for DRDS...
为什么很长时间没有产生清单结果？
如果您将 清单报告存储路径 设置为 exampledir1/exampledir2，请在存储清单Bucket的 exampledir1/exampledir2/src_bucket/inventory_id 路径下查看汇总的manifest文件，并在 exampledir1/exampledir2/src_bucket/data 路径下查看具体的清单...
什么是文件存储 HDFS 版
文件存储 HDFS 版（Apsara File Storage for HDFS）是面向阿里云ECS实例及容器服务等计算资源的文件存储服务。产品概述 文件存储 HDFS 版 允许您就像在Hadoop分布式文件系统（Hadoop Distributed File System）中一样管理和访问数据。您...
创建存储空间
存储空间（Bucket）是存储对象（Object）的容器。对象都隶属于存储空间。本文介绍如何创建存储空间。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域的其他阿里云产品访问OSS，请使用内网Endpoint。关于OSS支持...
初始化OTSClient
OTSClient是 表格存储 服务的客户端，它为调用者提供了一系列的方法，可以用来操作表、读写单行数据、读写多行数据等。如果要使用宽表模型的操作数据表、读写单行数据、读写多行数据等功能，您需要初始化一个OTSClient实例，并可以根据需要...
使用ossimport迁移数据
ossimport支持将任意地域的本地存储数据、第三方存储数据、对象存储OSS数据迁移至任意地域的OSS中。本文介绍如何使用ossimport将数据从第三方存储迁移到OSS。背景信息 某用户的数据存储于腾讯云COS广州（华南）区域，数据大小约500TB。现...
ALIYUN:IOT:RuleAction
forwards data in the topics that have been processed by the rule engine to another IoT Platform topic.AMQP:forwards data to AMQP consumer groups.OTS:forwards data in the topics that have been processed by the rule engine ...
SQL查询
通过SQL查询功能，您可以对表格存储中数据进行复杂的查询和高效的分析。SQL查询在车联网场景中作为不同类型数据的统一查询接口。概述 SQL查询兼容MySQL的查询语法，同时提供基础的SQL DDL建表能力。对于已有数据表，通过执行CREATE TABLE一...
Dataphin 集成任务运行失败报错："Data truncation:...
问题描述 Dataphin 集成任务运行失败报错："Data truncation:Data too long for column 'planrepaydate' at row 1。问题原因 由于字段计算中新建的字段名称和源表输入字段名称一致导致的。解决方案 将字段计算中的新建字段名称修改一下，...
脚本语法
物联网平台提供的时序数据存储规则，可加工处理设备上报的自定义Topic数据进行存储。时序数据存储规则的能力包括获取消息内容、转换数据格式、处理字符串、组装JSON格式数据、处理二进制数据等。本文介绍如何编写时序数据存储规则的脚本。...
BulkExport
关于数据大小计算的更多信息，请参见 数据存储量。如果请求超时，结果未定义，则服务能力单元有可能被消耗，也可能未被消耗。如果返回内部错误（HTTP状态码：5XX），则此次操作不消耗服务能力单元，其他错误情况消耗1读服务能力单元。
创建Data Science集群
参数 描述 地域 创建的集群会在对应的地域内，一旦创建不能修改。集群类型 Data Science：主要面向大数据+AI场景，提供Hive和Spark离线大数据ETL和TensorFlow模型训练，您可以选择CPU+GPU的异构计算框架，通过英伟达GPU对部分深度学习算法...
生命周期管理FAQ
删除策略之前，如果数据已经转储到低频存储或归档存储，数据仍会继续保存在低频存储或归档存储中，并将按照低频存储或归档存储的费用收取存储费用。如果您是想将存储至低频存储或归档存储中的数据取回通用型NAS存储空间，请参见 创建数据...
单位换算函数
查询和分析语句*|select convert_data_size(format_data_size(body_bytes_sent,'KB'))查询和分析结果 format_data_size函数 format_data_size函数用于对Byte单位进行换算，返回使用指定单位表示的数据量。语法 format_data_size(x,unit)...
基础数据操作
创建时序表后，您可以通过PutTimeseriesData接口或者时序Writer工具写入时序数据，您还可以迁移 MySQL或 Kafka数据源的数据到表格存储时序表。时序数据写入到时序表后，您可以使用QueryTimeseriesMeta接口检索时间线以及使用...
E-MapReduce数据迁移
本文介绍如何将E-MapReduce HDFS上的数据迁移到 文件存储 HDFS 版 文件系统。背景信息 阿里云E-MapReduce是构建在阿里云云服务器ECS上的开源Hadoop、Spark、Hive、Flink生态大数据PaaS产品。提供用户在云上使用开源技术建设数据仓库、离线...
使用二级索引读取数据
表格存储 提供了单行读取和范围读取的查询方式用于读取索引表中数据。当返回的属性列在索引表中时，您可以直接读取索引表获取数据，否则请自行反查数据表获取数据。前提条件 已初始化Client。具体操作，请参见 初始化Client。已创建二级...
CPFS并行文件存储
CPFS并行文件存储 提供高性能计算文件存储，支持标准的POSIX和MPI-IO协议，自带的高性能计算程序无需任何接口适配和性能优化即可高效执行，满足高性能文件存储需求。产品架构 CPFS并行文件存储 是针对高性能和超大规模存储场景推出的文件...
准备工作
步骤一：预估迁移数据 预估需要迁移的数据，包括迁移存储量和迁移文件个数。您可以在又拍云管理控制台页面，查看待迁移的存储量和对象（文件）数量。说明 为保证您数据的正常迁移，您需要在 步骤三：创建迁移任务 时正确填写存储量与对象...
功能概述
表格存储 面向海量结构化数据提供Serverless表存储服务，适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。基本概念 在使用 ...
主要类型
闪电立方类型 数据量 尺寸（高x宽x深，单位：毫米）重量（KG）机架空间 网络能力 电源工作功率（单位：瓦）微型闪电立方 小于等于20 TB的数据量迁移 59Hx180Wx247D 2.5 1U 10GbE*2 RJ45 40 闪电立方II 小于等于100 TB的数据量迁移 420H x ...
创建订单
上云后用户自行通过 在线迁移 或 ossutil 工具迁移数据到NAS。如为同Region并使用内网，过程中会产生OSS暂存的费用和Request请求的费用，如使用公网，则会产生额外的外网下行流量费用。关于OSS费用的详细信息，请参见 计费概述。选择云上...
创建订单
上云后用户自行通过 在线迁移 或 ossutil 工具迁移数据到NAS。如为同Region并使用内网，过程中会产生OSS暂存的费用和Request请求的费用，如使用公网，则会产生额外的外网下行流量费用。关于OSS费用的详细信息，请参见 计费概述。选择云上...
创建存储空间
在上传文件（Object）到OSS之前，您需要创建一个用于存储文件的存储空间（Bucket）。存储空间具有各种配置属性，包括访问权限、存储类型等。您可以根据实际需求，创建不同类型的存储空间来存储不同的数据。注意事项 创建存储空间本身不收取...
现代IM系统中的消息系统—模型
本章节主要介绍表格存储（Tablestore）的Timeline模型基本功能以及核心组件，并且会通过IM消息系统场景，介绍如何基于Timeline实现IM场景下消息同步、存储和索引等基本功能。Timeline模型 Timeline模型以简单为设计目标，核心模块主要包括...
逻辑解码的例子
lsn|xid|data-+-+-0/BA5A688|10298|BEGIN 10298 0/BA5A6F0|10298|table public.data:INSERT:id[integer]:1 data[text]:'1' 0/BA5A7F8|10298|table public.data:INSERT:id[integer]:2 data[text]:'2' 0/BA5A8A8|10298|COMMIT 10298(4 rows)...
安装目录
本文主要说明阿里云数据库存储服务DBFS创建后的安装目录。DBFS安装目录说明：DBFS服务申请成功后，将会在用户的ECS中创建“/opt/dbfs/”目录，请用户务必不要删除此目录：/opt/dbfs/app/：DBFS服务二进制软件目录。opt/dbfs/data/：DBFS...
使用通道服务消费...data is already trimmed or does ...
现象 使用通道服务消费数据时出现如下错误：[ErrorCode]:OTSTunnelServerUnavailable,[Message]:OTSTrimmedDataAccess Requested stream data is already trimmed or does not exist.原因 长时间未拉取数据，Stream日志过期。说明 Stream...
对象存储OSS
存储类型 OSS提供标准存储、低频访问存储、归档存储、冷归档存储和深度冷归档存储多种存储类型，全面覆盖从热到冷的各种数据存储场景。存储类型 说明 标准存储 提供高可靠、高可用、高性能的对象存储服务，能够支持频繁的数据访问。适用于...
准备工作
步骤一：创建目标存储空间 创建目标存储空间，用于存放迁移的数据。具体操作，请参见 创建存储空间。步骤二：创建用于迁移数据的RAM用户 为了保证数据安全，推荐您创建RAM用户并按照最小权限原则对该RAM用户进行授权后用于迁移数据。登录 ...
性能优化指导原则
将OSS和ECS配置在同一地域 OSS存储空间名称是全局唯一的，您在创建存储空间时必须指定地域，且创建以后不能更改名称和地域。为了优化性能，我们建议您尽可能从同一阿里云地域中的ECS实例访问OSS存储空间，从而降低网络延迟和数据传输成本。...
生命周期管理概述
全部数据存储在低频存储或归档存储节省的存储费用（费用A）读写低频存储或归档存储中的数据产生的流量费用（费用B）（通用型NAS存储单价-低频存储单价或归档存储）×预估存储容量 文件存储NAS的存储单价，请参见 文件存储NAS产品定价。...
文件系统存储类型
存储类型 通用型NAS文件系统提供了为实现低成本存储而设计的不同存储类型，分别为标准存储、低频存储和归档存储。标准存储：提供高可靠、高可用、高性能的文件存储服务，适用于存储频繁访问的热数据。在创建文件系统后，文件系统数据首先...
存储空间概览
您可以在每个存储空间（Bucket）的概览页查看您对应Bucket的使用情况，包括存储量、访问流量、访问域名等。基本信息 基本信息区域清晰地展示了当前Bucket的信息，包括Bucket的创建时间、Bucket级别的功能设置情况，例如是否开通版本控制、...
Kafka数据接入
通过创建Tablestore Sink Connector，将 云消息队列 Kafka 版 实例的数据源Topic导出到 表格存储（Tablestore）。前提条件 云消息队列 Kafka 版 已为实例开启Connector。具体操作，请参见 开启Connector。已为实例创建数据源Topic。更多...
准备工作
步骤一：预估迁移数据 预估需要迁移的数据，包括迁移存储量和迁移文件个数。您可以在AWS S3管理控制台页面，查看待迁移的存储量和对象（文件）数量。说明 为保证您数据的正常迁移，您需要在 步骤三：创建迁移任务 时正确填写存储量与对象...
- 产品推荐
- 这些文档可能帮助您