管理Logstore
若配置低频存储时间后选择 自动转换 为 归档存储 时，则数据保存在低频存储层超出配置的保存时间后将自动转入归档存储层。按需配置热存储数据保存时间，并选择后续 自动转换 为 归档存储 时，数据保存超出配置的保存时间后，将自动转入归档...
生命周期管理FAQ
例如：当前目录配置了14天未访问转储低频存储的生命周期管理策略，其父目录或更上层目录配置了60天未访问转储低频存储的生命周期管理策略。那么目录中的14天未访问的文件会被转储至低频存储中，而父目录或更上层目录策略在扫描当前目录时，...
数据集成服务
迁移过程中会使用到MySQL的Reader脚本配置和表格存储的Writer脚本配置，具体数据源配置如下：源数据源：MySQL数据源 目标数据源：Tablestore数据源 同步Oracle数据到表格存储 Oracle数据库中的数据只能迁移到表格存储的数据表中。...
迁移开源HDFS的数据到文件存储 HDFS 版
在迁移集群中配置 文件存储 HDFS 版 实例。具体操作，请参见 挂载文件存储HDFS版文件系统。验证迁移集群和 文件存储 HDFS 版 实例之间的连通性。执行以下命令，在 文件存储 HDFS 版 上创建目录（例如/dfs_links）。hadoop fs-mkdir/dfs_...
使用NAS静态存储卷
说明 若未创建存储卷，您可以设置 分配模式 为 创建存储卷，配置创建存储卷参数。更多信息，请参见 创建PV。已有存储卷 单击 选择已有存储卷，在目标存储卷右侧操作列单击 选择，选择存储卷。总量 所创建存储卷的容量。说明 所创建存储卷...
通过NFS使用NAS静态存储卷
说明 若未创建存储卷，您可以设置 分配模式 为 创建存储卷，配置创建存储卷参数。更多信息，请参见 创建PV。已有存储卷 单击 选择已有存储卷，在目标存储卷右侧操作列单击 选择，选择存储卷。总量 所创建存储卷的容量。说明 所创建存储卷...
通过云存储网关挂载OSS
通过云存储网关挂载OSS，您可以将OSS映射为一个共享的文件存储系统，实现多个用户在不同地点和设备上共享访问OSS数据。挂载完成后，您可以像使用本地文件夹和磁盘一样操作OSS资源。前提条件 已开通 云存储网关服务，并授予访问OSS、ECS及...
资源包抵扣规则
极速型NAS资源包 极速型配置容量 极速型NAS资源包仅抵扣极速型NAS文件系统配置容量，各存储类型配置容量的抵扣系数，请参见 文件存储NAS产品定价页面。CPFS资源包 CPFS配置容量 CPFS资源包仅抵扣CPFS文件系统配置容量，各存储类型配置容量...
开始使用OSS
如果您想要像使用本地文件夹和磁盘那样来使用OSS存储服务，可以通过配置云存储网关来实现。通过云存储网关提供的NFS、SMB（CIFS）、iSCSI协议，OSS的存储资源会以Bucket为基础映射成本地文件夹或者磁盘。您可以通过文件读写操作访问OSS资源...
数据导出到OSS概述
同步表格存储数据到OSS时，离线同步任务中会涉及到配置表格存储相关的Reader插件和OSS相关的Writer插件。相关插件说明如下：表格存储相关的Reader插件 根据数据同步方式不同，要使用的表格存储相关的Reader插件不同。具体说明请参见下表。...
通过控制台使用分析存储
如果要创建自定义分析存储，请打开 高级选项 开关并根据下表说明配置分析存储信息，单击 确定。参数 说明 分析存储名称 分析存储的名称。分析存储的命名规范与时序表的命名规范一致。生命周期 分析存储中数据的过期时间，单位为秒。当系统...
在文件存储 HDFS 版上使用Apache HBase
步骤一：Hadoop集群挂载 文件存储 HDFS 版 实例 在Hadoop集群中配置 文件存储 HDFS 版 实例。具体操作，请参见 挂载文件存储 HDFS 版文件系统。步骤二：配置Apache HBase 将Hadoop中配置的core-site.xml复制到${HBASE_HOME}/conf目录下。cp...
设置生命周期策略
同一个文件或目录支持同时配置低频存储规则和归档存储规则，若同时选择，低频存储管理规则天数必须小于归档管理规则天数。生命周期策略执行优先级 在多条生命周期策略指向相同时间，且文件或目录同时匹配转储操作的情况下，NAS将按照用户较...
开通并配置OSS存储分析
配置OSS存储分析 OSS存储分析依赖于您通过存储清单功能生成的清单文件，需要您配置以下参数，更多配置请参见 配置说明。collect.oss.bucket：被分析的Bucket名称。collect.oss.manifest.dir：清单文件的目录，参照 开通OSS清单功能 中介绍...
云呼录音存储常见问题
包括：每个实例的存储上限配置（同1.0中功能）自主选择存储格式，包括WAV、MKV、MP3（2.0中默认为MP3格式，配置生效前的历史录音仍为WAV）存储空间使用情况监控 此外，还可以通过【批量管理】按钮全局配置（新配置会生效、但不会在这个页面...
使用Fuse-DFS挂载文件存储 HDFS 版
步骤一：Hadoop集群挂载 文件存储 HDFS 版 实例 在Hadoop集群中配置 文件存储 HDFS 版 实例。具体操作，请参见 挂载文件存储 HDFS 版文件系统。步骤二：配置Fuse-DFS 在Hadoop客户端上安装依赖并载入FUSE模块。执行以下命令，安装依赖。yum...
迁移工具
表格存储数据跨实例或者跨账号迁移同步 通过在DataWorks/DataX中配置表格存储相关的Reader和Writer插件，即可以完成表格存储数据表或者时序表的数据复制，如下图所示。表格存储相关的插件说明请参见下表。插件 说明 OTSReader 用于读取表格...
在文件存储 HDFS 版上使用Apache Spark
步骤四：验证Apache Spark配置 使用Spark读取 文件存储 HDFS 版 上面的文件进行WordCount计算，并将计算结果写入 文件存储 HDFS 版。执行以下命令，在 文件存储 HDFS 版 上生成测试数据。hadoop jar${HADOOP_HOME}/share/hadoop/mapreduce/...
生命周期管理概述
全部数据存储在低频存储或归档存储节省的存储费用（费用A）读写低频存储或归档存储中的数据产生的流量费用（费用B）（通用型NAS存储单价-低频存储单价或归档存储）×预估存储容量 文件存储NAS的存储单价，请参见 文件存储NAS产品定价。...
在文件存储 HDFS 版上使用Apache Flink
步骤四：验证Flink配置 使用Flink自带的WordCount.jar对 文件存储 HDFS 版 上的数据进行读取，并将计算结果写入到 文件存储 HDFS 版。在 文件存储 HDFS 版 上生成测试数据。{HADOOP_HOME}/bin/hadoop jar${HADOOP_HOME}/share/hadoop/...
Kafka数据接入
当 存储引擎 选择 Local 存储（当前仅专业版实例支持选择存储引擎类型为Local存储，标准版暂不支持）时，需要配置 日志清理策略。云消息队列 Kafka 版 支持以下两种日志清理策略。Delete：默认的消息清理策略。在磁盘容量充足的情况下，...
在文件存储 HDFS 版上使用Presto
说明 在本文中Presto是通过连接Hive的元数据服务来读取 文件存储 HDFS 版 上的数据，在 文件存储 HDFS 版 上使用Presto时需要额外配置一些依赖包。具体操作，请参见 步骤二：配置Presto。步骤一：Hadoop集群挂载 文件存储 HDFS 版 实例 在...
高级管理FAQ
例如：当前目录配置了14天未访问转储低频存储的生命周期管理策略，其父目录或更上层目录配置了60天未访问转储低频存储的生命周期管理策略。那么目录中的14天未访问的文件会被转储至低频存储中，而父目录或更上层目录策略在扫描当前目录时，...
文件存储 HDFS 版和对象存储OSS双向数据迁移
步骤一：Hadoop集群挂载 文件存储 HDFS 版 实例 在Hadoop集群中配置 文件存储 HDFS 版 实例。具体操作，请参见 挂载文件存储 HDFS 版文件系统。步骤二：Hadoop集群部署JindoSDK 下载最新的 JindoSDK安装包。本文以jindosdk-4.5.0为例。执行...
从HBase Client迁移到Tablestore HBase Client
您必须完成以下四个配置项的配置才能成功访问表格存储。其中 tablestore.client.endpoint 为表格存储的服务地址，tablestore.client.instancename 为表格存储实例名称。tablestore.client.accesskeyid 和 tablestore.client....
CreateTimeseriesTable
analytical_stores TimeseriesAnalyticalStore 否 创建分析存储的配置信息。enable_analytical_store bool 否 是否创建默认分析存储。默认值为true。响应消息结构 message CreateTimeseriesTableResponse { } 使用SDK 您可以使用如下语言的...
使用教程
本文主要为您介绍如何使用Hive或者HadoopMR访问表格存储中的表。数据准备 在表格存储中准备一张数据表pet，name是唯一的一列主键，数据示例请参见下表。说明 表中空白部分无需写入，因为表格存储是schema-free的存储结构，没有值也无需写入...
导出全量数据到OSS
如果要以更低成本备份 表格存储 中的全量数据或者以文件形式导出 表格存储 数据到本地，您可以通过DataWorks数据集成服务将 表格存储 中的全量数据导出到OSS。全量数据导出到OSS后，您可以自由下载文件到本地。注意事项 此功能适用于 表格...
NAS存储卷FAQ
使用NAS存储卷时，提示chown:Operation not permitted 使用NAS动态存储卷时，Controller的任务队列已满且无法创建新的PV NAS存储卷挂载时间延长 使用NAS存储卷时，无法创建或修改目录 当工作负载挂载NAS存储卷时，提示unknown filesystem ...
同步增量数据到MaxCompute
如果需要将 表格存储 中新增和变化的数据定期同步到MaxCompute中备份或者使用，您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现周期性增量数据同步。前提条件 已新增 表格存储 数据源。具体操作，请参见 注意事项。已...
定时备份
使用限制 不支持对低频访问、归档存储、冷归档存储以及深度冷归档存储类型的存储空间配置定时备份。不支持对无地域属性的存储空间配置定时备份。不支持备份和恢复软链接（Symlink）、归档存储、冷归档存储以及深度冷归档存储类型的Object...
在文件存储 HDFS 版上使用Apache Tez
步骤一：Hadoop集群挂载 文件存储 HDFS 版 实例 在Hadoop集群中配置 文件存储 HDFS 版 实例。具体操作，请参见 挂载文件系统。步骤二：安装Tez到Hadoop集群 安装Tez共有三种安装方式，差异点如下。安装方式 说明（推荐）方式一：安装Tez时...
通过控制台使用宽表模型
当 预留读吞吐量 或 预留写吞吐量 大于0时，表格存储 会根据配置为数据表分配和预留相应资源，且数据表创建成功后，将会立即按照预留吞吐量开始计费。当 预留读吞吐量 或 预留写吞吐量 为0时，表格存储 不会为数据表分配和预留相应资源。...
极速型NAS计费
最大配置容量为您购买极速型NAS时配置的容量，以固定容量按小时计费，并非按实际写入数据存储容量计费。按量付费：费用=极速型NAS配置容量*极速型NAS每小时单价 打开 NAS资源包 购买页面，选择极速型NAS资源包。标准极速型NAS：每1 GiB极速...
监听配置
listener ConfigChangeListener 监听器，配置变更进入监听器的回调函数。返回值 参数类型 描述 String 配置值，初始化或者配置变更时通过回调函数返回该值。请求示例 说明 请将代码中的$regionId、$endpoint、$namespace、$accessKey、$...
导出全量数据到MaxCompute
如果需要使用MaxCompute备份 表格存储 数据或者迁移 表格存储 数据到MaxCompute中使用，您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现全量数据导出。全量数据导出到MaxCompute后，您可以使用DataWorks数据分析功能查看...
通过NFS使用NAS动态存储卷
本文介绍如何使用阿里云NAS动态存储卷，以及如何验证NAS存储卷的持久化存储与共享存储特性。前提条件 已创建ACK集群。具体操作，请参见 创建Kubernetes托管版集群。ACK集群中CSI组件已升级至最新版本。更多信息，请参见 管理CSI组件。使用...
文件存储 HDFS 版和数据库MySQL双向数据迁移
步骤一：Hadoop集群挂载 文件存储 HDFS 版 实例 在Hadoop集群中配置 文件存储 HDFS 版 实例。具体操作，请参见 挂载文件系统。步骤二：安装Sqoop 目前Sqoop分为Sqoop1和Sqoop2两个版本，且两个版本并不兼容。本文以Sqoop1的稳定版本Sqoop 1...
OSS配置文件生命周期后未生效的原因分析
概述 您可以通过阿里云对象存储OSS的PutBucketLifecycle接口设置生命周期规则（Lifecycle），生命周期规则可以定期将非热门数据转换为低频访问、归档存储或冷归档存储，将不再需要访问的数据删除，让您更高效地管理您存储的数据，节省大量...
同步增量数据到OSS
如果需要将表格存储中新增和变化的数据定期同步到OSS中备份或者使用，您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现周期性增量数据同步。注意事项 此功能适用于 表格存储 宽表模型和时序模型。宽表模型：导出 表格存储...
- 产品推荐
- 这些文档可能帮助您