JINDODATA指标

total_used_disk_cap jindodata_metrics_jindofsx_ns_total_used_disk_cap 缓存数据使用的硬盘总量。单位:Byte。total_used_mem_cap jindodata_metrics_jindofsx_ns_total_used_mem_cap 缓存数据使用的内存总量。单位:Byte。

【功能发布】数据缓存

根据使用ECI方式的差异,相关文档参考如下:功能 ECI控制台或OpenAPI Kubernetes集群 创建数据缓存 创建和管理数据缓存 创建和管理DataCache 使用数据缓存 使用数据缓存创建实例 使用DataCache创建Pod 实践教程 数据缓存实践教程 DataCache...

数据缓存计费

本文介绍数据缓存的计费规则,并给出计费示例。计费说明 数据缓存用于提前拉取业务所需的大量数据(例如训练模型等),以便在创建ECI实例时可以直接挂载使用数据。一个数据缓存对应一个快照,创建和使用数据缓存涉及的计费项及其计费规则...

2022年

本文介绍 PolarDB PostgreSQL版 的产品功能动态,分别为内核小版本、控制台、时空数据库和API的更新说明说明 您可通过如下语句查看 PolarDB PostgreSQL版 的内核小版本的版本号:show polar_version;V1.1.29 时空数据库(V5.1)类别 名称...

2022年

本文介绍 PolarDB PostgreSQL版(兼容Oracle)的产品功能动态,分别为内核小版本、控制台、时空数据库和API的更新说明说明 您可通过如下语句查看 PolarDB PostgreSQL版(兼容Oracle)的内核小版本的版本号:show polar_version;2022年12...

使用Tunnel命令或Tunnel SDK

TableTunnel.StreamRecordPack 数据缓存会话 说明 不同版本的SDK在使用上有差别,详情请参见 SDK Java Doc。使用流式数据通道SDK上传数据的使用案例请参见:简单上传示例 多线程上传示例 异步化IO多线程上传示例 使用Streaming Tunnel SDK...

使用数据缓存创建实例

Volume.N.HostPathVolume.Path String/test/data 取值为数据存储路径,即数据缓存的Path。Container.N.VolumeMount.N.Name String datacache-demo 要挂载到容器的数据卷的名称,对应Volume.N.Name的值。Container.N.VolumeMount.N....

使用EMR

详情请参见 JindoFS缓存模式使用说明。块存储模式(Block)提供了最为高效的数据读写能力和元数据访问能力。数据以Block形式存储在后端存储OSS上,本地提供缓存加速,元数据则由本地Namespace服务维护,提供高效的元数据访问性能。详情请...

数据缓存概述

对于一些数据量较大的业务数据,例如训练模型等,ECI支持创建...使用数据缓存 使用数据缓存创建ECI实例时,将为ECI实例自动创建并挂载一个和数据缓存相同大小的云盘,即除ECI实例费用外,需额外支付云盘费用。更多信息,请参见 数据缓存计费。

数据缓存概述

对于一些数据量较大的业务数据,例如训练模型等,ECI支持创建...使用数据缓存 使用数据缓存创建ECI实例时,将为ECI实例自动创建并挂载一个和数据缓存相同大小的云盘,即除ECI实例费用外,需额外支付云盘费用。更多信息,请参见 数据缓存计费。

执行补数据并查看补数据实例(旧版)

数据可通过补历史或未来一段时间的数据,将写入数据至对应时间分区。代码中的 调度参数,将根据补数据选择的业务时间自动替换为具体值,并结合业务代码将对应时间数据写入指定分区。具体写入的分区与执行的代码逻辑,与任务定义的代码...

雷达图

重要 在画布编辑器中添加BI分析组件时,图层栏内会自动在当前BI组件上方对应生成一个分析器,且需要提前创建数据集以供BI分析组件选择并配置使用,创建数据集和分析器交互使用说明详情,请参见 添加数据集 和 BI分析器交互使用说明。...

管理缓存

云存储网关为每个共享路径提供一个缓存盘,本文介绍如何通过本地文件网关控制台管理缓存,包括添加缓存、删除缓存,缓存盘测速等操作。前提条件 已部署本地文件网关客户端,详情请参见 部署本地网关控制台。已添加磁盘,详情请参见 添加...

ETL工作流快速体验

GitHub十大热门编程语言 DataWorks MaxCompute 函数计算 OSS 数据集成 数据开发 基于GitHub Archive公开数据集,通过DataWorks 数据集成 模块获取过去1小时GitHub中提交次数最多的代码语言数据,在DataStudio 数据开发 模块通过函数计算...

在本地控制台上使用文件网关

缓存模式:本地缓存全量元数据和经常访问的用户数据。OSS侧保持全量数据。反向同步 将OSS上的元数据同步回本地。适用于网关容灾和数据恢复/共享场景。说明 反向同步会扫描Bucket下的所有对象,如果对象数量较多,会产生OSS API请求费用。...

JindoFSx P2P分布式下载配置指南

本文为您介绍P2P分布式下载缓存的使用方法。前提条件 EMR环境:已在E-MapReduce上创建EMR-3.42.0及后续版本、EMR-5.6.0及后续版本的集群,且选择JINDODATA服务,详情请参见 创建集群。非EMR环境:具体请参见 JindoFSx存储加速系统使用指南...

阿里云OSS/OSS-HDFS服务透明缓存加速

JindoFSx存储加速系统提供了透明缓存的使用方式,兼容原生OSS/OSS-HDFS存储方式,文件以对象的形式存储在OSS/OSS-HDFS上,每个文件根据实际访问情况会在本地进行缓存,提升访问OSS/OSS-HDFS的效率,同时兼容了原有OSS/OSS-HDFS文件形式,...

创建和管理数据缓存

本文介绍数据缓存的配置参数以及如何创建、查询、更新、拷贝和删除数据缓存。创建数据缓存 创建方式如下:OpenAPI:调用CreateDataCache接口可以创建数据缓存。更多信息,请参见 CreateDataCache。控制台:在 弹性容器实例控制台 的 数据...

EMR-3.24.x版本说明

Cache模式不仅支持原有用法,还兼容了原有OSS文件系统的使用方式,支持数据缓存和元数据缓存,并可以通过配置分别控制开关(默认均关闭)。优化Block模式和Cache模式读写性能。优化磁盘清理,对本地磁盘上缓存的热数据实现更精确的统计和更...

SmartData 3.0.x版本简介

SmartData组件是EMR Jindo引擎的存储部分,为EMR各个计算引擎提供统一的存储、缓存、计算优化以及功能扩展。SmartData组件主要包括JindoFS,JindoTable和相关工具集。本文介绍SmartData(3.0.x)版本的更新内容。JindoFS存储优化 改进Jindo...

从MongoDB副本集实例迁移至分片集群实例

迁移类型说明 迁移类型 说明 全量数据迁移 将源MongoDB数据库迁移对象的存量数据全部迁移到目标MongoDB数据库中。说明 支持迁移database、collection和index。增量数据迁移 在全量迁移的基础上,将源MongoDB数据库的增量更新数据同步到目标...

应用场景

数据传输服务DTS(Data Transmission Service)支持数据迁移、数据订阅和数据实时同步功能,帮助您实现多种典型应用场景。不停机迁移数据库 传输方式:数据迁移 为了保证数据的一致性,传统的迁移过程需要您在迁移数据时停止向源数据库写入...

从MongoDB副本集实例迁移至分片集群实例

迁移类型说明 迁移类型 说明 全量数据迁移 将源MongoDB数据库迁移对象的存量数据全部迁移到目标MongoDB数据库中。说明 支持迁移database、collection和index。增量数据迁移 在全量迁移的基础上,将源MongoDB数据库的增量更新数据同步到目标...

通用参考:按量付费转包年包月

说明 切换数据集成任务使用的资源组时,请先确认切换后的资源组与数据库网络可连通。若资源组切换后由于网络问题导致任务失败,请参考 配置资源组与网络连通 对资源组进行网络配置。切换任务配置时的默认资源组 您需要进入数据开发界面,在...

迁移MongoDB实例至其他地域

本文介绍如何使用数据传输服务DTS(Data Transmission Service),实现全量数据迁移和增量数据迁移MongoDB副本集实例至其他地域,全量数据迁移MongoDB单节点实例至其他地域。前提条件 源实例类型为单节点实例或副本集实例。如果源实例为分...

迁移MongoDB实例至其他地域

本文介绍如何使用数据传输服务DTS(Data Transmission Service),实现全量数据迁移和增量数据迁移MongoDB副本集实例至其他地域,全量数据迁移MongoDB单节点实例至其他地域。前提条件 源实例类型为单节点实例或副本集实例。如果源实例为分...

镜像缓存概述

创建时将正常拉取镜像,建议您将容器的镜像拉取策略配置为按需拉取(IfNotPresent),以避免镜像层重复下载,影响镜像缓存的使用效果。明确指定 明确指定使用的镜像缓存。该镜像缓存必须为创建完成(Ready)状态。注意事项 单个镜像缓存最...

镜像缓存概述

创建时将正常拉取镜像,建议您将容器的镜像拉取策略配置为按需拉取(IfNotPresent),以避免镜像层重复下载,影响镜像缓存的使用效果。明确指定 明确指定使用的镜像缓存。该镜像缓存必须为创建完成(Ready)状态。注意事项 单个镜像缓存最...

镜像缓存概述

创建时将正常拉取镜像,建议您将容器的镜像拉取策略配置为按需拉取(IfNotPresent),以避免镜像层重复下载,影响镜像缓存的使用效果。明确指定 明确指定使用的镜像缓存。该镜像缓存必须为创建完成(Ready)状态。注意事项 单个镜像缓存最...

跨阿里云账号迁移MongoDB实例

如果您的数据库小版本过期或者不在维护列表内,当执行 实例版本升级、数据迁移、变更实例配置、按备份点将备份数据恢复至新建实例、按时间点将备份数据恢复至新建实例 或 恢复云数据库MongoDB单个或多个数据库 等操作时,为保证提供更出色...

跨阿里云账号迁移MongoDB实例

如果您的数据库小版本过期或者不在维护列表内,当执行 实例版本升级、数据迁移、变更实例配置、按备份点将备份数据恢复至新建实例、按时间点将备份数据恢复至新建实例 或 恢复云数据库MongoDB单个或多个数据库 等操作时,为保证提供更出色...

设置资产数据

本文介绍DataV设置资产数据源的方法,以及 设置数据源 页面的内容,包括数据源、数据过滤器以及数据响应结果等。配置资产数据源 登录 DataV控制台。在 我的可视化 页面,单击您创建的可视化应用项目上方的 编辑 按钮。在画布编辑器页面,...

JindoCache CLI使用说明

jindocache-load-meta-s-R数据缓存:功能说明数据缓存命令可以备份对应路径的数据至本集群的磁盘,以便于后续可以读取本地数据,无需读取OSS等后端上的数据。命令:jindocache-load-data<options><path>涉及以下参数。参数 说明可选参数...

JindoCache概述

他提供了数据缓存和元数据缓存等加速功能,并根据不同的CacheSet提供不同的读写策略,以满足数据湖在不同使用场景下对访问加速的需求。背景信息 CacheSet是JindoCache的缓存抽象。在实际使用中,并非所有的数据都需要缓存加速。考虑到数据...

使用DTS将MongoDB Atlas数据库迁移至阿里云

本文介绍如何使用数据传输服务DTS(Data Transmission Service),将MongoDB Atlas数据库增量迁移至阿里云。DTS支持全量数据迁移和增量数据迁移,同时选择这两种迁移类型可以实现在不停服的情况下,平滑地完成MongoDB Atlas数据库的迁移。...

使用DTS将MongoDB Atlas数据库迁移至阿里云

本文介绍如何使用数据传输服务DTS(Data Transmission Service),将MongoDB Atlas数据库增量迁移至阿里云。DTS支持全量数据迁移和增量数据迁移,同时选择这两种迁移类型可以实现在不停服的情况下,平滑地完成MongoDB Atlas数据库的迁移。...

搭建类似妙鸭相机的应用

根据返回的数据缓存ID调用 DescribeDataCaches 接口查询数据缓存信息,当数据缓存的状态(DataCaches.Status)为Available时,表示可以使用该数据缓存。搭建“妙鸭相机”控制台 在 弹性容器实例控制台 的 容器组 页面,单击创建 弹性容器组...

使用JindoFS加速OSS文件访问

spark.hadoop.fs.jindofsx.data.cache.enable 数据缓存开关。固定值为 true。spark.hadoop.fs.jindofsx.meta.cache.enable 元数据缓存开关:false(默认值):禁用元数据缓存。true:启用元数据缓存。spark.hadoop.fs.jindofsx.client....

通过脚本模式配置离线同步任务

调度参数使用说明请参见 数据集成使用调度参数的相关说明。配置节点调度属性:用于为任务配置阶段使用的变量赋值调度参数,您在上述配置中定义的变量均可以在此处进行赋值,支持赋值常量与变量。配置时间属性:用于定义任务在生产环境的...

通过向导模式配置离线同步任务

使用说明 部分数据源不支持使用向导模式配置离线同步任务,您可以选择数据源后,根据界面提示,若当前数据源不支持向导模式编辑任务,则单击工具栏中的 图标切换至脚本模式继续配置任务。详情请参见 通过脚本模式配置离线同步任务。向导...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 DBS 数据传输服务 云数据库 RDS 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用