使用Raft-RocksDB-Tablestore作为存储后端

参数 描述 示例 namespace.backend.raft.async.ots.enabled 是否开启OTS异步上传,包括:true false true namespace.backend.raft.recovery.mode 是否开启从OTS恢复元数据,包括:true false false 重启集群。单击上方的 集群管理 页签。在...

数据目录

什么是数据目录(Catalog)数据目录(Catalog)是数据湖构建(Data Lake Formation)的元数据最上层实体,它可以包含多个数据库。适用场景 主要适用于元数据隔离的场景,比如多个E-MapReduce集群,每个集群绑定不同的Catalog,每个EMR集群...

EMR元数据迁移DLF最佳实践

通过EMR+DLF数据湖方案,可以为企业提供数据湖内的统一的元数据管理,统一的权限管理,支持多源数据入湖以及一站式数据探索的能力。本方案支持已有EMR集群元数据库使用RDS或内置MySQL数据库迁移DLF,通过统一的元数据管理,多种数据源入湖...

EMR元数据迁移到数据湖构建(DLF)

本文为您介绍如何将Hive MetaStore存储在MySQL、RDS中的元数据迁移到DLF中,并介绍如何在EMR集群中配置使用DLF作为数据湖统一元数据。适用场景 从其他大数据集群迁移到阿里云E-MapReduce产品。从阿里云EMR老集群(MySQL做元数据),整体...

新功能发布记录

资产类目 全面优化表详情 优化 在新版表详情中展示了表的技术元数据(所属库实例、表名、字段等)、业务元数据(表业务描述、表标签等)及管理元数据(表Owner、数据权限等),并提供表的部分快捷操作。您可以在表详情中,全面地了解并高效...

MySQL连接器

通用配置属性 通过配置下列属性,可以将来自数据源的数据类型映射到Presto的数据类型,以及可以在Presto中缓存元数据。属性 描述 unsupported-type-handling 配置如何处理不支持的数据列类型。取值如下:IGNORE(默认值):列不可访问。...

现代IM系统中的消息系统—实现

功能:元数据管理 元数据是指描述数据数据,此处主要体现为用户元数据和会话元数据两类。此处群的元数据信息包括群ID(复用群的timelineId)、群名称、创建时间等信息,可以直接基于timelineMeta的管理表完成实现,所有Group类型的...

数据湖管理FAQ

元数据发现相关问题 为什么配置了信息发现,并在“手动执行”之后,过了几天新的数据看不到了?OSS数据源配置数仓模式和自由模式的差异以及适用场景是什么?为什么Excel导出的CSV文件没有被识别建表?为什么一个目录下面是同样Schema的...

2023年12月26日V5.17产品更新公告

数据问答(基于数据库对接):支持添加近似查询的误差范围 功能入口:登录智能对话机器人产品控制台,选择知识中心>数据问答>元数据管理,单击有关元数据表格右侧“编辑”按钮后,再单击有关字段右侧“编辑”按钮即可进行对应字段相似查询...

版本发布记录

数据备份 2023年03月 功能名称 描述 相关文档 预约重启集群 新特性 云数据库ClickHouse 社区兼容版 集群支持预约重启集群。社区兼容版重启实例 标签管理 新特性 云数据库ClickHouse 社区兼容版 集群支持标签管理。标签管理 ZooKeeper配置 ...

管理MySQL Catalog

是 catalog.table.metadata-columns 指定获取数据表时,表的Schema需要添加MySQL CDC源表的 元数据 列。多个元数据列使用英文分号;分隔,例如:op_ts;table_name;database_name。默认不添加元数据列。说明 仅实时计算引擎VVR 6.0.5及以上...

标准版升级至企业版

背景介绍 随着业务的高速发展,PolarDB-X 标准版用户可能会遇到单机数据库瓶颈,例如单表过大导致查询效率下降、高并发查询导致数据库长期处于高负载状态、无法满足分析型需求等,此时对数据库做垂直升配,已经无法解决问题,且性价比不高...

错误编码:HSF-0077

问题描述 HSF向Redis汇报元数据失败,提示HSF-0077错误码。问题原因 该问题一般是由于Redis服务器不稳定或连接时网络环境异常造成。解决方案 该异常不影响HSF服务的发布、订阅和调用,可忽略,或参考以下方法处理:您可以查看Redis服务器...

管理共享

数据下载 反向同步或极速同步默认会同步元数据,使用数据下载可以下载指定路径目录文件数据或全量数据至本地客户端。当开启 反向同步 或开启 极速同步 时,可以选择 是 开启 数据下载。说明 数据下载要求缓存盘容量大于所需复制文件总大小...

2024年

2024-02-01 开通审计日志 更改审计日志设置 关闭审计日志 2024年01月 功能名称 功能描述 发布时间 相关文档 MongoDB 7.0 新特性 云数据库 MongoDB 版 发布了MongoDB 7.0版本,该版本新增了可查询加密、分片元数据一致性校验、查询采样、...

审计日志

日志字段 字段名称 描述 样例 log_time 日志记录时间,包含日期和时间。2021-09-06 16:23:16 date 日志产生的日期。2021-09-06 time 日志产生的时间。16:23:16.062 event_id 事件ID。0520D29C-1834-5A06-B711-4A5AE132C894*event_name 事件...

HDFS概述

基本概念 名称 描述 NameNode 用于管理文件系统的命名空间、维护文件系统的目录结构树以及元数据信息,记录写入的每个数据块(Block)与其归属文件的对应关系。此信息以命名空间镜像(FSImage)和编辑日志(EditsLog)两种形式持久化在本地...

创建TDH Inceptor计算源

参数 描述 数据库类型 选择Inceptor的元数据库类型。系统支持选择 MySQL 5.6/5.7、MySQL 8、MySQL 5.1.43。JDBC URL 填写对应元数据库的连接地址,格式为 jdbc:postgresql:/{连接地址}:{端口}/{数据库名称}。用户名、密码 填写登录元数据库...

客户端加密

OSS客户端加密是在数据上传至OSS之前,由用户在本地对数据进行加密处理,确保只有密钥持有者才能解密数据,增强数据在传输和存储过程中的安全性。免责声明 使用客户端加密功能时,您需要对主密钥的完整性和正确性负责。因您维护不当导致主...

Block模式使用说明

Block模式提供了最为高效的数据读写能力和元数据访问能力。数据以Block形式存储在后端存储OSS上,本地提供缓存加速,元数据则由本地Namespace服务维护,提供高效的元数据访问性能。本文主要介绍JindoFS的Block模式及其使用方式。背景信息 ...

使用独立的Trino集群

创建完独立的Trino集群后,您需要进行以下配置:配置连接器 可选:配置数据元数据 如果数据集群的元数据选择的不是 数据元数据,则可以忽略此配置。配置连接器 在待使用的连接器中配置查询对象。本文以Hive连接器为例介绍。进入集群...

Block模式使用说明

Block模式提供了最为高效的数据读写能力和元数据访问能力。数据以Block形式存储在后端存储OSS上,本地提供缓存加速,元数据则由本地Namespace服务维护,提供高效的元数据访问性能。本文主要介绍JindoFS的Block模式及其使用方式。背景信息 ...

Block模式使用说明

Block模式提供了最为高效的数据读写能力和元数据访问能力。数据以Block形式存储在后端存储OSS上,本地提供缓存加速,元数据则由本地Namespace服务维护,提供高效的元数据访问性能。本文主要介绍JindoFS的Block模式及其使用方式。背景信息 ...

Block模式使用说明

Block模式提供了最为高效的数据读写能力和元数据访问能力。数据以Block形式存储在后端存储OSS上,本地提供缓存加速,元数据则由本地Namespace服务维护,提供高效的元数据访问性能。本文主要介绍JindoFS的Block模式及其使用方式。背景信息 ...

Block模式使用说明

Block模式提供了最为高效的数据读写能力和元数据访问能力。数据以Block形式存储在后端存储OSS上,本地提供缓存加速,元数据则由本地Namespace服务维护,提供高效的元数据访问性能。本文主要介绍JindoFS的Block模式及其使用方式。背景信息 ...

Block模式使用说明

Block模式提供了最为高效的数据读写能力和元数据访问能力。数据以Block形式存储在后端存储OSS上,本地提供缓存加速,元数据则由本地Namespace服务维护,提供高效的元数据访问性能。本文主要介绍JindoFS的Block模式及其使用方式。背景信息 ...

Block模式使用说明

Block模式提供了最为高效的数据读写能力和元数据访问能力。数据以Block形式存储在后端存储OSS上,本地提供缓存加速,元数据则由本地Namespace服务维护,提供高效的元数据访问性能。本文主要介绍JindoFS的Block模式及其使用方式。背景信息 ...

Block模式使用说明

Block模式提供了最为高效的数据读写能力和元数据访问能力。数据以Block形式存储在后端存储OSS上,本地提供缓存加速,元数据则由本地Namespace服务维护,提供高效的元数据访问性能。本文主要介绍JindoFS的Block模式及其使用方式。背景信息 ...

Block模式使用说明

Block模式提供了最为高效的数据读写能力和元数据访问能力。数据以Block形式存储在后端存储OSS上,本地提供缓存加速,元数据则由本地Namespace服务维护,提供高效的元数据访问性能。本文主要介绍JindoFS的Block模式及其使用方式。背景信息 ...

如何修改OSS服务的Object元数据信息

概述 本文主要介绍如何修改OSS服务的Object元数据信息。详细描述 OSS的Object包括很多元数据,如Key值、目录、名称,HTTP头部信息和user自定义元数据。您在上传Object或者在后续使用的过程中可能需要修改对应的数据。可参考如下两种解决...

参数配置

元数据与集群管理相关配置 配置项 默认值 描述 meta_dir StarRocksFe.STARROCKS_HOME_DIR/meta 元数据保留目录。heartbeat_mgr_threads_num 8 HeartbeatMgr中发送心跳任务的线程数。heartbeat_mgr_blocking_queue_size 1024 HeartbeatMgr中...

对象概述

✓ ✓ 管理文件元数据 文件信息是对文件的属性描述,包括HTTP标准属性(HTTP Header)和用户自定义元数据(User Meta)两种。您可以通过设置文件HTTP头来自定义HTTP请求的策略,例如文件缓存策略、强制下载策略等。您还可以通过设置用户...

JindoFS块存储模式使用说明

块存储模式(Block)提供了最为高效的数据读写能力和元数据访问能力。数据以Block形式存储在后端存储OSS上,本地提供缓存加速,元数据则由本地Namespace服务维护,提供高效的元数据访问性能。本文主要介绍JindoFS的块存储模式及其使用方式...

DLF-Auth

DLF-Auth组件是数据湖构建DLF(Data Lake Formation)产品提供的,通过该组件可以开启数据湖构建DLF的数据权限功能,可以对数据库、数据表、数据列、函数进行细粒度权限控制,实现数据湖上统一的数据权限管理。本文为您介绍如何开启DLF-...

专业术语

本文档主要介绍了时序数据库 InfluxDB®版的常见术语。...可以查询WAL中的数据点,并且系统重启后,这些数据不会丢失。在TSDB For InfluxDB®进程启动时,必须在系统接受新的写入请求前,将WAL中的所有数据点flush到存储空间。相关术语:tsm。

全局元数据缓存

全局信息缓存(Global Cache)是 PolarDB PostgreSQL版(兼容Oracle)系列位于共享内存中供所有进程共享的元数据缓存的统称。Global Cache可以让所有进程共享同一个缓存条目,提高内存利用效率,降低因此发生OOM的风险。Global Cache ...

全局元数据缓存

全局信息缓存(Global Cache)是 PolarDB PostgreSQL版 系列位于共享内存中供所有进程共享的元数据缓存的统称。Global Cache可以让所有进程共享同一个缓存条目,提高内存利用效率,降低因此发生OOM的风险。Global Cache 目前包括:Global...

基本概念

例如:ECS实例的创建、停止或重启,OSS存储空间的创建、修改或删除等。资源使用操作:指使用资源的核心功能,所面向的用户一般是组织内的研发员工或应用系统。例如:ECS实例操作系统中的用户操作,OSS存储空间的数据上传或下载。说明 对于...

Apache HDFS透明缓存加速

Apache HDFS透明缓存加速可以利用计算集群的闲置存储资源对远端HDFS集群进行数据缓存,避免了计算集群或服务占用核心集群过多带宽。当HDFS集群和计算集群分离,HDFS集群访问性能不及预期时,您可以通过在计算集群或靠近计算集群的地方缓存...

实现开发生产等多套环境隔离

使用DataWorks进行大数据开发时,支持对开发、测试、生产等环境进行隔离,当您联合使用了其他阿里云产品时,也可根据环境隔离诉求进行对应业务的环境设置与隔离,本文以DataWorks联合EMR、OSS等产品为例,为您介绍如何实现开发生产等多套...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 数据传输服务 云数据库 Redis 版 数据库备份 DBS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用