管理元数据

参数分区 参数名称 描述 数据配置 元数据名称 填写元数据的名称。命名规则如下:长度不能超过30个字符。允许任何字符。存储类型 存储类型默认为Dataphin的离线计算引擎类型,不支持修改。您也可以查看Dataphin的计算引擎,具体操作请参见...

管理元数据

参数分区 参数名称 描述 数据配置 元数据名称 填写元数据的名称。命名规则如下:长度不能超过30个字符。允许任何字符。存储类型 存储类型默认为Dataphin的离线计算引擎类型,不支持修改。您也可以查看Dataphin的计算引擎,具体操作请参见...

云服务器ECS安全性

凭借配置变更、配置推送、历史版本管理、灰度发布、配置变更审计等配置管理工具,ACM能帮助您集中管理所有应用环境中的配置,降低分布式系统中管理配置的成本,并降低因错误的配置变更造成可用性下降甚至发生故障的风险。更多信息,请参见 ...

创建元数据

参数 描述 数据配置 物理数据表 选择 HBase 0.9.4/1.1.x/2.x 的数据源类型、数据源和需要创建元数据数据表。Rowkey 配置 在读写HBase的数据时,需要通过RowKey字段查询到数据所在的Region及Region下的MemStore和HFile。分隔符 基于业务...

创建元数据

参数 描述 数据配置 物理数据表 选择 HBase 0.9.4/1.1.x/2.x 的数据源类型、数据源和需要创建元数据数据表。Rowkey 配置 在读写HBase的数据时,需要通过RowKey字段查询到数据所在的Region及Region下的MemStore和HFile。分隔符 基于业务...

元数据采集的数据源有白名单访问控制时需要配置的白...

使用限制 目前只支持实例形式配置的数据源,或者连接串形式使用公网地址配置的数据源进行元数据采集,暂不支持通过内网地址配置的数据源进行元数据采集,即 连接串模式 配置数据源的时候暂不支持 JDBC URL 设置为VPC的地址。如果您在元数据...

元数据抽取

输入元数据抽取任务的配置参数,详细参数说明如下:参数配置 字段描述 抽取任务名称 元数据抽取任务的名称,输入为中英文数字和(_)。OSS路径 指定待抽取数据的OSS目录。排除模式 排查指定OSS目录下的文件,支持正则匹配。解析格式 支持...

关于自定义分析

多维即时自定义分析指基于客户端自定义埋点模型的即时分析,主要包括以下部分:事件元数据配置管理 自定义分析模型 自定义分析模式 前端自定义分析报表 其中:事件元数据配置管理:维护当前 App 需要即时分析的各种指标数据,是分析的基础...

基础使用

背景信息 本文以数据元数据为例,详细配置请参见 数据元数据配置。前提条件 已在E-MapReduce控制台上,创建Hadoop的EMR-5.3.0及后续版本的集群,详情请参见 创建集群。使用限制 由于Iceberg的Spark SQL Extensions不适用于Spark 2.4,...

采集管理概述

Quick Tracking采集管理,旨在通过系统提供采集管理相关功能,助力客户高效构建自己业务网站&APP&小程序的流量采集埋点体系、开发测试流程和分析元数据。组织应用管理:包含 组织...用户客户通过分析元数据,管理分析相关的元数据配置信息。

进行角色SSO时阿里云SP的SAML配置

进行角色SSO时,为了建立阿里云对企业IdP的信任,需要将企业IdP元数据配置到阿里云。前提条件 请确保已获取到企业IdP的元数据文档。元数据文档为XML格式,包含IdP的登录服务地址、用于验证签名的公钥及断言格式等信息。操作步骤 使用阿里云...

基本概念

基本概念 说明 Dataphin数据源 配置数据表生成Dataphin数据源。服务单元 对数据表进行统一的元数据配置。应用 消费数据服务(调用API或Dataphin数据源)的权限主体。分组 将数据服务和应用根据特定功能或场景进行分类管理。API服务 集中为...

基本概念

基本概念 说明 Dataphin数据源 配置数据表生成Dataphin数据源。服务单元 对数据表进行统一的元数据配置。应用 消费数据服务(调用API或Dataphin数据源)的权限主体。分组 将数据服务和应用根据特定功能或场景进行分类管理。API服务 集中为...

EMR+DLF数据湖解决方案

步骤六(可选):使用生命周期对数据湖存储进行合理规划,节省存储成本 您可以通过生命周期管理对数据湖中的数据库、数据表配置数据管理规则,可以基于分区/表创建时间、分区/表最近修改时间、分区值三种规则类型,对数据定期进行OSS存储...

华为云 SSO

本文为您介绍如何在 IDaaS 中配置华为云用户单点登录。使用 SSO,您的企业成员可以使用企业账号单点登录华为云,这一过程在华为云中称为联邦身份认证。操作步骤 一、创建应用 登录 IDaaS管理控制台 前往 应用-添加应用-应用市场,搜索到...

通过元数据发现导入至湖仓版

在 OSS数据源 页签,根据页面提示进行参数配置配置说明如下:配置项 参数 说明 数据配置 数仓模式 为“基于OSS而构建的标准数据仓库”的场景构建自动化元数据发现,识别精度高。说明 自由模式暂不支持。OSS目录位置 文件所在OSS中的...

0024-00000505

问题描述 元数据转换任务数量超过了上限。问题原因 您创建的元数据转换任务数量超过了上限。问题示例 该功能为邀测功能,未对全部用户开放,暂不提供示例。解决方案 检查任务是否超过上限,删除不使用的多余任务后重试。相关文档 OSS-HDFS...

Spark批式读写Iceberg

以下是在Spark SQL中使用数据元数据配置,集群版本不同默认的Catalog名称不同,需要配置的参数也不同,具体请参见 数据元数据配置。EMR-3.40及后续版本和EMR-5.6.0及后续版本 sparkConf.set("spark.sql.extensions","org.apache....

0024-00000506

问题描述 元数据转换任务中,Path数量超过了上限。问题原因 您创建的元数据转换任务中,Path数量超过了上限。问题示例 该功能为邀测功能,未对全部用户开放,暂不提供示例。解决方案 检查Path是否超过上限,删除多余的Path任务后重试。相关...

0024-00000501

问题描述 元数据转换请求中的XML格式或参数不正确。问题原因 您发起了元数据转换相关的管理请求,请求中XML格式或参数不正确。问题示例 该功能为邀测功能,未对全部用户开放,暂不提供示例。解决方案 该功能为邀测功能,如果发现此错误,请...

管理Hive Catalog

配置Hive Catalog后,您可以在Flink开发控制台直接读取Hive元数据,无需再手动注册Hive表,提高作业开发的效率且保证数据的正确性。本文为您介绍如何配置Hive元数据、创建和使用Hive Catalog等。背景信息 您可以将Hive Catalog配置文件和...

迁移上云操作

注意事项 云消息队列 RocketMQ 版 迁移工具按照最小范围粒度仅访问源自建集群如下信息:Topic元数据配置信息 Group元数据配置信息 Topic动态路由注册信息 消费者连接信息及消费堆积信息 不会访问源集群其他信息,也不会对源自建集群的配置...

使用AD FS进行用户SSO的示例

规划配置数据。云账号的默认域名:secloud.onaliyun.com 。云账号下包含RAM用户:alice,其完整的 UPN(User Principal Name)为 alice@secloud.onaliyun.com 。创建的Microsoft AD中的AD FS服务名称:adfs.secloud.club。创建的Microsoft ...

初始化

所有数据表的时间线元数据写入到同一个元数据表中,您通过TimestreamDBConfiguration配置元数据表的表名。伴随数据的写入,后台默认不断更新时间线的lastUpdateTime,您可以通过设置TimestreamDBConfiguration中的dumpMeta来控制是否需要...

身份认证和访问控制

限制节点对实例元数据API的访问 ECS实例元数据概述包含了ECS实例在阿里云系统中的信息,您可以在运行中的实例内方便地查看实例元数据,并基于实例元数据配置或管理实例。实例元数据中能够查询到用户使用的云资源和用户数据等敏感信息,若不...

查看规则详情

操作分类 描述 配置时间线 单击 配置时间线,查看该资源的配置时间线。合规时间线 单击 合规时间线,查看该资源的合规时间线。忽略 检测结果 单击 忽略检测结果,忽略目标规则对资源的检测结果。具体操作,请参见 忽略检测结果。在 规则...

阿里云上的Salesforce技术迁移数据手册

避免出现意外的增量数据 按正确顺序迁移元数据数据 在导入前更新元数据,例如为新组织创建/更新用户名/电子邮件,为某些中国相关数据导入新的自定义对象/字段 确定保持数据关系(父项/子项关系)的方法 处理各类特殊数据,如加密数据、...

元数据管理

配置元数据库参数。选择所属数据目录。输入元数据库名称。(选填)输入元数据库描述。输入元数据库的位置。创建元数据表 创建完成元数据库后,选择 创建元数据表。配置元数据表参数。输入数据表的名称。选择所属数据目录。选择数据目录下的...

新功能发布记录

新增 API概览 2019-04-19 功能名称 功能描述 功能类型 相关文档 加密配置 ACM支持加解密数据的大小超过6KB的加密配置。新增 创建和使用加密配置 2019-02-18 功能名称 功能描述 功能类型 相关文档 RAM角色跨账号访问控制台 支持利用RAM角色...

功能概述

配置描述:方便他人理解配置用途。配置标签:配置归类有助于提高配置管理效率。在线编辑多种文件格式:支持语法高亮、语法校验,提升在线编辑效率,减少编辑错误。多语言支持:支持 Java、CPP、Python、Shell、HTTP 的 OpenAPI 调用。高级...

DeployConfiguration

如存在多个标签,以半角逗号分隔 返回数据 名称 类型 示例值 描述 Code String OK 状态码 Message String Success 描述 RequestId String 611CC94A-7711-4873-8848-*请求ID 示例 请求示例 PUT/diamond-ops/pop/configuration HTTP/1.1 公共...

DescribeConfiguration

名称 类型 示例值 描述 Code String OK 状态码 Configuration Struct 配置 AppName String app 配置归属的应用名称 Content String Hello World 配置内容 DataId String com.aliyun.acm.example 配置ID Desc String 测试配置 配置描述 ...

HoloStudio一键迁移至DataStudio

PG管理 HoloStudio中的PG管理会通过DataStudio的 表管理 功能进行替换,但DataStudio表管理中Hologres的元数据来自数据地图的元数据采集器,您需要前往数据地图配置元数据采集器,详情请参见 元数据采集。数据开发迁移 我们会将HoloStudio...

现代IM系统中的消息系统—模型

Meta 用于描述Timeline的元数据,元数据描述采用free-schema结构,可自由包含任意列。Queue 一个Timeline内所有Message存储在Queue内。Message Timeline内传递的消息体,也是一个free-schema的结构,可自由包含任意列。Index 包含Meta ...

新建

步骤四:配置元表属性 完成表创建后,单击右侧 属性 按钮,可以配置元表 基本信息、表参数、引用信息 和修改 调试测试 数据表。配置项 参数 描述 基本信息 表名称 默认为所创建的表名称,不支持修改。数据源 默认为所创建的数据源...

新建

步骤四:配置元表属性 完成表创建后,单击右侧 属性 按钮,可以配置元表 基本信息、表参数、引用信息 和修改 调试测试 数据表。配置项 参数 描述 基本信息 表名称 默认为所创建的表名称,不支持修改。数据源 默认为所创建的数据源...

治理项管理流程

治理项的管理流程如下:元数据管理:配置和管理数据治理所需要的元数据指标。治理项管理:基于元数据指标,配置和管理数据治理所需的规则及判定策略(即治理项)。推送管理:对于单一或多个被治理项规则触发的待治理数据对象(表或任务节点...

治理项管理流程

治理项的管理流程如下:元数据管理:配置和管理数据治理所需要的元数据指标。治理项管理:基于元数据指标,配置和管理数据治理所需的规则及判定策略(即治理项)。推送管理:对于单一或多个被治理项规则触发的待治理数据对象(表或任务节点...

独立RDS元数据

本文介绍如何配置独立的阿里云RDS,作为Databricks数据洞察集群的元数据。前提条件 已购买RDS,详情请参见 创建RDS MySQL实例。说明 本文以MySQL 5.7版本为例介绍。元数据库准备 创建hivemeta的数据库 详情请参见 创建数据库和账号 中的...

使用独立的Trino集群

创建完独立的Trino集群后,您需要进行以下配置:配置连接器 可选:配置数据元数据 如果数据集群的元数据选择的不是 数据湖元数据,则可以忽略此配置。配置连接器 在待使用的连接器中配置查询对象。本文以Hive连接器为例介绍。进入集群...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 云数据库 RDS 云数据库 Redis 版 云服务器 ECS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用