数据标准 对应数据标准模块中的数据元、数据字典、命名标准、质量函数。数据源 对应系统设置模块中添加的云计算资源。说明 数据源是拉取当前工作组下所有的云计算资源产生,所以此处展示的数据应与工作组下的云计算资源数量、信息完全一致...
数据标准 对应数据标准模块中的数据元、数据字典、命名标准、质量函数。数据源 对应系统设置模块中添加的云计算资源。说明 数据源是拉取当前工作组下所有的云计算资源产生,所以此处展示的数据应与工作组下的云计算资源数量、信息完全一致...
已在数据标准模块中创建质量校验函数、数据字典和数据元。已在质量评估模块中创建质量检查计划任务。背景信息 将数据建模中创建的数据表进行编目及公开后,可在数据资产中心查看资产详情。操作步骤 登录 数据资源平台控制台。在页面左上角...
已在数据标准模块中创建质量校验函数、数据字典和数据元。已在质量评估模块中创建质量检查计划任务。背景信息 将数据建模中创建的数据表进行编目及公开后,可在数据资产中心查看资产详情。操作步骤 登录企业数据智能平台。在页面左上角,...
自定义表属性、自定义数据元属性等元模型设计。全面、准确的数据质量评估报告 多种类型数据源自定义表及字段质量规则配置。支持自定义SQL质量规则。多维度数据质量评估,可视化质量评估报告。数据资产的管理、服务与敏捷交付,使用数据资产...
单击 图标,即可复制当前选中数据元信息配置内容并新增一个同样配置的数据元信息。单元格 单元格尺寸:设置单元格的宽度和高度。您可单击 打开或关闭 单元格尺寸 设置功能。单击右侧的 或 图标,添加或删除一个宽度或高度信息。单击 或 ...
字段设计需要在数据标准的约束下,通过模型设计过程中引用标准数据元定义,设置逻辑表相关标准质量规则,保证不同的逻辑表设计人员按照统一口径进行操作。数据开发 提供一站式计算节点开发能力,一体化管理数据加工流程的开发、部署、调试...
数据元:表示一个数据的最小信息项,包含基本的描述、值域范围和约束规则。生命周期:指的是表的生命周期,指表(分区)数据从最后一次更新的时间算起,在经过指定的时间后没有变动,则此表(分区)将被数据库(例如:MaxCompute)自动回收...
数据元信息:设置表格中每一行或每一列表头的显示名。单击右侧的 或 图标,添加或删除一个数据元信息。单击 或 图标配置多个数据元信息的排列样式。单元格 单元格尺寸:设置单元格的宽度和高度。您可单击 打开或关闭 单元格尺寸 设置功能。...
每个Page包含Header(数据头)、Item pointer array(指向内部数据的指针数组)、Unused space(未使用空间量)和Tuples(数据元组)。INSERT数据时,会从Page的未使用空间中分配新的Tuple。如果当前Page的未使用空间不足时,会分配新的...
源头数据元信息不确定或变化大,需要⾃动识别和管理;简单的元信息发现功能时效性不够。全量建仓或直连数据库进行分析对源库造成的压⼒较大,需要卸载线上压⼒规避故障。建仓延迟较⻓(T+1天),需要T+10m的低延迟入湖。更新频繁致小文件多...
数据标准:提供逻辑表标准、字段标准(数据元、指标、维度、数据字典等)管理能力。帮助用户通过设计标准数据元素,定义关键业务对象、业务对象属性及值域定义,并规范标准数据字典,制定并管理平台遵循的统一数据标准,帮助平台管理者和...
添加数据的同时支持各类型空间数据的元信息自动解析,支持按空间对平台所有空间数据进行统一检索、统计和管理。数据管理 支持添加单文件、多文件、数据库等多种形态,矢量、栅格、倾斜摄影等多种类型数据,同时可通过上传文件和基于OSS共享...
添加数据的同时支持各类型空间数据的元信息自动解析,支持按空间对平台所有空间数据进行统一检索、统计和管理。数据管理 支持添加单文件、多文件、数据库等多种形态,矢量、栅格、倾斜摄影等多种类型数据,同时可通过上传文件和基于OSS共享...
附录:自动抽样的调试数据 通过本地调试的自动抽样调试任务时,读取的调试数据根据元表的配置决定。详细说明如下:元表属性的 任务调试时默认读取 参数选中 开发表。若任务中使用的是 Project_Name_dev.元表名,则自动抽取开发元表。如果...
附录:自动抽样的调试数据 通过本地调试的自动抽样调试任务时,读取的调试数据根据元表的配置决定。详细说明如下:元表属性的 任务调试时默认读取 参数选中 开发表。若任务中使用的是 Project_Name_dev.元表名,则自动抽取开发元表。如果...
ConfigServer 配置服务器,存储所有数据库元信息(路由、分片)的配置。Mongos本身没有存储,只是将Shard服务器和数据路由信息缓存在其内存里,配置服务器则实际存储(落盘)了这些数据。Mongos第一次启动或者关掉重启就会从ConfigServer...
000元/月 60,000元/月 旗舰版80实例 支持审计的数据库个数:80个 吞吐量峰值:45,000条SQL/秒 850 Mbps数据库流量峰值 20亿条在线SQL语句存储 默认6 TB存储空间,支持弹性扩容存储空间 60,000元/月 85,000元/月 日志存储空间支持扩容,扩容...
更新说明 逻辑表实例 2021年08月24日 离线整库迁移 为了丰富元表的数据来源,支持基于Hologres数据源新建元表为了满足更丰富的场景,Dataphin支持将本地数据中心或在ECS上自建的数据库同步至Hive、MaxCompute、Oracle和AnalyticDB for ...
实时引擎适配功能说明 功能特性 Blink Ververica Flink 适配离线引擎 MaxCompute MaxCompute 自定义数据源 支持 待支持 元表 支持 支持 镜像表 支持 支持 任务调试 支持 支持 测试表 支持 支持 Flink SQL任务 支持 支持 Flink SQL任务粗...
全局一致性 PolarDB-X 是一款分布式数据库,数据存放在多个数据节点(DN)上,当分布式事务存在的情况下,恢复后的实例需要保证多个数据节点间的数据一致性。下图通过转账测试给出了全局一致性的示例:PolarDB-X 中存放了一张用户的账户...
类别 计费项 费用 预留资源 计算预留资源 0.30元/ACU/小时×32 ACU×1小时=9.6元 存储预留资源 0.30元/ACU/小时×24 ACU×1小时=7.2元 弹性资源 按需弹性 0.30元/ACU/小时×2×0.8 ACU×1小时=0.48元 存储空间 热数据存储空间 0.0028元/GB/...
通过选择已注册的数据源端数据和目标端,...前往 数据查询 模块,单击 物理表查询,选择目标端数据源及表“dataq_odps_dev/stg_base_yhkh_demo_df”,在 数据预览 中可查看“stg_base_yhkh_demo_df”表中已写入gz(工资)大于10000元的数据。
实时引擎适配功能说明 功能特性 Blink Ververica Flink 开源Flink 适配离线引擎 MaxCompute MaxCompute Hadoop(CDH5、CDH6、CDP、FusionInsight)TDH 自定义数据源 支持 待支持 待支持 元表 支持 支持 支持 镜像表 支持 支持 支持 任务...
数据查询 模块,单击 物理表查询,选择目标端数据源及表“dataq_odps_dev/stg_base_yhkh_demo_di”,在 数据预览 中可查看“stg_base_yhkh_demo_di”表中已写入zjzdjyrq(最近主动交易日期)为2022-12-13且gz(工资)大于10000元的数据。
元仓共享模型是基于Dataphin...访问元仓共享模型 若您需要访问元仓共享模型,可以通过集成任务将元仓中所需的元仓共享模型的数据表从元仓租户的计算源同步到开发使用的业务租户的计算源中。具体操作,请参见 元数据仓库共享模型标准访问方式。
企业版 V3计费方式简介 公共云 计费项 计费方式 中国内地、马来西亚(吉隆坡)和印度尼西亚(雅加达)定价 中国香港和新加坡定价 说明 数据引入 按量计费 0.24元/GB 0.36元/GB 数据引入到存储(包含采集、传输和写入整个过程)时收取该费用...
若您需访问元仓共享模型,可以通过集成任务将元仓中所需的元仓共享模型的数据表从元仓租户的计算源同步到开发使用的业务租户的计算源中。本文将指导您如何进行配置。操作步骤 创建元仓项目数据源。在业务租户中,将元仓项目的计算源创建为...
元表详情 请参见 搜索数据,进入元表详情页面,编号 描述 ① 概要信息 为您展示表的类型、名称、负责人、描述、标签等信息。同时,您还可以执行如下操作:标签:在 修改资产标签 对话框,输入标签值,128字符以内,单击 确定。每个资产对象...
元表详情 请参见 搜索数据,进入元表详情页面,编号 描述 ① 概要信息 为您展示表的类型、名称、负责人、描述、标签等信息。同时,您还可以执行如下操作:标签:在 修改资产标签 对话框,输入标签值,128字符以内,单击 确定。每个资产对象...
数据订阅实例为包年包月(也称为预付费),订阅实例类型为 MySQL,数据订阅配置费类型为 半价配置费+1元/GB数据流量费,从2020年12月18日开始,DTS会对该订阅实例收取数据流量费。说明 数据流量是指客户端从订阅通道中消费的数据总量,按1...
2021年08月19日 华北2(北京)、华东1(杭州)创建Hologres数据源、新建元表 2021年08月24日 华南1(深圳)2021年08月26日 华东2(上海)数据源权限管控升级,增加对链接地址的查看权限控制,您可以更有效地提升数据源安全性。2021年08月19...
在 OSS数据源 页签,根据页面提示进行参数配置,配置说明如下:参数 说明 数仓模式和自由模式 您可以选择数仓模式或自由模式:数仓模式:为“基于OSS而构建的标准数据仓库”的场景构建自动化元信息发现,识别精度高。OSS路径数据布局要求为...
选择为 半价配置费+1元/GB数据流量费,从2020年12月18日开始,DTS会对该订阅任务额外收取数据流量费用。源实例地域-订阅 选择源数据库所属的地域,购买后不支持更换,请谨慎选择。资源组 选择订阅任务所属的资源组,相关介绍,请参见 什么...
归档备份的数据备份和日志备份按下表收费(不足 1GB 按照 1GB 收费):中国内地 计费项 区域 每小时单价 数据备份 中国内地 0.00010 元/GB 日志备份 中国内地 0.00010 元/GB 亚太和北美地区 计费项 区域 每小时单价 数据备份 中国(香港)...
更新说明 创建Flink SQL任务 新建元表 新建镜像表 新增支持创建补数据任务 新增支持创建补数据任务:支持配置补数据任务,可设置定时补数据或手动触发补数据,以回刷节点范围和业务日期相对规律,确定补数据的场景,减少人工投入。补数据...
创建Flink SQL任务 新建元表 新建镜像表 调度运维 新增支持创建补数据任务:支持配置补数据任务,可设置定时补数据或手动触发补数据,以回刷节点范围和业务日期相对规律,确定补数据的场景,减少人工投入。补数据任务业务日期支持选择最近n...
若您需要通过 AnalyticDB PostgreSQL版 访问外部异构数据源(HDFS、Hive和JDBC)时,可以使用异构数据源访问功能将外部数据转换为 AnalyticDB PostgreSQL版 数据库优化后的格式进行查询和分析。功能说明 外部数据源管理提供高性能的结构化...
8.064元/GB/月 冷存储数据 0.0002元/GB/小时 0.144元/GB/月 按量付费集群的存储价格 计费项 按量付费价格 每月费用估算 ② 热存储数据 云盘等级PL0 0.0011元/GB/小时 0.792元/GB/月 云盘等级PL1 0.0042元/GB/小时 3.024元/GB/月 云盘等级...
展示 数据表异常数、指标-异常规则、数据源异常数 和 实时元表异常数,同时展示与昨日数据的对比结果。您也可以单击显示区域上方的 图标,查看规则校验详情。② 展示 数据表、指标、数据源 和 实时元表 的 规则应用趋势 和 规则异常趋势,...