本文介绍如何通过选择已有表新建数据集。前提条件 已创建云计算资源,并通过查看云计算资源的物理表更新缓存表。具体操作,请参见 新建计算资源。背景信息 新建数据表支持的计算资源类型有MaxCompute、Hive、RDS MySQL、*ADB MySQL 2.0。...
创建图表引用的数据集(下文称为数据集A),该数据集用来展示每日新增的数据源表数据,表名用占位符形式填写,并在参数设置中设置默认表名month1。创建一张数据源表,存储每日新增的表名称,并以此表创建数据集(下文称为数据集B)。通过...
概述 Quick BI中MaxCompute新建的数据表,在Quick BI不存在。详细信息 MaxCompute元数据确实是离线再同步的,每两小时同步一次。适用于 Quick BI
问题描述 数据准备新建表提示“CREATE TABLE is not supported for current instance”。问题原因 Hologres数据源共享集群实例不支持创建内部表,只允许创建外表。解决方案 切换数据源,或切换为Hologres独享资源实例。更多信息 参考文档:...
问题描述 在Quick BI中新建 impala数据源连通后,查看数据源时,发现展示不到数据表信息。问题原因 在数据源处用自定义SQL创建数据集查看数据表时发现报错:null:INTERNAL:org.apache.hive.service.cli.HiveSQLException:User"does not ...
问题描述 用户创建MongoDB数据源,报错。问题原因 在启动Mongosqld服务,schemaRefreshIntervalSecs的Schema_refresh时间设置的过长。此参数为同步MongoDB中Database、collections信息到内存中的间隔时间。解决方案 重新设置...
问题描述 Dataphin数据集成新建字段,获取当前时间将时间写入到目标表,任务运行成功后,查询目标表该字段数据显示为空。问题原因 Dataphin仅支持MaxCompute 1.0 的数据类型,目标字段的数据类型是DATE不支持。解决方案 将目标字段类型切换...
步骤四:配置元表属性 完成元表创建后,单击右侧 属性 按钮,可以配置元表 基本信息、元表参数、引用信息 和修改 调试测试 数据表。配置项 参数 描述 基本信息 元表名称 默认为所创建的元表名称,不支持修改。数据源 默认为所创建的数据源...
步骤四:配置元表属性 完成元表创建后,单击右侧 属性 按钮,可以配置元表 基本信息、元表参数、引用信息 和修改 调试测试 数据表。配置项 参数 描述 基本信息 元表名称 默认为所创建的元表名称,不支持修改。数据源 默认为所创建的数据源...
通过计算任务的方式新建目标表 在数据 开发 页面,按照下图操作指引,进入单击 计算任务 页面。在 计算任务 页面,单击 图标 后,选择 MAX_COMPUTE_SQL。在 计算任务 页面,单击 图标 后,选择 HIVE_SQL。编写并运行代码。在 新建MAX_...
数据集或仪表板图表的新建字段中只能处理表查询出来的字段,同环比数据不是表查询出来的,而是Quick BI根据表查询出来的数据加工计算而来。解决方案 方案一:SQL创建数据集,在SQL编辑同环比逻辑。例如:select xxx.id,xxx.a字段,xxx.b...
通过手动新建逻辑表,建立您期望的数据表样式和字段,并支持将逻辑表物理化至云计算资源中,为后续的表加工和使用做基础。本文介绍如何手动新建逻辑表。前提条件 已新建目录,具体操作,请参见 新建模型目录。操作步骤 登录 数据资源平台...
您可以单击右侧的 一键建表 新建数据表,也可以单击 数据预览 进行确认。写入模式 当前仅支持配置为 重放(replay),即以行为单位更新数据。字段映射 单击 字段映射,设置源端和目标端字段的映射。同步任务会根据字段的映射关系同步数据。...
如果您需要新建表,请单击 一键建表 后,在 新建数据表 对话框中,配置各项参数。参数 描述 表名称 实时同步写入的MaxCompute表的名称。生命周期 实时同步写入的MaxCompute表的生命周期长度,详情请参见 生命周期。数据字段结构 实时同步...
您可以单击右侧的 一键建表 新建数据表,也可以单击 数据预览 进行确认。动态时间分区 当Hologres表为分区表时,您需要设置动态时间分区。该动态时间分区会解析来源映射字段的数据值,根据 yyyymmdddhhmmss 的格式解析。解析后,您可以在...
新建数据表 跨项目克隆功能无法克隆您的表结构,因此您需要手动新建表。对于非分区表,建议使用如下语句迁移表结构。create table table_name as select*from 源库MaxCompute项目.表名;对于分区表,建议使用如下语句迁移表结构。create ...
新建数据表 跨项目克隆功能无法克隆您的表结构,因此您需要手动新建表。对于非分区表,建议使用如下语句迁移表结构。create table table_name as select*from 源库MaxCompute项目.表名;对于分区表,建议使用如下语句迁移表结构。create ...
如何可视化新建数据表。数据质量监控 通过 DataWorks数据质量 模块,对周期性ETL(Extract Transformation Load)操作过程中产生的脏数据进行监控,监控不通过则阻断任务执行,避免影响扩大。学习如何基于DataWorks为任务产出的表,配置...
如何可视化新建数据表。数据质量监控 通过 DataWorks数据质量 模块,对周期性ETL(Extract Transformation Load)操作过程中产生的脏数据进行监控,监控不通过则阻断任务执行,避免影响扩大。学习如何基于DataWorks为任务产出的表,配置...
通过手动新建逻辑表,建立您期望的数据表样式和字段,并支持将逻辑表物理化至云计算资源中,为后续的表加工和使用做基础。本文介绍如何手动新建逻辑表。前提条件 已新建目录,具体操作,请参见 新建模型目录。操作步骤 登录企业数据智能...
在DataWorks上新建数据表,用于存储迁移的JSON数据。登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发>数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。在 数据开发 页面,鼠标悬停至 图标,单击 新建表>表。在 新建表 ...
在DataWorks上新建数据表,用于存储迁移的JSON数据。登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据建模与开发>数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。在 数据开发 页面,鼠标悬停至 图标,单击 新建...
创建业务流程 步骤二:新建数据表 DataWorks支持使用可视化方式创建表,并以目录结构在界面展示。同时,支持对创建的表执行相关管理操作。进行数据开发前,您需先在引擎创建用于存放原始数据的表、接收数据清洗结果的表。具体创建哪种类型...
直接在OSS存储中新建数据表/索引/物化视图。方式一:CREATE时指定TABLESPACE OSS。CREATE TABLE tblname(.)TABLESPACE OSS;CREATE TABLE tblname(.)TABLESPACE OSS as SELECT.;CREATE INDEX idxname ON tblname(columnname)TABLESPACE OSS;...
直接在OSS存储中新建数据表/索引/物化视图。方式一:CREATE时指定TABLESPACE OSS。CREATE TABLE tblname(.)TABLESPACE OSS;CREATE TABLE tblname(.)TABLESPACE OSS as SELECT.;CREATE INDEX idxname ON tblname(columnname)TABLESPACE OSS;...
即 REPLACE INTO 写入 同步示例 创建ADS实例和表结构在ADS管控台中创建ADS实例和数据表 建立DataHub Topic在DataHub中建立Topic,示例中为TUPLE类型topic,schema如下图所示:3 建立同步任务这里写入模式选择IGNORE,导入所有字段 4 向...
即 REPLACE INTO 写入 同步示例 创建MySQL实例和表结构在MySQL管控台中创建MySQL实例和数据表 建立DataHub Topic在DataHub中建立Topic,示例中为TUPLE类型topic,schema如下图所示:建立同步任务这里写入模式选择IGNORE,导入所有字段 向...
通过DDL方式新建模型,完成模型ods_base_yhkh_demo_di 的创建,为保证操作的顺利,请大家将逻辑表名称中“demo”换成各自自定义的名称,方便查看并且不和其他人的混淆,互不干扰。本文介绍如何通过DDL方式新建逻辑表。前提条件 已新建工作...
本文为您介绍如何创建数据工作站项目空间,并添加数据库、表。步骤一:创建并进入项目空间 登录 数据管理DMS 5.0。单击控制台左上角的 图标,选择 全部功能>集成与开发(DTS)>数据工作站。说明 若您使用的是非极简模式的控制台,请在顶部...
在 导入数据 步骤中,配置数据表字段的映射关系。映射关系:同行映射:即按相同行数一一对应进行绑定为映射关系。同名映射:即按相同名称一一对应进行绑定为映射关系。导入文件数据列:支持设置为数据列、空值NULL或固定值。单击 开始导入...
在 导入数据 步骤中,配置数据表字段的映射关系。映射关系:同行映射:即按相同行数一一对应进行绑定为映射关系。同名映射:即按相同名称一一对应进行绑定为映射关系。导入文件数据列:支持设置为数据列、空值NULL或固定值。单击 开始导入...
步骤一:新建虚拟维度逻辑表 请参见 数据开发入口,进入数据开发页面。在数据 开发 页面,按照下图操作指引,进入 新建维度逻辑表 对话框。在 新建维度逻辑表 对话框,配置参数。参数 描述 业务对象 选择 虚拟对象。表类型 业务对象选择 ...
步骤一:新建虚拟维度逻辑表 请参见 数据开发入口,进入数据开发页面。在数据 开发 页面,按照下图操作指引,进入 新建维度逻辑表 对话框。在 新建维度逻辑表 对话框,配置参数。参数 描述 业务对象 选择 虚拟对象。表类型 业务对象选择 ...
步骤一:新建枚举维度逻辑表 在Dataphin首页,单击顶部菜单栏的 研发,进入数据 开发 页面。按照下图操作指引,进入 新建维度逻辑表 对话框。在 新建维度逻辑表 对话框,配置参数。参数 描述 业务对象 选择 枚举对象。表类型 业务对象选择 ...
步骤一:新建枚举维度逻辑表 请参见 数据开发入口,进入数据开发页面。在数据 开发 页面,按照下图操作指引,进入 新建维度逻辑表 对话框。在 新建维度逻辑表 对话框,配置参数。参数 描述 业务对象 选择 枚举对象。表类型 业务对象选择 ...
如果事实逻辑表中没有定义主键,则度量字段支持从来源主表及其他数据表中选取。在上述创建的事实逻辑表的配置页面,单击 从建表语句引入。在 从建表语句引入 对话框,填写建表语句并单击 解析SQL。在字段列表选择您需要的字段,并单击 添加...
如果事实逻辑表中没有定义主键,则度量字段支持从来源主表及其他数据表中选取。在上述创建的事实逻辑表的配置页面,单击 从建表语句引入。在 从建表语句引入 对话框,填写建表语句并单击 解析SQL。在字段列表选择您需要的字段,并单击 添加...
本文为您介绍如何为汇总逻辑表新建注册上挂标签。前提条件 完成派生指标的创建,详情请参见 创建派生指标。操作步骤 登录 Dataphin控制台。在Dataphin控制台页面,选择工作区地域后,单击 进入Dataphin>>。在Dataphin首页,单击顶部菜单栏...
本文为您介绍如何新建、查看、编辑和删除值班表等。背景信息 如果值班表被离线计算、实时计算、资产质量、数据服务模块引用时,则系统不支持删除。新建值班表 在Dataphin首页,单击页面右上角的 图标。按照下图指引,进入 新建 值班表 ...
表管理数据地图表结构未更新 新建表在数据地图找不到 数据集成搜不到新建的表 当前表业务逻辑变更如何通知下游?您可以通过 数据地图表详情 页的 血缘信息>影响分析 中批量以邮件方式告知下游相关责任人。哪些类型的Hive表支持在数据地图中...