产品架构

为了同步正在进行的数据变更,DTS使用两个处理事务日志的模块:事务日志读取模块:日志读取模块从源实例读取原始数据,经过解析、过滤及标准格式化,最终将数据在本地持久化。日志读取模块通过数据库协议连接并读取源实例的增量日志。如果...

管理API权限

如果您已购买了数据服务模块,即可使用API权限。本文为您介绍如何申请和交还API权限。前提条件 已购买数据服务模块,详情请参见 开通Dataphin。申请API权限 在Dataphin首页,单击顶部菜单栏的 管理中心。按照下图指引,进入 API权限申请 ...

操作流程

数据资产分类到对应的目录,包括在数据标准模块设计的指标资产,数据建模模块创建逻辑表并物理化的表资产,在智能标签模块创建标签并上线的标签资产,以及在统一服务模块创建API并上线的API资产。公开资产 将编目后的数据资产公开到数据...

查看资产总览

前提条件 已在数据建模模块关联指标、维度或度量,具体操作,请参见 配置逻辑表关联字段标准。已在数据建模模块创建逻辑表,并物理化。操作步骤 登录企业数据智能平台。在页面左上角,单击 图标,选择 运营。在顶部菜单栏,单击 资产分析。...

操作流程

数据资产分类到对应的目录,包括在数据标准模块设计的指标资产,数据建模模块创建逻辑表并物理化的表资产,在智能标签模块创建标签并上线的标签资产,以及在统一服务模块创建API并上线的API资产。公开资产 将编目后的数据资产公开到数据...

查看资产总览

前提条件 已在数据建模模块关联指标、维度或度量,具体操作,请参见 配置逻辑表关联字段标准。已在数据建模模块创建逻辑表,并物理化。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 运营。在顶部菜单栏,单击 资产...

数据查询与分析管控

DataWorks支持授权某角色或成员,在产品模块拥有指定数据源的查询权限;同时,对查询结果可执行的展示、复制、下载、分享等操作进行权限管控,确保数据操作的安全性。本文为您介绍数据查询与分析管控的相关内容。背景信息 数据查询与分析...

按指标关联

说明 工作组若有创建数据标准、数据源和全局变量,不区分创建方式,默认拉取这3个模块的全量数据导入导出。关联项说明 关联项 说明 逻辑表 对应数据建模中创建的逻辑表。说明 需在数据建模中创建逻辑表,该逻辑表需被生产节点引用。指标 ...

数据中心

数据管理 数据管理模块展示并管理用户添加的数据。主要功能包括数据表引入、本地数据导入。数据表 支持用户从已注册的计算资源类型中添加数据表。支持基于已添加的数据查看表信息、表内展示的字段。支持将已添加的源表数据进行删除。本地...

按单节点关联

说明 工作组若有创建数据标准、数据源和全局变量,不区分创建方式,默认拉取这3个模块的全量数据导入导出。关联项说明 关联项 说明 单节点 对应已经上线的单节点任务。逻辑表 对应数据建模中创建的逻辑表。说明 需在数据建模中创建逻辑表,...

实验介绍

数据加工 使用 DataWorks数据开发(DataStudio)模块,将日志数据通过函数正则等方式拆解为可分析字段,并与用户信息表加工汇总产出基本的用户画像数据,并提交调度系统,结合DataWorks调度参数实现周期性数据清洗操作。学习如下内容:如何...

通用资源

自定义函数 通过自定义函数功能,用户可以自定义ETL(Extract-Transform-Load)函数并管理,自定义函数与公共计算节点相关联,便于一般函数不满足的时候,使用自定义函数快速对数据进行ETL处理,便于在数据开发或者数据标准模块设计中使用...

管理服务单元权限

如果您已购买了数据服务模块,即可基于Dataphin生成API。服务单元对数据表进行统一的元数据配置。在您生成API前,需要对数据表进行统一的元数据配置。如果您需要使用他人的服务单元生成API,则需要申请服务单元的使用权限。前提条件 已购买...

我的主页

数据资源:在数据资源模块,您可以查看数据资源的详情并上传数据。账号管理:在账号管理模块,您可以查看自己的主账号、账号具备的权限以及上次登录的时间。快速入口:在快速入口模块,您可以查看并快速打开近期浏览的4个项目。

快速体验

数据加工 使用 DataWorks数据开发(DataStudio)模块,将日志数据通过函数正则等方式拆解为可分析字段,并与用户信息表加工汇总产出基本的用户画像数据,并提交调度系统,结合DataWorks调度参数实现周期性数据清洗操作。学习如下内容:如何...

我的主页

数据资源:在数据资源模块,您可以查看数据资源的详情并上传数据。账号管理:在账号管理模块,您可以查看自己的主账号、账号具备的权限以及上次登录的时间。快速入口:在快速入口模块,您可以查看并快速打开近期浏览的4个项目。

EMR数据开发停止更新公告

您也可以将数据开发模块迁移至EMR Worflow,迁移详情请参见 EMR旧版数据开发迁移公告。EMR Workflow是一个全托管的工作流和任务调度服务,100%兼容开源Apache DolphinScheduler。它提供了易于使用的调度服务,您可以通过可视化的操作界面...

配置权限助手

数据接入模块依赖于Logstore模块,所以勾选数据接入中的任意一项都会默认勾选Logstore模块。可视化模块依赖于数据查询模块。告警、订阅和数据接入(云产品接入)等模块依赖于数据可视化模块。其中,使用告警和订阅模块时,系统默认配置数据...

概述

HoloStudio的数据开发模块与DataWorks无缝连接,提供一站式稳定高效的ETL(Extract-Transform-Load)服务,帮助您使用可视化方式周期性调度作业、创建外部表、同步外部表数据以及上传本地文件。数据开发 的核心功能如下:文件夹 用于存放并...

管理Dataphin数据源权限

如果您已购买了数据服务模块,即可将Dataphin加工生成的逻辑表或物理表配置为供应用调用的Dataphin数据源。如果您需要调用他人管理的Dataphin数据源,则需要申请Dataphin数据源权限。同时,您也可以交还已获取Dataphin数据源的权限。前提...

添加静态数据

本文档介绍在DataV中添加静态数据文件的方法。...在 设置数据模块中,选择 数据源类型 为 静态数据。将静态数据文件内容粘贴到上图的数据编辑框区域。重要 文件大小需要小于512KB。单击 查看数据返回结果,查看数据源的返回结果样式。

01创建解决方案

数据标准 来源于数据标准模块数据元、数据字典、命名标准、质量函数。说明 质量函数目前只支持展示作用,不会参与导入导出和实例化。数据源 来源于系统设置模块中添加的云计算资源。预期结果 在 方案管理 列表,查看新建的解决方案。单击...

系统流程

我可管理的 展示在数据建模模块创建逻辑表并物理化成功的表资产以及在统一服务模块创建API并上线的API资产。具体操作,请参见 查看我可管理的资产。我已授权的 展示已对外授权的资产,包括表资产和API资产。具体操作,请参见 查看我已授权...

创建项目

DataWorks的数据开发模块支持多人协同开发,所有本项目的成员都可以查看任务代码,且有编辑权限的成员都可以进行修改编辑。因此,无法很好地保密一些核心的敏感度高的代码。有类似高保密性的任务及数据,可以由单独项目的固定成员进行开发...

系统流程

我可管理的 展示在数据建模模块创建逻辑表并物理化成功的表资产以及在统一服务模块创建API并上线的API资产。具体操作,请参见 查看我可管理的资产。我已授权的 展示已对外授权的资产,包括表资产和API资产。具体操作,请参见 查看我已授权...

SDK包裁剪说明

okhttp&okio 否 必选模块,SDK网络请求使用。fastjson 否 必选模块,SDK数据解析使用。oss-android-sdk 是 可选模块,SDK版本大于2.2.7,该模块可不集成。金融级活体人脸验证方案 本部分介绍 金融级活体人脸验证方案 SDK包裁剪情况。模块...

发布中心概述

功能介绍 发布中心由 待发布对象 和 发布记录 组成:在 待发布对象 页面,记录了 集成同步、规范建模 和 数据处理 模块提交的数据对象。您可以单击数据对象操作列下的 图标,发布数据对象至生产环境。在 发布记录 页面,您可以查看数据对象...

发布中心概述

功能介绍 发布中心由 待发布对象 和 发布记录 组成:在 待发布对象 页面,记录了 集成同步、规范建模 和 数据处理 模块提交的数据对象。您可以单击数据对象操作列下的 图标,发布数据对象至生产环境。在 发布记录 页面,您可以查看数据对象...

配置数据表资产目录

背景信息 将数据建模模块中创建的数据表进行编目及公开后,可在发现中查看和申请使用。操作步骤 登录企业数据智能平台。在页面左上角,单击 图标,选择 运营。在顶部菜单栏,单击 资产管理。在左侧菜单栏,选择 系统资产管理>数据表管理,...

配置数据表资产目录

背景信息 将数据建模模块中创建的数据表进行编目及公开后,可在发现中查看和申请使用。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 运营。在顶部菜单栏,单击 资产管理。在左侧菜单栏,选择 系统资产管理>数据表管理...

应用场景

数据建模:通过数据建模模块提供的各种数据开发工具,实现数据的清洗、加工和转换。资产管理:通过资产运营功能实现资产的注册、编目、上架,在资产中心方便各个部门的使用人员搜索数据资源并申请数据权限。价值:数据标准一致:沉淀行业...

数据同步流程

详情请参见 新建数据模块的文档。购买数据同步项目。根据业务需求,购买相应类型的数据同步项目。详情请参见 购买数据同步项目。配置数据同步项目,并在通过预检查后启动项目的运行。详情请参见相应类型的数据同步项目文档。查看数据...

数据迁移流程

详情请参见 新建数据模块的文档。购买数据迁移项目。根据业务需求,购买相应类型的数据迁移项目。详情请参见 购买数据迁移项目。配置数据迁移项目,并在通过预检查后启动项目的运行。详情请参见相应类型的数据迁移项目文档。查看数据...

数据导入概览

从阿里云对象存储OSS导入数据至图数据库GDB实例 图数据库GDB服务端集成有数据导入模块,可以获取您提供的.csv格式的OSS数据文件,并将其解析为图中的点数据和边数据,然后将点数据和边数据导入至图数据库GDB实例。步骤 步骤说明 ① 将需要...

计费方式

配置数据同步实例时 数据同步实例将从 增量数据采集 模块启动后,开始按同步链路规格来计费。数据同步实例暂停期间仍会收取费用。配置数据迁移实例时 如不勾选增量迁移,则不会收取费用。如勾选增量迁移,则数据迁移实例将从增量迁移任务...

空间级模块权限管控

只读:表示该角色只能查看相应模块数据信息,不能修改模块数据。读写:表示该角色可以修改相应模块数据信息。添加空间成员并管理成员角色权限 您可按职能授予RAM用户(子账号)空间级预设角色来控制其是否拥有某功能点权限,由于RAM...

集成与开发概览

DMS的数据集成与开发功能模块,针对数据全生命周期的集成、开发、服务三个阶段提供界面化的功能支持。功能简介 数据集成与开发功能模块支持多种计算、存储引擎,支持结构化、半结构化、非结构化数据的实时集成、离线集成、开发、服务,能够...

EMR旧版数据开发迁移公告

本文为您介绍数据开发模块迁移至EMR Workflow的流程。EMR Workflow是一个全托管的工作流和任务调度服务,100%兼容开源Apache DolphinScheduler。它提供了易于使用的调度服务,您可以通过可视化的操作界面轻松地管理工作流和任务,高效构建...

添加API数据

在 设置数据模块中,选择 数据源类型 为 API。在下方 请求方式 列表中选择一种请求方式,可选择 GET 和 POST 这两种请求方式,具体这两种请求方式的解释说明,请参见 常用的请求方式。在下方 URL 编辑框中,填写需要请求的接口URL路径。...

空间数据管理概览

空间数据管理页面内提供了我的主页、我的项目、我的数据和空间档案四大功能模块,用户可以在这里创建项目,上传数据和添加模型等。本文为您介绍空间数据管理页面的结构与功能,帮助您快速使用空间构建平台。进入空间构建平台 空间构建平台...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 DBS 云数据库 RDS 数据传输服务 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用