数据查询
Lindorm宽表引擎在集群管理系统中提供了SQL查询入口，您可以使用SQL语法来查询Lindorm宽表数据。本节介绍通过集群管理系统查询宽表数据。前提条件 已登录目标实例的集群管理系统，具体操作请参见 登录集群管理系统。使用限制 为确保数据...
快速体验
DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力，本文以一个零售电商行业的数仓搭建实验为例，为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现，帮助您深入了解阿里云...
创建IBM DB2数据源
背景信息 IBM DB2是一套关系型数据库管理系统。如果您使用的是IBM DB2，在对接Dataphin进行数据开发时，您需要先完成IBM DB2数据源的创建。更多IBM DB2信息，请参见 IBM DB2官网。权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块...
大屏管理
大屏是数据管理DMS提供的两种可视化应用类型之一，提供自由布局和自定义样式能力，通过可视化组件和一系列内置辅助图形来打造视觉呈现丰富的可视化大屏。大屏的定位与仪表盘不一样，仪表盘倾向于快速打造可视化报表，而大屏通常被广泛用于...
创建IBM DB2数据源
背景信息 IBM DB2是一套关系型数据库管理系统。如果您使用的是IBM DB2，在对接Dataphin进行数据开发时，您需要先完成IBM DB2数据源的创建。更多IBM DB2信息，请参见 IBM DB2官网。权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块...
文档修订记录
QueryPublicModelEngine 2023.10.20 新增功能 上传与下载 DataWorks的上传与下载模块，提供了便捷的数据上传功能，支持将多种来源（例如，本地文件、OSS文件）的数据上传至MaxCompute大数据引擎中进行分析处理及相关管理操作，致力于为您...
资产质量概述
背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求，Dataphin应用场景的多样性及复杂性随之增加。因业务系统的原始数据的规范性无法得以保障，所以Dataphin需要定义数据分析的质量，以满足资产质量的时效性、准确性、完整性、...
资产质量概述
背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求，Dataphin应用场景的多样性及复杂性随之增加。因业务系统的原始数据的规范性无法得以保障，所以Dataphin需要定义数据分析的质量，以满足资产质量的时效性、准确性、完整性、...
宜搭创建大屏实操
本文主要介绍如何使用企业经营管理系统中客户库表及签约表表单数据，来创建并配置企业经营管理大屏。宜搭创建大屏实操视频，请参见：宜搭创建大屏实操视频。创建企业经营管理系统 操作步骤如下：登录宜搭系统，通过空白应用创建名称为 企业...
如何对JSON类型进行高效分析
PolarDB MySQL版 本身是一个关系型数据库管理系统，其存储的数据通常是结构化数据，但也原生支持存储和查询半结构化数据，如XML和JSON格式数据。PolarDB IMCI也全面支持JSON数据类型及其列式函数，采用二进制JSON格式来存储半结构化数据，...
简介
DMS数据分析与应用介绍 DMS通过Data Fabric+大模型构建数据管理底座，赋能数据分析与应用。该场景下核心的四个功能如下：安全托管：DMS在阿里集团数据库权限访问控制最佳实践，为企业提供一系列数据库权限管控的集合，可帮助企业实现多云...
数据源管理
通过控制数据源执行质量规则的并发度，对数据源进行保护，防止影响正常的业务。本文为您介绍如何设置数据源执行质量规则的并发度。前提条件 已创建数据源，...设置完成后，即可在 数据源管理 页面，查看限速生效时段以及最大并行校验规则数。
数据源管理
通过控制数据源执行质量规则的并发度，对数据源进行保护，防止影响正常的业务。本文为您介绍如何设置数据源执行质量规则的并发度。前提条件 已创建数据源，...设置完成后，即可在 数据源管理 页面，查看限速生效时段以及最大并行校验规则数。
什么是Dataphin
可视化的数据资产：系统化构建业务数据资产大图，从数据视角还原业务系统、提取业务数据，快速感知业务关键环节及数据。数据使用简单可依赖：通过主题式数据查询服务，您可以快速查询和访问研发构建的数据逻辑表，简化约80%的查询代码。...
质量规则参数配置
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
质量规则参数配置
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
系统管理
本文为您介绍如何在系统管理中配置SQL查询、数据上传任务所使用的资源组。使用限制 仅支持阿里云主账号访问系统管理页面。系统管理中的配置仅在本租户的当前地域生效，并且您需确保SQL查询、数据上传任务使用的数据源和资源组网络连通。...
新建账号
用户角色 该用户角色为全局角色，包括系统管理员、数据源管理员、安全管理员、质量管理员、跨租户发布使用人、数据标准管理员和标签业务员。添加的成员需要授予全局角色，则 此处选择相应的角色，单个用户支持配置多个角色，详细说明如下：...
基本概念
DMS 数据管理（Data Management Service，简称DMS）是一种集数据管理、结构管理、用户授权、安全审计、数据趋势、数据追踪、BI图表、性能与优化和服务器管理于一体的数据管理服务。更多信息，请参见 什么是数据管理DMS。DTS 数据传输服务...
数据可视化
数据管理DMS 提供灵活布局和丰富的自定义样式能力，并提供大量可视化组件和内置辅助图形，帮助您快速实现可视化大屏。说明 数据可视化功能即将下线，建议您在功能下线前将数据集、图表和仪表盘迁移到数据分析功能。更多信息，请参见【通知...
数据源管理概述
您可以通过自定义标签方式将数据源进行按需归类，有效管理数据源。说明 同步任务不支持生产开发双环境，同步任务中的数据源读写均为生产数据源。数据源管理入口 在Dataphin首页，单击顶部菜单栏 管理中心。在 管理中心 页面，单击 数据源...
数据源管理概述
您可以通过自定义标签方式将数据源进行按需归类，有效管理数据源。说明 同步任务不支持生产开发双环境，同步任务中的数据源读写均为生产数据源。数据源管理入口 在Dataphin首页，单击顶部菜单栏 管理中心。在 管理中心 页面，单击 数据源...
发布包总览概述
更多信息，请参见 管理数据架构待发布对象。研发：您可以对研发对象执行发布、查看版本详情、下载建表文件操作。更多信息，请参见 管理编码研发待发布对象。标签架构：您可以对标签架构对象执行发布、查看详情操作。更多信息，请参见 管理...
发布包总览概述
更多信息，请参见 管理数据架构待发布对象。研发：您可以对研发对象执行发布、查看版本详情、下载建表文件操作。更多信息，请参见 管理编码研发待发布对象。标签架构：您可以对标签架构对象执行发布、查看详情操作。更多信息，请参见 管理...
多租户管理使用说明
在系统租户下管理数据库 创建数据库 连接数据库，在系统租户下创建数据库。示例如下：CREATE database 'db1@tenant_1';删除数据库 连接数据库，在系统租户下删除数据库。示例如下：DROP database 'db1@tenant_1';在普通租户下管理数据库 ...
数据库迁移
操作步骤 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 解决方案>数据库迁移。说明 若您使用的是极简模式的控制台，请单击控制台左上角的 图标，选择 全部功能>解决方案>数据库迁移。在 新建数据库迁移工单 页面，配置数据库迁移任务工单。...
什么是数据校验
数据校验是数据传输服务DTS（Data Transmission Service）提供的用于监控源库与目标库数据差异的功能，支持在不停服的情况下对源库和目标库进行校验，帮助您及时发现数据和结构不一致的问题。优势 全量校验、增量校验和结构校验均支持在...
数据导出
修改默认审批模板 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 安全与规范>安全规则。单击目标规则集行 操作 列下的 编辑。在 详情 页左侧的导航栏中，单击 数据导出。检测点选择 基础配置项。单击 数据导出默认审批模板 规则名行 操作 列...
创建数据板块
使用限制 支持超级管理员和系统管理员新建数据板块。如何获取系统管理员角色请参见 配置Dataphin成员。功能说明 为了更好地满足业务诉求，Dataphin支持创建Dev-Prod和Basic模式的数据板块，详细说明参见下表。模式 描述 Dev-Prod模式 生成...
创建数据板块
使用限制 支持超级管理员和系统管理员新建数据板块。如何获取系统管理员角色请参见 添加Dataphin成员。功能说明 为了更好地满足业务诉求，Dataphin支持创建Dev-Prod和Basic模式的数据板块，详细说明参见下表。模式 描述 Dev-Prod模式 生成...
新功能发布记录
本文介绍 数据管理DMS 的产品功能动态及相关文档。功能发布更新 2024年 03月 功能名称 变更类型 功能描述 相关文档 数据工作站 新增 支持以文档形式交付查询的数据和数据变化趋势等信息，并支持在交付后使用智能工具解答数据相关问题。使用...
什么是数据校验
数据校验是数据传输服务DTS（Data Transmission Service）提供的用于监控源库与目标库数据差异的功能，支持在不停服的情况下对源库和目标库进行校验，帮助您及时发现数据和结构不一致的问题。优势 全量校验、增量校验和结构校验均支持在...
DataWorks模块使用说明
使用流程概览：参考文档：数据分析概述 数据治理 子模块：数据地图 功能说明：DataWorks数据地图提供了企业级数据管理平台，能够基于统一元数据的底层建设，提供数据对象的管理和盘点的能力，以及数据对象的快速查找和深度理解的能力。...
数据追踪
数据追踪 中提供的模板如下：检测点 模板 审批规则校验 数据追踪审批流程 修改默认审批模板 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 安全与规范>安全规则。在 安全规则 页签中，单击目标规则集右侧 操作 列中的 编辑。在 详情 页面...
跨租户发布设置
前提条件 在您开始跨租户发布前，您需要在环境中，使用 超级管理员或系统管理员 设置跨租户发布使用人。具体操作，请参见 添加Dataphin成员。重要 建议给跨租户发布使用人同时赋予开发和运维的权限。在来源环境中，使用 系统管理员 账号...
无锁数据变更
说明 您可以在 工单详情 页中，查看工单的详情信息，同时系统也会对将要执行的SQL进行执行前的预检查，包括SQL语法解析、安全规则中的SQL类型校验、工单提交人的权限检查、预计检查扫描行数等。确认信息无误且预检查通过后，单击 提交审批...
应用场景
实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线，您可以实时接入APP、WEB、IoT和数据库等产生的异构数据，统一管理，并投递到下游的分析、归档等系统，构建清晰的数据流，让您更好的释放数据的价值。...
创建安全规则
登录 数据管理DMS 5.0。在顶部菜单栏中，选择 安全与规范>权限中心>权限模板。说明 若您使用的是极简模式的控制台，请单击控制台左上角的 图标，选择 全部功能>安全与规范>权限中心>权限模板。单击页面左上方的 新增规则集。在 新增规则集 ...
查看全域数据表校验记录
下载异常数据：单击 下载异常数据 按钮，可下载异常校验数据。② 列表区 为您展示 校验对象、规则名称、校验结果、校验范围、规则类型、规则模板、规则强度、校验开始时间。③ 操作区 单击 图标，查看 规则校验详情。单击 图标，查看 运行...
查看全域数据表校验记录
下载异常数据：单击 下载异常数据 按钮，可下载异常校验数据。② 列表区 为您展示 校验对象、规则名称、校验结果、校验范围、规则类型、规则模板、规则强度、校验开始时间。③ 操作区 单击 图标，查看 规则校验详情。单击 图标，查看 运行...
- 产品推荐
- 这些文档可能帮助您