冷热分离

查看表中冷数据和热数据的大小 在 集群管理系统 的表Tab中,可以显示某一张表的冷存储使用大小和热存储使用大小。说明 如果数据还没有进入冷存储,有可能数据还在内存中,请执行flush,将数据刷写到盘上,再请执行major_compact完成后再...

概述

本节为不熟悉关系数据管理系统的人介绍 SQL 语言。将讨论创建、填充、查询和更新表等基本操作以及示例。还将讨论视图、外键和事务等更高级的概念。PolarDB PostgreSQL版(兼容Oracle)是关系数据管理系统(RDBMS)。这意味着它是用于...

数据查询

Lindorm宽表引擎在集群管理系统中提供了SQL查询入口,您可以使用SQL语法来查询Lindorm宽表数据。本节介绍通过集群管理系统查询宽表数据。前提条件 已登录目标实例的集群管理系统,具体操作请参见 登录集群管理系统。使用限制 为确保数据...

快速体验

DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力,本文以一个零售电商行业的数仓搭建实验为例,为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现,帮助您深入了解阿里云...

DataWorks on EMR数据安全方案

大数据领域,阿里云为企业用户提供了一整套数据安全方案,包含用户认证、数据权限、大数据作业管理体系等。本文以联合使用DataWorks与EMR为例,为您介绍DataWorks on EMR场景下的数据安全方案。背景信息 DataWorks on EMR目前支持LDAP...

基本概念

数据库实例:数据库实例是在云中运行的独立数据库环境。一个数据库实例可以包含多个由数据库用户创建的数据库,并且...索引:索引是数据管理系统数据库表中一个或多个列的值进行排序的数据结构,使用索引可快速访问数据库表中的特定信息。

内置全密态能力

PolarDB PostgreSQL版(兼容Oracle)提供全密态数据库功能,数据在用户侧加密后传入数据管理系统数据明文对于数据库服务端不可见,实现了端到端的全程加密的数据强安全性。全密态云数据库是达摩院数据库与存储实验室的自研产品,可以...

资产权限列表

管理数据板块权限 Y Y N N N N Y N N 管理项目权限 Y Y N N N N N Y N 管理表权限 Y N N N N N N Y N 管理数据源权限 Y Y Y N N N N N N 管理变量权限 Y Y N N N N N N N 管理密钥权限 Y Y N Y N N N N N 管理数据服务权限 Y Y N N N N N Y...

创建IBM DB2数据

背景信息 IBM DB2是一套关系型数据管理系统。如果您使用的是IBM DB2,在对接Dataphin进行数据开发时,您需要先完成IBM DB2数据源的创建。更多IBM DB2信息,请参见 IBM DB2官网。权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块...

创建IBM DB2数据

背景信息 IBM DB2是一套关系型数据管理系统。如果您使用的是IBM DB2,在对接Dataphin进行数据开发时,您需要先完成IBM DB2数据源的创建。更多IBM DB2信息,请参见 IBM DB2官网。权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块...

大屏管理

大屏是数据管理DMS提供的两种可视化应用类型之一,提供自由布局和自定义样式能力,通过可视化组件和一系列内置辅助图形来打造视觉呈现丰富的可视化大屏。大屏的定位与仪表盘不一样,仪表盘倾向于快速打造可视化报表,而大屏通常被广泛用于...

开发管控:管理

开放平台扩展程序 扩展程序概述 测试应用扩展程序 流程管控展示 数据治理检查项 数据治理中心概述 配置治理项 数据建模:数据建模系统管理 说明 标准模式工作空间的发布操作默认为同空间发布,若您存在跨空间、跨云发布场景,则可选择使用...

简介

栅格化GIS应用及航天航空遥感应用 HBase Ganos提供了针对栅格数据管理的通用化模型支持,能够有效支撑规模遥感影像数据和GIS栅格GRID数据的存储、查询和基础分析处理能力,包括ETL工具支持遥感影像重投影、拼接、切片、入库,支持OGC WMS...

应用场景

实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线,您可以实时接入APP、WEB、IoT和数据库等产生的异构数据,统一管理,并投递到下游的分析、归档等系统,构建清晰的数据流,让您更好的释放数据的价值。...

宜搭创建大屏实操

本文主要介绍如何使用企业经营管理系统中客户库表及签约表表单数据,来创建并配置企业经营管理大屏。宜搭创建大屏实操视频,请参见:宜搭创建大屏实操视频。创建企业经营管理系统 操作步骤如下:登录宜搭系统,通过空白应用创建名称为 企业...

功能特性

配置管理 数据保护 敏感数据管理 DMS的敏感数据保护能力能根据所选的敏感数据扫描模板、敏感数据识别模型以及脱敏算法对数据进行脱敏处理,以避免敏感数据滥用,有效保护企业的敏感数据资产,防止数据泄露造成企业经营资金损失或罚款。...

数据标准概述

Dataphin支持创建并管理数据标准,以保障数据的标准化生产与管理,节约数据应用和处理的成本。背景信息 数据标准目标是为 业务、技术 和 管理 提供服务和支持。数据标准管理的过程就是对数据以及数据的属性信息的标准化定义和应用的过程。...

数据标准概述

Dataphin支持创建并管理数据标准,以保障数据的标准化生产与管理,节约数据应用和处理的成本。背景信息 数据标准目标是为 业务、技术 和 管理 提供服务和支持。数据标准管理的过程就是对数据以及数据的属性信息的标准化定义和应用的过程。...

简介

DMS数据分析与应用介绍 DMS通过Data Fabric+模型构建数据管理底座,赋能数据分析与应用。该场景下核心的四个功能如下:安全托管:DMS在阿里集团数据库权限访问控制最佳实践,为企业提供一系列数据库权限管控的集合,可帮助企业实现多云...

什么是DataWorks

中国国际数据产业博览会十佳数据案例 中国信通院:数据集成工具、数据管理工具、数据开发平台、数据脱敏工具、数据分类分级等评测 学习路径 您可以通过DataWorks文档首页的 学习路径,快速了解DataWorks的相关概念、基础操作及进阶操作...

系统管理

本文为您介绍如何在系统管理中配置SQL查询、数据上传任务所使用的资源组。使用限制 仅支持阿里云主账号访问系统管理页面。系统管理中的配置仅在本租户的当前地域生效,并且您需确保SQL查询、数据上传任务使用的数据源和资源组网络连通。...

新建账号

用户角色 该用户角色为全局角色,包括系统管理员、数据管理员、安全管理员、质量管理员、跨租户发布使用人、数据标准管理员和标签业务员。添加的成员需要授予全局角色,则 此处选择相应的角色,单个用户支持配置多个角色,详细说明如下:...

公开与隐藏数据表资产

在左侧菜单栏,选择 系统资产管理>数据表管理,进入数据表资产管理页面。可选:可通过多种方式筛选资产,以便快速定位目标资产。关键字:在 关键字 输入框,输入数据表名称或数据表描述的关键字,单击 查询,展示符合该条件的资产。所属...

公开与隐藏数据表资产

在左侧菜单栏,选择 系统资产管理>数据表管理,进入数据表资产管理页面。可选:可通过多种方式筛选资产,以便快速定位目标资产。关键字:在 关键字 输入框,输入数据表名称或数据表描述的关键字,单击 查询,展示符合该条件的资产。所属...

添加Dataphin成员

用户角色 该用户角色为全局角色,包括系统管理员、数据管理员、安全管理员、质量管理员、跨租户发布使用人、数据标准管理员和标签业务员。添加的成员需要授予全局角色,则 此处选择相应的角色,单个用户支持配置多个角色,详细说明如下:...

基本概念

DMS 数据管理(Data Management Service,简称DMS)是一种集数据管理、结构管理、用户授权、安全审计、数据趋势、数据追踪、BI图表、性能与优化和服务器管理于一体的数据管理服务。更多信息,请参见 什么是数据管理DMS。DTS 数据传输服务...

数据可视化

数据管理DMS 提供灵活布局和丰富的自定义样式能力,并提供大量可视化组件和内置辅助图形,帮助您快速实现可视化大屏。说明 数据可视化功能即将下线,建议您在功能下线前将数据集、图表和仪表盘迁移到数据分析功能。更多信息,请参见【通知...

发布包总览概述

更多信息,请参见 管理数据架构待发布对象。研发:您可以对研发对象执行发布、查看版本详情、下载建表文件操作。更多信息,请参见 管理编码研发待发布对象。标签架构:您可以对标签架构对象执行发布、查看详情操作。更多信息,请参见 管理...

发布包总览概述

更多信息,请参见 管理数据架构待发布对象。研发:您可以对研发对象执行发布、查看版本详情、下载建表文件操作。更多信息,请参见 管理编码研发待发布对象。标签架构:您可以对标签架构对象执行发布、查看详情操作。更多信息,请参见 管理...

多租户管理使用说明

系统租户下管理数据库 创建数据库 连接数据库,在系统租户下创建数据库。示例如下:CREATE database 'db1@tenant_1';删除数据库 连接数据库,在系统租户下删除数据库。示例如下:DROP database 'db1@tenant_1';在普通租户下管理数据库 ...

客户案例

相较之前客户基于python开源的airflow任务管理系统来说,DataWorks拥有以下优势:任务管理一目了然,任务出错定位以及即时跳转到相关任务代码修复。数据源一次性管理,不需要重复劳动,可被多种数据服务需求使用游戏业务拥有上百个数据源。...

生态集成

云原生数据仓库AnalyticDB PostgreSQL版 具备完善和开放的生态系统,支持无缝对接业界以及阿里云生态的数据管理工具,BI报表可视化工具,ETL工具,数据迁移工具,同时可以与业界流行的流式处理系统,日志类系统数据类系统,传统数仓及...

DMS数据管理预案助力业务大促

背景信息 大型活动期间,公司业务量可能出现幅度上涨,数据库的使用与数据安全管理将面临巨大挑战。例如如下场景:临近双十一,数据库即将面临一次访问流量上的大考。筹备业务大促期间,您可评估您现有数据库的使用情况,预估活动期间的...

产品架构

数据管理DMS的产品架构分为三层:数据源、数据运营与管理和商业应用。数据源 关系型数据库:MySQL、SQL Server、PostgreSQL、PolarDB MySQL版、PolarDB PostgreSQL版(兼容Oracle)、PolarDB分布式版、OceanBase、Oracle、达梦DamengDB等。...

文档更新动态(2023年)

MaxCompute SQL支持表字段名称使用系统保留字和关键词,但不推荐使用系统保留字和关键词作为字段名称。更新说明 新建MAX_COMPUTE_SQL任务 新建SPARK_JAR_ON_MAX_COMPUTE任务 新建函数支持选择archive资源(如.zip)。更新说明 函数操作 ...

功能更新动态(2023年)

MaxCompute SQL支持表字段名称使用系统保留字和关键词,但不推荐使用系统保留字和关键词作为字段名称。新建MAX_COMPUTE_SQL任务 新建SPARK_JAR_ON_MAX_COMPUTE任务 函数 新建函数支持选择archive资源(如.zip)。函数操作 数据源 Protocol...

离线集成概述

数据管理DMS离线集成是一种低代码的数据开发工具,您可以组合各类任务节点,形成数据流,通过周期调度运行达到数据加工、数据同步的目的。支持的数据库类型 MySQL:RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB分布式版、AnalyticDB...

云数据库录入

本文介绍如何将阿里云数据库录入至数据管理DMS中。前提条件 支持录入的云数据库类型,请参见 支持的云数据库。系统角色为DBA或管理员。查看系统角色的操作,请参见 查看我的系统角色。已在云数据库的白名单中添加DMS的服务器访问地址。详细...

创建GreenPlum数据

通过创建GreenPlum数据源能够实现Dataphin读取GreenPlum的业务数据或向GreenPlum写入数据。本文为您介绍如何创建GreenPlum数据源。背景信息 Greenplum是一款大数据分析引擎,作用于分析、机器学习和AI等领域。其架构主要针对管理大规模分析...

创建GreenPlum数据

通过创建GreenPlum数据源能够实现Dataphin读取GreenPlum的业务数据或向GreenPlum写入数据。本文为您介绍如何创建GreenPlum数据源。背景信息 Greenplum是一款大数据分析引擎,作用于分析、机器学习和AI等领域。其架构主要针对管理大规模分析...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据管理 云数据库 RDS 云数据库 Redis 版 数据库备份 DBS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用