查看敏感数据血缘(公测)

DataWorks的数据血缘功能支持可视化展示敏感数据的血缘关系,自动分析字段之间的异常关联关系、敏感数据识别结果异常的字段,帮助您梳理敏感数据的扩散情况及影响面,提高数据识别效率。本文为您介绍如何查看血缘关系图。背景信息 数据血缘...

什么是数据库GDB?

图数据库(Graph Database,简称GDB)是一种支持Property Graph模型、用于处理高度连接数据查询与存储的实时、可靠的在线数据库服务。它支持Apache TinkerPop Gremlin查询语言,可以帮您快速构建基于高度连接的数据集的应用程序。图数据...

关系数据库全量入湖

本文为您介绍如何在数据湖构建(Data Lake Formation,简称DLF)中使用关系数据库全量入湖任务将RDS或PolarDB数据批量同步到数据湖中。重要 数据入湖功能已经停止更新,如果您有数据入湖需求请参考:数据入湖停止更新公告。前提条件 已开通...

概述

本节为不熟悉关系数据库管理系统的人介绍 SQL 语言。将讨论创建、填充、查询和更新表等基本操作以及示例。还将讨论视图、外键和事务等更高级的概念。PolarDB PostgreSQL版(兼容Oracle)是关系数据库管理系统(RDBMS)。这意味着它是用于...

导入概述

为了更地满足各种不同的业务场景,StarRocks支持多种数据模型,StarRocks中存储的数据需要按照特定的模型进行组织。本文为您介绍数据导入的基本概念、原理、系统配置、不同导入方式的适用场景,以及一些最佳实践案例和常见问题。背景信息...

Smartbi

在 新建关系数据源 页面,根据提示填写 AnalyticDB MySQL版 集群的连接信息。配置项 说明 名称 新建的数据源的标示名,必须唯一。别名 新建的数据源显示的名称,选填。驱动程序类型 选择 aliyun AnalyticDB。驱动程序存放目录 选择 产品...

入湖基础操作

关系数据库全量入湖为例,如下所示。配置目标数据湖信息。主要包括:所属数据目录:选择所属数据目录(Catalog)。目标元数据库:目标表所在的元数据库。目标元数据表名称:定义目标表名称。存储格式:选择数据在数据湖中的存储格式,...

支持的数据

数据导入 源集群 目标集群 全量导入 增量导入 关系数据库 MySQL Lindorm宽表 支持,由 DataWorks 提供服务。不支持。PolarDB Lindorm宽表 支持,由 DataWorks 提供服务。不支持。PostgreSQL Lindorm宽表 支持,由 DataWorks 提供服务。不...

创建MySQL数据

常用于网站、应用程序和商业产品,是一种常见的主要关系数据存储系统。更多详情请参见 MySQL官网。使用限制 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。操作步骤 在Dataphin首页,单击顶部菜单栏的...

创建OceanBase数据

背景信息 OceanBase即阿里云数据库OceanBase,是阿里巴巴和蚂蚁金服100%自主研发的金融级分布式关系数据库。如果您使用的是阿里云数据库OceanBase,在对接Dataphin进行数据开发或将Dataphin数据写入至OceanBase时,您需要先完成OceanBase...

面临的业务挑战

这些不同来源、不同格式的数据,各自又有不同的访问和分析方式,而大量传统企业基于关系数据库构建自己的业务系统,已经非常熟悉按SQL的方式去使用数据,这无疑增加了企业存储和使用数据的成本。分析不实时 企业运营的形式越来越多样化,...

创建OceanBase数据

背景信息 OceanBase即阿里云数据库OceanBase,是阿里巴巴和蚂蚁金服100%自主研发的金融级分布式关系数据库。如果您使用的是阿里云数据库OceanBase,在对接Dataphin进行数据开发或将Dataphin数据写入至OceanBase时,您需要先完成OceanBase...

创建Kudu数据

背景信息 Kudu提供接近于关系数据库管理系统(RDBMS)的功能和数据模型,提供类似于关系型数据库的存储结构来存储数据,允许用户以和关系型数据库相同的方式插入、更新、删除数据。Kudu仅仅是一个存储层,并不存储数据,因此需要依赖外部的...

离线同步并发和限流之间的关系

数据集成会尝试保障任务执行并发数符合配置并发数,常见的任务实际执行并发数小于配置并发数的场景有:关系数据库(如MySQL、Polardb、SQLServer、PostgreSQL、Oracle等等)读取,没有配置切分键splitPk(切分列支持整型数字类型,Oracle在...

创建MySQL数据

常用于网站、应用程序和商业产品,是一种常见的主要关系数据存储系统。更多详情请参见 MySQL官网。前提条件 若您需在Dataphin中创建基于阿里云产品的数据源,创建数据源前,需确保Dataphin的IP已添加至数据库白名单(或安全组)中,使数据...

数据上云工具

开源产品 Sqoop(Tunnel通道系列)Sqoop基于社区Sqoop 1.4.6版本开发,增强了对MaxCompute的支持,可以将数据从MySQL等关系数据库导入或导出到MaxCompute表中,也可以从HDFS或Hive导入数据到MaxCompute表中。详情请参见 MaxCompute Sqoop。...

基于Delta lake的一站式数据湖构建与分析实战

选择“关系数据库实时入湖”,按照下的信息填写数据源、目标数据湖、任务配置等信息。并保存。c.配置数据源,选择刚才新建的“dlf_demo”连接,使用表路径“dlf_demo/employees”,选择新建DTS订阅,填写名称。d.回到任务管理页面,点击...

连接方式概述

Java 数据库连接器(Java Database Connectivity,JDBC)提供了 Java 连接关系数据库的接口,是一种 Java 标准。JDBC 标准由 Sun Microsystems 定义,通过标准 java.sql 接口实现,支持各个提供程序使用自己的 JDBC 驱动程序来实现和扩展...

关系图

DataWorks智能数据建模的关系图,帮助您快速构建数据仓库模型架构,直观展示数据仓库中维度、维度表、明细表、汇总表、应用表等各模型之间的关系。一个关系图承载一个数据仓库模型,一个账号支持创建多个关系图。本文为您介绍关系图的...

离线同步数据质量排查

关系数据库配置了前置处理preSql、后置处理postSql等,第一个任务写出的数据可能会被第2个同步任务的前后置SQL干扰。任务配置不能幂等执行 一个任务重复运行多次最终的同步效果是一致等价的。如果任务配置不能幂等执行,而对任务又执行了多...

项目编辑器页面管理

5.完成数据差集面区域样式 剪切面数据 在空间地图中,您可以选择一个 绿地、水体、遥感影像-道路、矢量建筑 实体或 面 通用元素数据项,在数据页面中选中一个数据,地图中会以黄色区域面显示被选中的样式。单击地图右上角的 图标,再...

基于DLF、RDS或Flink、OSS支持Delta Lake或Hudi存储...

对于不带分区的Hudi格式,您也可使用单表离线同步方案,但无需在DataWorks数据开发模块创建离线同步任务,直接在DLF控制台中创建 关系数据库全量入湖 类型的任务即可,具体操作可参考 OSS数据进行格式转换入湖。单表离线同步 在DataWorks ...

高压缩引擎(X-Engine)介绍

直接将 PolarDB 高压缩引擎(X-Engine)作为大容量关系数据库使用,以满足一些写入数据量巨大,但读频次较低的业务的需求(如系统监控日志等)。您可以通过阿里云 DTS 持续实时地将在线库的数据迁移至 PolarDB 高压缩引擎(X-Engine),或...

常见问题

数据安全中心DSC根据为不同行业预先定义的敏感数据关键字段,扫描MaxCompute、OSS、阿里云数据库服务(RDS、PolarDB-X、PolarDB、OceanBase、表格存储等)和自建数据库中的数据,通过敏感数据规则,判断和打标敏感数据,为数据安全审计、...

项目编辑器页面管理

选择地图数据集数量 单击地图右下角的数据集下拉列表,为当前地图选择显示一个合适的地图数据集数量值,可选 200条/数据集、400条/数据集600条/数据集、800条/数据集 和 1000条/数据集。重新加载 单击地图右下角的 重新加载,即可重新加载...

图片背景层(v2.x版本)

如果您只需要配置一张背景,可以选择在配置面板直接添加并设置图片相关参数,也可以选择在数据面板添加图片对应的字段数据来配置背景,两种方式选其一即可。如果您需要配置多张背景,则必须通过在数据面板内添加多张图片对应的字段...

单张图片

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 配置资产数据数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...

MaxCompute表数据

包括数据检索、数据预览、查看元数据详情、查看数据血缘关系、分类分组管理数据表等操作。本文为您介绍如何在数据地图查看和管理MaxCompute表。前提条件 已绑定MaxCompute引擎至当前工作空间,绑定后DataWorks会面向引擎自动采集元数据,...

进度条表格

数据类型:设置表格列的数据类型,包括但不限于数值型、类目型、时间型、图片、趋势和进度。显示格式:表格列显示格式的样式,可选 默认、11(整数)、11.1(浮点数)、11.11(浮点数)、11%(百分比)、11.1%(百分比)、1,111...

移动图标层

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 配置资产数据数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...

呼吸气泡

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时,可单击右侧的 图标,实时查看数据响应结果。说明 还可将...

烘托光柱

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时,可单击右侧的 图标,实时查看数据响应结果。说明 还可将...

地理围栏

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时,可单击右侧的 图标,实时查看数据响应结果。说明 还可将...

三维图标

三维图标是三维城市构建器的数据映射图层,三维图标基于三维空间的POI点,支持PBR材质,支持独立的样式和数据配置,包括三维图标的几何、环境、图标和背景等样式配置。本文介绍三维图标配置项的含义。在场景编辑器左侧图层列表中,单击 ...

雷达扫描

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时,可单击右侧的 图标,实时查看数据响应结果。说明 还可将...

文字标签

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时,可单击右侧的 图标,实时查看数据响应结果。说明 还可将...

文档修订记录

附录:空间级预设角色与MaxCompute引擎权限的映射关系 2023.8.25 新增功能 数据建模 用于帮助您快速构建数据仓库模型架构,直观展示数据仓库中各模型之间的关系。一个关系图承载一个数据仓库模型,一个账号支持创建多个关系图关系图 ...

提交并发布模型

展开该模型,并双击 主题域 下的 Main,查看该数据模型的ER关系图。提交数据模型。在左侧的 物理模型 区域,选中 sakila_MaxCompute_demo 中的所有表。在主题域的ER关系图页面,单击 图标。在 模型提交 对话框中,根据向导配置各项参数。在...

入门实践

本文以实现构建数据标准来设计数据模型,并通过规范化的流程,下发模型至计算引擎为例,为您介绍DataWorks数据建模的流程。前提条件 如果您使用的是阿里云主账号,请下载建模工具。如果您使用的是RAM用户,请完成授权并下载建模工具。详情...

血缘查看

使用DataWorks数据地图查看表或数据服务API时,可在对应的详情页面查看详细的血缘信息,这对于数据溯源及管理有很大帮助,本文为您介绍数据地图的血缘查看能力。表血缘 查找某张表并进入表详情页面后,您可以单击 血缘信息 页签,查看表级...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 数据库备份 DBS 数据传输服务 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用