MaxCompute数据迁移

本文为您介绍MaxCompute数据迁移的准备事项和操作步骤。准备事项 同Region项目迁移。要求有能够同时访问源项目和⽬的项目的账号,该账号对源项目和⽬的项目有List、建表,读写表权限。EMR+DLF+OSS迁移MaxCompute。需要先构建MaxCompute的湖...

配置数据网络

本文主要介绍Serverless Spark如何配置数据网络来访问用户VPC网络中的数据。这些数据包括RDS系列、ADB系列、PolarDB系列、MongoDB、Elasticsearch、HBase、E-MapReduce、Kafka以及用户在ECS上自建的各种数据服务等。背景信息 Serverless ...

术语

全球数据网络(Global Database Network)全球数据网络(GDN)是由分布在全球不同地域的多个 PolarDB 数据库集群组成的一张网络网络中所有集群的数据保持同步,完全一致。更多详情,请参见 创建与删除全球数据网络。主集群...

新增和使用独享数据集成资源组

您可以使用DataWorks独享数据集成资源组功能,为数据集成同步任务分配独立的计算资源,从而提高任务的执行效率和稳定性。购买独享资源组后,在实际使用前您还需进行网络绑定、白名单等配置操作。本文为您介绍从购买至使用独享数据集成资源...

按钮

数据源面板 value:设置事件节点的值内容说明。数据项配置 说明 数据源 组件的数据源中通过 代码编辑 或 可视化编辑 展示了组件所包含的数据字段。也可以修改 数据类型,灵活配置组件数据。数据映射 当您需要自定义图表字段配置时,可以在 ...

资源组操作及网络连通

数据同步网络连通问题 在做离线同步时,我们需要先了解哪些DataWorks及其网络能力?同步ECS自建的数据库的数据时,如何保障数据库与DataWorks的网络连通?数据库和DataWorks不在同一个地域(Region)下,进行数据同步时如何保障数据库与...

通过DataWorks导入数据

DataWorks提供了可视化的数据导入方式,相对于通过外表导入,DataWorks导入的方式更为轻量化,适合数据量相对较小的数据导入场景。本文介绍如何通过DataWorks将 PolarDB分布式版(原DRDS)的数据导入至 AnalyticDB MySQL版 湖仓版(3.0)或...

配置集成管道质量监控

数据表 选择该集成管道内适用该规则模板的生产环境数据表,点击 更多规则,可跳转数据质量模块配置更多规则模板,详情请参见 创建数据表质量规则。规则强度 选择质量规则的强弱:如果您选择了 强规则,则质量规则校验的结果为异常时报警...

元表和字段资产详情

为您展示当前数据表的规则校验概览和质量监控规则列表,点击 查看报告详情 按钮或 查看规则详情 按钮,可快捷跳转数据质量模块对应页面查看更多详情。⑤ 使用说明 您可为数据表添加使用说明,为数据浏览者和消费者提供信息参考。单击 ...

单张图片

数据项配置 说明 数据源 组件的数据源中通过 代码编辑 或 可视化编辑 展示了组件所包含的数据字段。也可以修改 数据类型,灵活配置组件数据。数据映射 当您需要自定义图表字段配置时,可以在 数据映射 模块设置不同的字段映射内容,将这些...

元表和字段资产详情

为您展示当前数据表的规则校验概览和质量监控规则列表,点击 查看报告详情 按钮或 查看规则详情 按钮,可快捷跳转数据质量模块对应页面查看更多详情。⑤ 使用说明 您可为数据表添加使用说明,为数据浏览者和消费者提供信息参考。单击 ...

使用公共资源组

数据网络环境 是否支持访问 数据源处于公网环境 支持 数据源处于经典网络 支持 数据源处于VPC网络 不支持 公共数据集成(调试)资源组 公共数据集成(调试)资源组仅保证支持公网访问能力。白名单设置 公共调度资源组为您提供任务安全...

通用参考:添加路由

如果添加路由后,仍然存在网络连通问题,请根据如下因素进行排查:如果独享资源组访问的是本地IDC数据源,或者跨账号访问数据源,请先参考 配置资源组与网络连通 进行网络连通,再为独享资源组绑定与数据网络连通的VPC。如果您的数据源已...

跨阿里云主账号访问

您在跨账号进行数据同步任务之前,需要设置并确保执行任务的独享数据集成资源组,与源端及目标端数据库之间的网络连通性。本文将为您介绍在使用跨阿里云账号时,数据库与DataWorks工作空间之间的网络连通操作。背景信息 网络连通方案选择取...

查看敏感数据血缘(公测)

DataWorks的数据血缘功能支持可视化展示敏感数据的血缘关系,自动分析字段之间的异常关联关系、敏感数据识别结果异常的字段,帮助您梳理敏感数据的扩散情况及影响面,提高数据识别效率。本文为您介绍如何查看血缘关系图。背景信息 数据血缘...

SQL窗口介绍

数据管理DMS的SQL窗口可以非常便捷地执行各类SQL语句,同时支持以可视化的方式对目标数据库进行增、删、改、查等操作,适用于数据查询、数据开发等场景。前提条件 已具备目标库或表的查询权限。申请权限,请参见 权限管理。SQL窗口界面介绍...

Hologres物理表和字段详情

数据质量 如果您开通了数据质量功能,您可查看数据的质量监控报告和为数据表配置数据探查操作。质量监控:为您展示当前数据表的规则校验概览和质量监控规则列表,点击 查看报告详情 按钮或 查看规则详情 按钮,可快捷跳转数据质量模块...

Hologres物理表和字段详情

数据质量 如果您开通了数据质量功能,您可查看数据的质量监控报告和为数据表配置数据探查操作。质量监控:为您展示当前数据表的规则校验概览和质量监控规则列表,点击 查看报告详情 按钮或 查看规则详情 按钮,可快捷跳转数据质量模块...

MaxCompute物理表和字段详情

数据质量 如果您开通了数据质量功能,您可查看数据的质量监控报告和为数据表配置数据探查操作。质量监控:为您展示当前数据表的规则校验概览和质量监控规则列表,点击 查看报告详情 按钮或 查看规则详情 按钮,可快捷跳转数据质量模块...

MaxCompute物理表和字段详情

数据质量 如果您开通了数据质量功能,您可查看数据的质量监控报告和为数据表配置数据探查操作。质量监控:为您展示当前数据表的规则校验概览和质量监控规则列表,点击 查看报告详情 按钮或 查看规则详情 按钮,可快捷跳转数据质量模块...

Kafka实时ETL同步至Hologres

数据输出预览 窗口,您可以根据需要修改输入数据,或者单击 手工构造数据 按钮自定义输入数据,然后单击 预览 按钮,查看当前数据处理节点对数据的处理结果,当数据处理节点处理异常,或者产生脏数据时,也会实时反馈异常信息,能够帮助...

AnalyticDB for PostgreSQL物理表和字段详情

为您展示当前数据表的规则校验概览和质量监控规则列表,点击 查看报告详情 按钮或 查看规则详情 按钮,可快捷跳转数据质量模块对应页面查看更多详情。⑥ 使用说明 您可为数据表添加使用说明,为数据浏览者和消费者提供信息参考。单击 ...

逻辑表和字段资产详情

数据质量 如果您开通了数据质量功能,您可以查看数据的质量监控报告和为数据表配置数据探查操作。质量监控:为您展示当前数据表的规则校验概览和质量监控规则列表,点击 查看报告详情 按钮或 查看规则详情 按钮,可快捷跳转数据质量...

逻辑表和字段资产详情

数据质量 如果您开通了数据质量功能,您可以查看数据的质量监控报告和为数据表配置数据探查操作。质量监控:为您展示当前数据表的规则校验概览和质量监控规则列表,点击 查看报告详情 按钮或 查看规则详情 按钮,可快捷跳转数据质量...

新增和使用独享调度资源组

说明 DataWorks工作空间和数据源不在同一地域或不在同一个阿里云主账号下,您还需通过 VPN网关 或 高速通道 等方式,将独享资源组绑定的VPC与数据源所在VPC网络打通,并手动添加路由指向目标数据库IP,保障两个网络间可达。详情请参见 配置...

星环ArgoDB/TDH Inceptor物理表和字段详情

数据质量 如果您开通了数据质量功能,您可查看数据的质量监控报告和为数据表配置数据探查操作。质量监控:为您展示当前数据表的规则校验概览和质量监控规则列表,点击 查看报告详情 按钮或 查看规则详情 按钮,可快捷跳转数据质量模块...

CDH/EMR/亚信/FI/CDP物理表和字段详情

数据质量 如果您开通了数据质量功能,您可查看数据的质量监控报告和为数据表配置数据探查操作。质量监控:为您展示当前数据表的规则校验概览和质量监控规则列表,点击 查看报告详情 按钮或 查看规则详情 按钮,可快捷跳转数据质量模块...

StarRocks物理表和字段详情

为您展示当前数据表的规则校验概览和质量监控规则列表,点击 查看报告详情 按钮或 查看规则详情 按钮,可快捷跳转数据质量模块对应页面查看更多详情。⑥ 使用说明 您可为数据表添加使用说明,为数据浏览者和消费者提供信息参考。单击 ...

ClickHouse整库数据离线同步至Hologres

准备独享数据集成资源组并与数据网络连通 在进行数据同步前,需要完成您的独享数据集成资源组和数据源的网络连通,详情请参见 配置网络连通。如果您的独享数据集成资源组和数据源属于同一地域,可使用同地域VPC内网连通独享资源组和数据...

配置RDS MySQL间的数据集成任务

说明 若数据传输控制台自动跳转数据管理DMS控制台,您可以单击右下角的 中单击,返回至旧版数据传输控制台。若您登录的是新版数据传输控制台,您可以单击右下角的,返回至旧版数据传输控制台。在左侧导航栏,单击 数据集成。在数据集成...

创建MySQL数据

数据源配置 基于业务数据源是否区分生产数据源和开发数据源:如果业务数据源区分生产数据源和开发数据源,则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源,则选择 生产数据源。标签 您可根据标签给数据源进行分类...

使用DataWorks

MaxCompute支持通过DataWorks的数据集成功能将MaxCompute中的数据以离线方式导出至其他数据源。当您需要将MaxCompute中的数据导出至其他数据源执行后续数据处理操作时,您可以使用数据集成功能导出数据。本文为您介绍如何将MaxCompute的...

源库连接性检查

网络互通问题 经过上述排查后仍然无法通过源库连接性检查,可能是DTS服务器与源数据网络互通问题。您可以 通过钉钉(钉钉通讯客户端下载地址)进入到DTS客户交流钉钉群(群号:68325004196或68640008972),进行咨询。

目标数据库连接性检查

为保障数据迁移任务的顺利执行,在预检查阶段检查DTS服务器是否能够连通要迁移的目标数据库。本文将介绍目标数据库连接性检查...网络互通问题 经过上述排查后仍然无法通过目标数据库连接性检查,可能是DTS服务器与目标数据网络互通问题。

联动、钻取和跳转

数据大屏作为可视化与场景叙事结合的载体,为了便于更多维数据的交互式分析,提供了钻取、联动和跳转功能。本文为您介绍三种功能在大屏中的使用场景及操作方法。前提条件 已创建数据大屏,请参见 新建数据大屏。已编辑好数据集,请参见 ...

从RDS MySQL同步至PolarDB-X

介绍云原生分布式数据库 PolarDB-X(简称PolarDB-X)是阿里巴巴致力于解决单机数据库服务瓶颈而自主研发的分布式数据库产品,高度兼容MySQL协议和语法,支持自动化水平拆分、在线平滑扩缩容、弹性扩展、透明读写分离,具备数据库全生命周期...

PolarDB MySQL版间的单向同步

说明 若数据传输控制台自动跳转数据管理DMS控制台,您可以在右下角的 中单击,返回至旧版数据传输控制台。在左侧导航栏,单击 数据同步。在 同步作业列表 页面顶部,选择同步的目标实例所属地域。定位至已购买的数据同步实例,单击 配置...

从RDS MySQL迁移至自建Kafka

Kafka是应用较为广泛的分布式、高吞吐量、高可扩展性消息队列服务,普遍用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等大数据领域,是大数据生态中不可或缺的产品之一。通过数据传输服务DTS(Data Transmission Service),...

从PolarDB MySQL版同步至PolarDB-X

云原生分布式数据库 PolarDB-X 是阿里巴巴致力于解决单机数据库服务瓶颈而自主研发的分布式数据库产品,高度兼容MySQL协议和语法,支持自动化水平拆分、在线平滑扩缩容、弹性扩展、透明读写分离,具备数据库全生命周期运维管控能力。...

元数据采集

DataWorks数据地图为您提供 元数据采集 功能,方便您将不同系统中的元数据进行统一汇总管理,您可以在数据地图查看从各数据源汇集而来的元数据信息。本文为您介绍如何创建采集器,将各数据源的元数据信息汇集至DataWorks。前提条件 您需要...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 云数据库 Redis 版 数据库备份 DBS 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用