计费常见问题

DBS网络包 抵扣对象 说明 跨地域备份网络用量 DBS网络包当前全球地域通用,您可在购买后用于抵扣不同地域的 RDS MySQL、RDS PostgreSQL、RDS SQL Server 和 PolarDB MySQL版 跨地域备份网络费用,具体将根据不同地域以不同的系数进行抵扣。...

约束和限制

目录下面采样最新和最老的文件,每个文件读取前1000行 元数据发现SLS数据源发现历史投递数据 如果投递中途修改了分区格式,不会发现修改前的数据 一键建仓/多库合并支持的数据网络类型 VPC 一键建仓/多库合并支持的数据源 PolarDB MySQL ...

数据服务入门

步骤一:创建数据源并配置网络连通性 使用数据服务创建API前,您需将数据库或数据仓库添加为DataWorks的数据源,并保障数据服务资源组与您的目标数据网络连通,以便调用API时DataWorks可成功访问数据源。说明 DataWorks工作空间将集群或...

发布总览概述

来源环境导出的发布文件导入至目标环境后,发布文件包含的数据对象将根据导入规则展示在发布总览页。您可以根据业务需求对发布总览页中的待发布对象进行管理或发布。前提条件 来源环境导出的发布文件已导入至目标环境,具体操作...

发布总览概述

来源环境导出的发布文件导入至目标环境后,发布文件包含的数据对象将根据导入规则展示在发布总览页。您可以根据业务需求对发布总览页中的待发布对象进行管理或发布。前提条件 来源环境导出的发布文件已导入至目标环境,具体操作...

使用DataWorks

测试资源组与数据来源、数据去向之间的网络连通性,确认独享数据集成资源组与数据网络已打通。然后单击 下一步。配置任务。配置数据来源与去向。在 数据来源 和 数据去向 区域,配置任务读取与写入的表,及同步的数据范围。详情请参见 ...

管理数仓规划待发布对象

数据源对象信息:包括数据源名称、数据源类型、发布状态/完成时间、负责人、数据源格式、变更类型、环境变更(从上一次导入后,当前目标环境是否有过变更)、同名同类型(当前环境中是否包含与来源环境同名同类型的数据源,且仅包含新增...

管理数仓规划待发布对象

数据源对象信息:包括数据源名称、数据源类型、发布状态/完成时间、负责人、数据源格式、变更类型、环境变更(从上一次导入后,当前目标环境是否有过变更)、同名同类型(当前环境中是否包含与来源环境同名同类型的数据源,且仅包含新增...

通过DataWorks导入数据

DataWorks提供了可视化的数据导入方式,相对于通过外表导入,DataWorks导入的方式更为轻量化,适合数据量相对较小的数据导入场景。本文介绍如何通过DataWorks将 PolarDB分布式版(原DRDS)的数据导入至 AnalyticDB MySQL版 湖仓版(3.0)或...

通过DataWorks导入

独享数据集成资源组与数据网络已打通。详情请参见:配置资源组与网络连通。操作步骤 配置同步的源端数据库读插件。具体操作,请参见 HDFS Reader。配置同步的目标端数据库写插件。具体操作,请参见 AnalyticDB for MySQL 3.0 Writer。...

Oracle同步至Tablestore

本实践以Oracle作为来源数据源,以Tablestore作为去向数据源,因此您需要在DataWorks的工作空间的 数据源管理 页面新增Oracle数据源和Tablestore数据源,两个数据源支持的数据同步能力请参见 Oracle数据源、Tablestore数据源。已购买独享...

同步方案概览

数据同步功能帮助您实现数据源之间的数据实时同步,适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、云BI及实时数据仓库等多种业务场景。本文将介绍数据同步功能支持的数据库、同步类型和同步拓扑。说明 数据同步在某些...

通过向导模式配置离线同步任务

数据集成提供向导式的开发引导,您无需编写任何代码,通过在界面勾选数据来源与去向,并结合DataWorks调度参数,实现将源端单表或分库分表的全量或增量数据周期性同步至目标数据表。本文为您介绍向导模式配置离线同步任务的常规配置,各...

通过脚本模式配置离线同步任务

当您需要实现更精细化的配置管理时,您可以使用脚本模式配置离线同步任务,通过编写数据同步的JSON脚本并结合DataWorks调度参数使用,将源端单表或分库分表的全量或增量数据周期性同步至目标数据表。本文为您介绍脚本模式配置离线同步任务...

数据集成概述

数据集成是基于Dataphin构建的简单高效的数据同步平台,致力于提供具有强大的数据预处理能力、丰富的异构数据源之间数据高速稳定的同步能力。背景信息 面对各行各业对大数据的应用,数据集成会有很多的诉求,包括能够简单高效的配置大量...

立即备份

库级备份时,针对不同模式的数据库,具体支持的数据库对象如下:MySQL 模式:表、视图、触发器、序列、同义词、类型、、函数、存储过程。Oracle 模式:表、视图、函数、存储过程。说明 在进行表备份时,建议表数量控制在 200 以内。...

离线同步任务运维

数据质量监控 数据集成部分目标端数据源支持配置产出表的数据质量监控,您可以进入数据质量规则页面,对数据同步写入的目标表配置数据质量校验规则。对于配置了数据质量监控规则的表,当表关联的调度节点运行(执行节点代码逻辑)完成后...

Stage级别诊断结果

较大的数据量被广播 Stage输入数据倾斜 Stage输出数据倾斜 较大的数据量被广播 问题 广播(Broadcast)是在两个相邻的Stage间,上游向下游Stage传输数据时所用的一种方法(更多详情,请参见 数据输出类型)。如果某个Stage广播了较多数据,...

新建实时自定义源类型

Dataphin支持自定义实时数据源类型,您可以基于自定义的实时数据源类型,创建实时数据源实例、实时数据源类型的元表以及访问自定义实时数据源的Flink SQL任务,以满足实际数据需求开发。本文为您介绍如何自定义实时数据源类型。使用限制 ...

新建实时自定义源类型

Dataphin支持自定义实时数据源类型,您可以基于自定义的实时数据源类型,创建实时数据源实例、实时数据源类型的元表以及访问自定义实时数据源的Flink SQL任务,以满足实际数据需求开发。本文为您介绍如何自定义实时数据源类型。使用限制 ...

组件数据源配置

本文介绍如何进行配置组件数据和设置组件数据源。前提条件 已登录DataV控制台 已进入画布编辑器页面 配置组件数据 单击左侧导航栏的 组件库 页签,进入组件库管理页面。单击任一组件,添加到画布中。选中组件后,查看右侧配置面板。例如 ...

3D Tiles 倾斜摄影

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时,可单击右侧的 图标,实时查看数据响应结果。说明 还可将...

XYZ栅格瓦片

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时,可单击右侧的 图标,实时查看数据响应结果。说明 还可将...

WMTS栅格瓦片

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时,可单击右侧的 图标,实时查看数据响应结果。说明 还可将...

S3M BIM

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时,可单击右侧的 图标,实时查看数据响应结果。说明 还可将...

S3M管网

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时,可单击右侧的 图标,实时查看数据响应结果。说明 还可将...

超图REST栅格瓦片

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时,可单击右侧的 图标,实时查看数据响应结果。说明 还可将...

S3M倾斜摄影

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时,可单击右侧的 图标,实时查看数据响应结果。说明 还可将...

敏感数据溯源

DataWorks的数据溯源功能,支持通过提取数据泄露文件中数据的水印信息,帮助您定位到可能会泄露目标数据的责任人。本文为您介绍如何创建溯源任务,并通过该任务查找可能会泄露数据的责任人。前提条件 已创建 数据识别规则,详情请参见 配置...

探照灯

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时,可单击右侧的 图标,实时查看数据响应结果。说明 还可将...

路况层

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时,可单击右侧的 图标,实时查看数据响应结果。说明 还可将...

辐射气泡

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时,可单击右侧的 图标,实时查看数据响应结果。说明 还可将...

呼吸气泡

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时,可单击右侧的 图标,实时查看数据响应结果。说明 还可将...

矢量散点层

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时,可单击右侧的 图标,实时查看数据响应结果。说明 还可将...

独享数据服务资源组

网络连通方案 在发起API调用请求时,请求会下发至数据服务的服务器,并被进一步转发至数据源中执行数据查询,因此,需要确保独享数据服务资源组与不同网络环境数据源之间的连通性。独享数据服务资源组包括公网、阿里云VPC网络、IDC网络等...

DataWorks on EMR Serverless StarRocks最佳实践

DataWorks支持StarRocks数据源,通过数据源对接EMR Serverless StarRocks,可实现EMR Serverless StarRocks的数据集成、开发、分析、数据服务等功能。本文为您介绍EMR Serverless StarRocks在DataWorks上的操作流程。背景信息 了解EMR ...

区域热力层

图表样式 区域热力层是3D地球的子组件,支持独立的样式和数据配置,能够使用GeoJson数据展示区域边界信息并渲染区域样式,适用于在3D地球上展示某个区域的数据信息。样式面板 搜索配置:单击 样式 面板右上角的搜索配置项图标,可在搜索...

UDAF概述

如果您的UDF涉及访问VPC网络中的资源时,需要先创建MaxCompute与目标VPC网络间的网络连接,才可以直接通过UDF访问VPC网络中的资源,操作详情请参见 通过UDF访问VPC网络资源。读取表数据 目前版本不支持使用UDF/UDAF/UDTF读取以下场景的表...

数据迁移与同步FAQ

本文为您列出数据迁移与数据同步的常见问题和相关解答。什么是数据迁移、数据同步?DTS的数据迁移与数据同步工作原理是什么?DTS的数据迁移与数据同步有什么区别?使用DTS遇到预检查报错,如何解决?什么是数据迁移、数据同步?数据迁移:...

整体流程介绍

操作流程 操作步骤 支持方法 准备工作 准备工作 包含如下内容:准备CSV数据文件 获取图数据库GDB实例信息 获取OSS中的Bucket信息 OSS导入授权 图数据库GDB控制台一键授权 通过RAM控制台授权 将数据上传至OSS 使用OSS控制台上传数据文件 ...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 DBS 云数据库 RDS 云数据库 Redis 版 共享流量包 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用