使用存储包
存储包是 数据库备份DBS 推出的一种预付费资源包，支持抵扣同一账号下备份实例的内置存储费用、CDM沙箱功能的存储费用 以及MongoDB等云数据库的备份存储费用，抵扣部分不再计费，仅超出部分将按使用量计费。本文介绍DBS存储包的计费规则...
应用评估
应用评估用于衡量应用与数据库整体迁移改造的情况，可以展示应用需要改造的地方，并给出改造建议。前提条件 全部应用采集包都已创建应用画像。背景信息 迁移数据库和应用的过程中存在以下几个难点问题：难以估算应用改造的工作量。难以制定...
数据上云场景
MaxCompute平台提供了丰富的数据上传下载工具，可以广泛应用于各种数据上云的应用场景，本文为您介绍三种经典数据上云场景。Hadoop数据迁移 您可使用MMA...具体场景示例请参见 Flume收集网站日志数据到MaxCompute 和 海量日志数据分析与应用。
桌面版开发工具使用说明
数据：数据页面包含了组件的数据接口配置，数据页的数据一旦改动，组件都会进行相应的改动。单击右上的 保存，可以保存当前修改的数据，并将当前数据作为此组件的默认数据。交互：交互页面包含了组件的交互说明。发布：发布页面包含了组件...
桌面版开发工具使用说明
数据：数据页面包含了组件的数据接口配置，数据页的数据一旦改动，组件都会进行相应的改动。单击右上的 保存，可以保存当前修改的数据，并将当前数据作为此组件的默认数据。交互：交互页面包含了组件的交互说明。发布：发布页面包含了组件...
备份存储（超出免费额度）计费规则
计算公式：1000 GB×0.00021元/GB/小时=0.21元/小时 使用存储包抵扣数据备份费用 存储包可以抵扣数据备份的费用。若存储包的容量不足以抵扣数据备份的空间用量，超出部分将正常按容量计费（按量付费）。具体的抵扣规则如下：地域类型 抵扣...
备份存储（超出免费额度）计费规则
计算公式：1000 GB×0.00021元/GB/小时=0.21元/小时 使用存储包抵扣数据备份费用 存储包可以抵扣数据备份的费用。若存储包的容量不足以抵扣数据备份的空间用量，超出部分将正常按容量计费（按量付费）。具体的抵扣规则如下：地域类型 抵扣...
UDF开发（Java）
附录：数据类型 数据类型映射 为确保编写Java UDF过程中使用的数据类型与MaxCompute支持的数据类型保持一致，您需要关注二者间的数据类型映射关系。具体映射关系如下。说明 在MaxCompute中不同数据类型版本支持的数据类型不同。从...
排查IP白名单问题
现象：用户访问企业版集群的VPC地址或标准版集群的所有地址（公网和VPC），Telnet通，但收不到数据库服务返回的MySQL handshake报文，现象如下图：如果在客户端抓包，会看到TCP三次握手的第二个SYN+ACK报文和最后一个ACK报文一直在重新响应...
不同引擎支持的脱敏方式
计算引擎 脱敏方式 支持的安全算法 MaxCompute 安全策略算法包、数据库内置函数 若脱敏方式为安全策略算法包，则支持所有脱敏算法，且支持使用FPE加密算法进行脱敏。若脱敏方式为数据库内置函数，则不支持高斯、sha256、sha384、sha512、加...
Java UDAF
说明 在编写UDAF代码过程中，您可以根据MaxCompute项目的数据类型版本选取合适的数据类型，更多数据类型版本及各版本支持的数据类型信息，请参见 数据类型版本说明。合法@Resolve 注解示例如下。Resolve注解示例 说明@Resolve('bigint,...
升级
可选增值功能包 描述 数据萃取 面向各行各业数据价值深度挖掘的诉求，数据萃取为您提供可视化的ID链接、行为解析和标签萃取，进一步帮助您提炼可直接应用的高价值标签数据，助力您实现业务的融会贯通并驱动创新。数据服务 数据服务为您提供...
支持的云服务
数据集成 MaxCompute可以通过数据集成功能加载不同数据源（例如MySQL数据库）的数据，也可以通过数据集成把MaxCompute的数据导出到各种业务数据库。数据集成功能已集成在DataWorks上，您可以直接在DataWorks上配置MaxCompute数据源并读写...
执行补数据并查看补数据实例（新版）
补数据可通过补历史或未来一段时间的数据，将写入数据至对应时间分区。代码中的 调度参数，将根据补数据选择的业务时间自动替换为具体值，并结合业务代码将对应时间数据写入指定分区。具体写入的分区与执行的代码逻辑，与任务定义的代码...
需求分析
ods_raw_log_d 网站访问日志明细表数：dwd_log_info_di 用户网站访问信息宽表：dws_user_info_all_di 用户画像数据：ads_user_info_1d 根据规范设计数据流：本实验使用数据集成离线同步任务将用户信息数据与用户网站访问记录数据分别同步至...
需求分析
ods_raw_log_d 网站访问日志明细表：dwd_log_info_di 用户网站访问信息宽表：dws_user_info_all_di 用户画像数据：ads_user_info_1d 根据规范设计数据流：本实验使用数据集成离线同步任务将用户信息数据与用户网站访问记录数据分别同步至...
大数据AI公共数据集分析
本文以分析公共数据集的数据示例，为您展示如何使用DataWorks进行简单数据分析工作。本教程以申请免费资源为例为您展示详细操作步骤，您也可以使用付费资源，操作类似。教程简介 阿里云DataWorks基于多种大数据引擎，为数据仓库、数据湖、...
不同引擎支持的脱敏方式
计算引擎 脱敏方式 支持的安全算法 MaxCompute 安全策略算法包、数据库内置函数 若脱敏方式为安全策略算法包，则支持所有脱敏算法，且支持使用FPE加密算法进行脱敏。若脱敏方式为数据库内置函数，则不支持高斯、sha256、sha384、sha512、加...
计费项
数据传输服务DTS（Data Transmission Service）不同实例的收费项目不同，本文详细介绍了DTS产品的计费项和计费规则。DTS实例的价格主要与计费方式、实例的功能类型、实例的集群类型、源和目标数据库实例所属的地域、链路数量、订购时长等...
发布包总览概述
来源环境导出的发布包文件导入至目标环境后，发布包文件包含的数据对象将根据导入规则展示在发布包总览页。您可以根据业务需求对发布包总览页中的待发布对象进行管理或发布。前提条件 来源环境导出的发布包文件已导入至目标环境，具体操作...
文档更新动态（2022年之前）
新功能 网络连通解决方案 2021年08月24日 数据服务：支持数据服务模块的数据查询加速、支持的数据源类型和版本拓展 为了满足对数据查询速度有要求的业务场景，Dataphin支持为项目添加加速计算源，且完成Dataphin数据源开发后，您可以手动...
发布包总览概述
来源环境导出的发布包文件导入至目标环境后，发布包文件包含的数据对象将根据导入规则展示在发布包总览页。您可以根据业务需求对发布包总览页中的待发布对象进行管理或发布。前提条件 来源环境导出的发布包文件已导入至目标环境，具体操作...
备份存储费用说明
计算公式：1000 GB×0.00021元/GB/小时=0.21元/小时 使用存储包抵扣数据备份费用 存储包可以抵扣数据备份的费用。若存储包的容量不足以抵扣数据备份的空间用量，超出部分将正常按容量计费（按量付费）。具体的抵扣规则如下：地域类型 抵扣...
采集数据
本文为您介绍如何新建OSS和RDS数据源来访问本教程所提供的用户信息与网站日志数据，配置数据同步链路至私有OSS数据源，并通过EMR Hive节点建表去查询同步后的数据，完成数据同步的操作过程。前提条件 开始本文的操作前，请准备好需要使用的...
使用网络包
网络包是 数据库备份DBS 推出的一种预付费资源包，支持抵扣同一账号下您在RDS控制台、PolarDB控制台产生的跨地域备份网络费用，或RDS控制台产生的备份集下载网络费用，抵扣部分不再计费，仅超出部分按天计费。覆盖产品包括 RDS MySQL、RDS ...
Spark常见报错
例如：同时访问Hive和RDS MySQL数据源，JAR包中应包含Hive数据源和RDS MySQL数据源的JDBC驱动。CommunicationsException.*Communications link failure 报错出现日志：Driver日志。报错原因：Spark作业中配置的弹性网卡无法访问指定的数据...
DescribeDataAssets-查询数据资产敏感信息
取值：1：未识别到敏感数据，无风险 2：1 级敏感数据风险 3：2 级敏感数据风险 4：3 级敏感数据风险 5：4 级敏感数据风险 6：5 级敏感数据风险 7：6 级敏感数据风险 8：7 级敏感数据风险 9：8 级敏感数据风险 10：9 级敏感数据风险 11：10 ...
数据集成概述
数据集成是基于Dataphin构建的简单高效的数据同步平台，致力于提供具有强大的数据预处理能力、丰富的异构数据源之间数据高速稳定的同步能力。背景信息 面对各行各业对大数据的应用，数据集成会有很多的诉求，包括能够简单高效的配置大量...
管理数仓规划待发布对象
数据源对象信息：包括数据源名称、数据源类型、发布状态/完成时间、负责人、数据源格式、变更类型、环境变更（从上一次导入后，当前目标环境是否有过变更）、同名同类型（当前环境中是否包含与来源环境同名同类型的数据源，且仅包含新增...
管理数仓规划待发布对象
数据源对象信息：包括数据源名称、数据源类型、发布状态/完成时间、负责人、数据源格式、变更类型、环境变更（从上一次导入后，当前目标环境是否有过变更）、同名同类型（当前环境中是否包含与来源环境同名同类型的数据源，且仅包含新增...
立即备份
库级备份时，针对不同模式的数据库，具体支持的数据库对象如下：MySQL 模式：表、视图、触发器、序列、同义词、类型、包、函数、存储过程。Oracle 模式：表、视图、函数、存储过程。说明 在进行表备份时，建议表数量控制在 200 以内。...
新建实时自定义源类型
Dataphin支持自定义实时数据源类型，您可以基于自定义的实时数据源类型，创建实时数据源实例、实时数据源类型的元表以及访问自定义实时数据源的Flink SQL任务，以满足实际数据需求开发。本文为您介绍如何自定义实时数据源类型。使用限制 ...
新建实时自定义源类型
Dataphin支持自定义实时数据源类型，您可以基于自定义的实时数据源类型，创建实时数据源实例、实时数据源类型的元表以及访问自定义实时数据源的Flink SQL任务，以满足实际数据需求开发。本文为您介绍如何自定义实时数据源类型。使用限制 ...
规格与定价（金融云）
存储包规则 当您需要的数据量较大（如1000 GB或以上）时，相比未使用存储包（即正常按量付费），预付费 购买存储包 能够享受一定的折扣优惠，且购买的存储包容量越大，折扣越多。存储包价格 下表为按月计费存储包和按量付费的价格对比。...
配置资产数据
本文档介绍配置资产数据的方法，以及资产数据面板的内容，包括数据接口、数据源、数据过滤器和数据轮询频次等。操作步骤 登录 DataV控制台。在 我的可视化 页面，单击您创建的可视化应用项目上方的 编辑 按钮。在画布编辑器页面，单击 图层...
ListDeployments
调用ListDeployments查询发布包列表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是 ...
数据迁移与同步FAQ
本文为您列出数据迁移与数据同步的常见问题和相关解答。什么是数据迁移、数据同步？DTS的数据迁移与数据同步工作原理是什么？DTS的数据迁移与数据同步有什么区别？使用DTS遇到预检查报错，如何解决？什么是数据迁移、数据同步？数据迁移：...
组件数据源配置
本文介绍如何进行配置组件数据和设置组件数据源。前提条件 已登录DataV控制台 已进入画布编辑器页面 配置组件数据 单击左侧导航栏的 组件库 页签，进入组件库管理页面。单击任一组件，添加到画布中。选中组件后，查看右侧配置面板。例如 ...
3D Tiles 倾斜摄影
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时，可单击右侧的 图标，实时查看数据响应结果。说明 还可将...
XYZ栅格瓦片
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时，可单击右侧的 图标，实时查看数据响应结果。说明 还可将...
- 产品推荐
- 这些文档可能帮助您