迁移服务（MMA）
步骤一：安装UDTF 使用MaxCompute迁移功能时，需要在Hive服务器上安装UDTF（Unified Data Transfer Service）并自定义Hive UDTF函数，利用Hive UDTF函数来获取、转换、上传数据到MaxCompute，以实现复杂数据的迁移。关于Hive UDTF详情，请...
A100使用指南
3.x 自建数据库 Oracle 8i、9i、10g、11g、12c MySQL 4.0、4.1、5.0~5.7、8.0 SQL Server 2000、2005、2008、2012、2014、2016、2017 Sybase 12、15 DB2 8.0、8.1、8.2、9.1、9.5、9.7、10.1 SAP HANA 1.0、2.0 神通数据库（Oscar）所有...
创建Oracle数据订阅任务
如果选择某个表作为订阅对象，那么只有这个表的增量数据可以被订阅到。此时如果需要加入一个新的表作为订阅对象，您需要将其加入至订阅对象中，详情请参见 修改订阅对象。单击 下一步高级配置，进行高级配置。配置 说明 选择调度该任务的专...
异构数据源访问
若您需要通过 AnalyticDB PostgreSQL版 访问外部异构数据源（HDFS、Hive和JDBC）时，可以使用异构数据源访问功能将外部数据转换为 AnalyticDB PostgreSQL版 数据库优化后的格式进行查询和分析。功能说明 外部数据源管理提供高性能的结构化...
Doris数据源
DataWorks数据集成支持使用Doris Writer导入表数据至Doris。本文为您介绍DataWorks的Doris数据同步能力支持情况。支持的Doris版本 Doris Writer使用的驱动版本是MySQL Driver 5.1.47，该驱动支持的内核版本如下。驱动能力详情请参见 Doris...
安装Agent
数据库审计系统的Agent程序是部署在用户终端或目标数据库服务器上的功能插件，用来转发数据库访问流量到审计系统。您需要根据数据库服务器的类型，选择合适的方式来安装Agent，才能使数据库审计服务收集目标数据库的访问流量信息。本文介绍...
全量备份数据上云（SQL Server 2008 R2本地盘）
以本地文件为例，说明如何通过File.length()获取上传数据的大小。final File sampleFile=new File(filePath);long fileLength=sampleFile.length();int partCount=(int)(fileLength/partSize);if(fileLength%partSize!0){ partCount+;}/遍...
网络运维场景
图数据库GDB可以轻松的对IT、网络运营的海量数据进行建模，将原始关系型数据库中结构化数据转换图数据库中的节点和边，不仅能减少DBA的数据建模工作量，又能够提升查询效率。解决传统解决方案中数据量超过一定量级时不能使用数据库和使用...
2021年
2021-11-29 华北2（北京）华东2（上海）华北3（张家口）华东1（杭州）华南1（深圳）网络开通流程 MaxCompute支持清空分区表中指定分区的数据 MaxCompute支持用户手动清空分区表中指定的一个或者多个分区的数据，但不会删除分区表或者分区表...
通过DataX导入数据
您可以从 云数据库 SelectDB 版 控制台的 实例详情>网络信息 中获取IP地址和MySQL协议端口。IP地址：VPC地址 或 公网地址。端口：MySQL协议端口。示例：jdbc:mysql:/selectdb-cn-4xl3jv1*.selectdbfe.rds.aliyuncs.com:9030 说明 如果DataX...
通用型
存储增强通用型实例规格族g8ise 通用型实例规格族g8a 通用型实例规格族g8i 通用平衡增强型实例规格族g8ae 通用型实例规格族g8y 存储增强通用型实例规格族g7se ...增强型实例规格族g6e 通用型实例规格族g6 网络增强通用型实例规格族g5ne（如果售罄...
通过Spark导入数据
基于Spark的分布式计算能力，您可以将上游数据源（MySQL、PostgreSQL、HDFS、S3等）中的大量数据读取到DataFrame中，然后通过Spark SelectDB Connector导入到SelectDB表中。同时，您也可以使用Spark的JDBC方式来读取SelectDB表中的数据。...
标签层（v3.x版本）
图表样式 标签层是3D平面地图（v3.x版本）的子组件，支持独立的样式、数据和交互配置，包括经纬度弹窗多种嵌入形式、CSS自定义弹窗样式和轮播/非轮播样式等。配置面板 搜索配置：单击 配置 面板右上角的 搜索配置，可在 搜索配置 面板中...
开启部署集
c14d3、d1-c8d3 i4、i4g、i4r、i3g、i3、i2、i2g、i2ne、i2gne、i1 ebmg5、ebmc7、ebmg7、ebmr7、sccgn6、scch5、scch5s、sccg5、sccg5s e、s6、t6、xn4、mn4、n4、e4 gn6i u1 网络低时延策略 g8a、g8i、g8ae、g8y c8a、c8i、c8ae、c8y r8a...
负载说明
从表格可以清楚的看到，4 vCPU 8 GiB的ECS自建数据库（即总CPU是400%），在3.10内核下，如果数据库的TPS达到8000，开启全量SQL后，仅需要消耗10.7%的CPU。说明 若仅开启基础监控（数据库性能指标监控、主机性能指标监控等），需要2%的CPU。...
迁移方案概览
数据迁移功能帮助您实现同构或异构数据源之间的数据迁移，适用于数据上云迁移、阿里云内部跨实例数据迁移、数据库拆分扩容等业务场景。本文将介绍数据迁移功能支持的数据库、版本和迁移类型，以及具体的配置文档。说明 数据迁移在某些场景...
使用OSS控制台上传数据文件
对象存储OSS控制台支持上传大小不超过5 GB的文件，如果您需要导入图数据库GDB实例的数据文件不超过5 GB，您可以将数据文件上传至对象存储OSS的Bucket中，然后从Bucket中将数据文件导入至图数据库GDB实例。本文介绍将数据文件上传至对象存储...
支持的数据库
源库 目标库 同步类型 同步拓扑 配置文档 自建Oracle（RAC或非RAC架构）9i、10g、11g、12c、18c、19c版本 云原生数据仓库 AnalyticDB PostgreSQL 版 4.3、6.0、7.0版本 库表结构同步 全量数据同步 增量数据同步 单向同步 自建Oracle同步至...
从Oracle迁移应用至阿里云PolarDB全流程指南
数据库和应用采集 登录阿里云官方网站，在 ADAM官网 下载 数据库采集器 和 应用采集器，按照 数据库采集 进行Oracle数据库采集，应用采集 进行Oracle应用采集，生成相应的zip格式的数据压缩包，便于后续上传到阿里云ADAM官网进行分析使用。...
内置时空数据引擎Ganos
相比传统需要跨库信息提取再汇总，在性能及程序开发效率上都有大幅度的提高，为用户应对5G、卫星遥感、行业时空大数据、智慧城市建设等提供云化和多结构、多模式的信息服务支撑。PolarDB PostgreSQL版（兼容Oracle）Ganos当前版本提供了...
基本概念
DTS 数据传输服务（Data Transmission Service，简称DTS）支持关系型数据库（RDBMS）、非关系型数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，帮助您构建安全、可扩展、高可用的...
性能白皮书
网络：VPC内网，客户端与服务器同地域同可用区实例规模：1个DC，3节点实例容量：单节点400G SSD云盘（容量会适当影响性能）压测客户端：ecs.c6.2xlarge（8核16G）实例规格：当前云Cassandra支持的所有规格 测试负载说明 因为不同业务负载...
SelectDB数据源
准备工作3：配置SelectDB的网络连接 SelectDB具有私网连接和公网连接两种模式，数据集成允许您通过私网或公网连接到SelectDB。通过私网连接：私网连接具有较大的带宽和较稳定的连接，因此推荐使用私网连接。在使用私网连接之前，需要按照 ...
Oracle数据源
Oracle数据源为您提供读取和写入Oracle双向通道的功能，方便您后续可以通过向导模式和脚本模式配置数据同步任务。本文为您介绍DataWorks的Oracle数据同步能力支持情况。支持的版本 离线读写 版本 离线读（Oracle Reader）离线写（Oracle ...
UDF开发（Python3）
说明 在编写UDF代码过程中，您可以根据MaxCompute项目的数据类型版本选取合适的数据类型，更多数据类型版本及各版本支持的数据类型信息，请参见 数据类型版本说明。合法的函数签名示例如下。函数签名示例 说明 'bigint,double->string' ...
呼吸气泡层（v3.x版本）
图表样式 呼吸气泡层是3D平面地图（v3.x版本）的子组件，支持独立的样式、数据和交互配置，包括呼吸气泡的形状、半径、颜色以及发光效果等，能够以呼吸气泡的形式表现地理位置上的点数据信息。配置面板 搜索配置：单击 配置 面板右上角的 ...
PostgreSQL数据源
PostgreSQL数据源为您提供读取和写入PostgreSQL双向通道的功能，方便您后续可以通过向导模式和脚本模式配置数据同步任务。本文为您介绍DataWorks的PostgreSQL数据同步能力支持情况。支持的版本 目前仅支持配置PostgreSQL数据源为PostgreSQL...
数据库采集
采集方式介绍 在线采集：将源数据库的网络打通，并在源数据库白名单中添加ADAM服务器，确保ADAM服务器可以直接通过在线采集方式进行信息收集。更多信息，请参见 在线采集。有公网IP：源数据库具有公网IP，可以通过外网访问。无公网IP：通过...
SQL查询
数据源白名单访问控制 当使用数据分析操作MaxCompute表数据时，如果MaxCompute项目空间开启了白名单访问控制，数据分析的相关服务（例如，费用计算、数据下载、维表使用、数据上传等）可能会出现报错。为保证DataWorks数据分析服务能顺利...
文档更新动态（2022年之前）
新功能 网络连通解决方案 2021年08月24日 数据服务：支持数据服务模块的数据查询加速、支持的数据源类型和版本拓展 为了满足对数据查询速度有要求的业务场景，Dataphin支持为项目添加加速计算源，且完成Dataphin数据源开发后，您可以手动...
下载备份
查看下载备份集的存储信息（云盘实例）DescribeBackups-查看RDS实例备份集列表 DescribeBinlogFiles-查看RDS实例的日志（Binglog）文件 下载常见问题 RDS数据库备份是否可以上传到OSS？RDS MySQL云盘实例支持按任意时间点或按指定备份集...
搭建与管理（基于Hadoop）
通过MaxCompute与Hadoop构建湖仓一体方案旨在实现对海量数据的统一管理、存储和分析，提供了一个既能处理结构化、半结构化数据，又能满足高并发分析需求的一体化数据平台。本文为您介绍如何通过MaxCompute与Hadoop构建湖仓一体，以及管理湖...
RDS术语
数据库代理 RDS数据库代理是位于数据库服务端和应用服务端之间的网络代理服务，用于代理应用服务端访问数据库时的所有请求，具有高可用、高性能、可运维、简单易用等特点，同时提供自动读写分离、事务拆分、连接池等高级功能。更多信息，请...
2021年
新功能 MaxCompute提供湖仓一体方案，该方案可以打破数据湖与数据仓库割裂的体系，并将数据湖的灵活性、生态丰富能力与数据仓库的企业级部署能力进行融合，助力构建数据湖和数据仓库相融合的数据管理平台。MaxCompute湖仓一体概述 2021年2...
RDS术语
A AliPG 阿里云支持一系列兼容PostgreSQL的云数据库服务产品，这些云数据库服务采用统一的数据库内核（简称AliPG），AliPG兼容PostgreSQL开源数据库，于2015年正式商用，支持PostgreSQL主流大版本，已稳定运行多年，支撑了大量阿里巴巴集团...
JindoFS
读写JindoFS数据 网络打通 说明 DDI集群访问EMR集群之前需要先进行网络打通，即在ddi集群数据源管理处添加emr hdfs数据源。2.EMR集群JFS Block模式的打通。主要配置SmartData下的namespace。说明 可以参考说明文档：Block模式使用说明。1）...
版本发布记录
计费项 数据字典 支持控制台配置数据字典，当业务中有常量数据或者业务数据可以划分为业务事实表和业务维度表，通过数据字典来替代维度表，直接查询字典获得维度数据，增加查询效率。数据字典 资源队列 解决开源版中单个大查询消耗资源过多...
UDAF概述
如果您的UDF涉及访问VPC网络中的资源时，需要先创建MaxCompute与目标VPC网络间的网络连接，才可以直接通过UDF访问VPC网络中的资源，操作详情请参见 通过UDF访问VPC网络资源。读取表数据 目前版本不支持使用UDF/UDAF/UDTF读取以下场景的表...
功能更新动态（2022年之前）
2021年08月24日 华南1（深圳）2021年08月26日 华东2（上海）Dataphin支持通用IP地址 为了提升网络连通配置的效率，Dataphin新增在VPC网络环境下各地域通用的IP地址，您可以将通用的IP地址添加至业务数据库的白名单中以实现网络打通。...
动态文件剪枝
动态文件剪枝（Dynamic File...使用案例 测试数据生成：在本节中我们使用TPCDS数据集作为测试数据，主要使用到store_sales和item表，下载包请联系Databricks运维，并上传到您的OSS中，然后再DDI的项目空间中创建Spark作业生成测试数据：class ...
- 产品推荐
- 这些文档可能帮助您