hadoop支持数据库-hadoop支持数据库文档介绍内容-阿里云

使用限制

支持支持不支持支持 数据库内的授权权限支持支持不支持支持 kill线程权限支持支持支持支持 Linked Server 支持（共享规格不支持）支持（共享规格不支持）不支持不支持分布式事务支持支持不支持不支持 SQL Profiler 支持 ...

CREATE DATABASE

数据库属性（attribute_definition）仅时序引擎 支持数据库属性。您可以通过 WITH 关键字为数据库添加一个或多个属性，例如 WITH(cold_boundary=30,ttl=60)。支持的属性如下：属性名类型描述 cold_boundary BIGINT 冷热存储分界线，单位...

数据库管理

支持字符集 数据库支持的字符集，默认为UTF8。如果需要其他字符集，请在下拉列表中选择需要的字符集。Collate 字符串排序规则。Ctype 字符分类。备注说明用于备注该数据库的相关信息，便于后续数据库管理。要求如下：不能以http://或...

数据库管理

支持字符集 数据库支持的字符集，默认为UTF8。如果需要其他字符集，请在下拉列表中选择需要的字符集。Collate 字符串排序规则。Ctype 字符分类。备注说明用于备注该数据库的相关信息，便于后续数据库管理。要求如下：不能以http://或...

迁移评估概述

目前兼容性评估支持数据库对象评估、数据库 SQL 或 PL 语句评估，以及数据库画像。功能描述数据库对象评估支持直接连接源端数据库，自动获取源端数据库对象的信息，评估源端数据库至 OceanBase 数据库对应版本的兼容性。目前支持进行...

管理数据库

支持字符集选择数据库支持的字符集，例如 utf8mb4、utf8、gbk、latin1 等。授权账号选中需要授权访问本数据库的账号。本参数可以留空，在创建数据库后再绑定账号。说明此处只会显示普通账号，因为高权限账号拥有所有数据库的所有权限，...

数据库存储

数据库加密密钥，mPaaS 支持数据库加密，使数据在设备上更安全，若为 null 则不加密。注意：密码只能设置一次，不提供修改密码的 API；不支持对未加密的库设置密码进行加密（会导致闪退）。private static final String DB_PASSWORD="mpaas...

功能概述

数据库自治服务DAS（Database Autonomy Service）提供智能压测功能，帮助您验证您的实例规格是否需要扩容，以便有效地应对业务流量高峰。适用场景为应对即将到来的短期业务高峰，验证当前数据库实例规格是否需要扩容。数据库结构变更后...

如何恢复数据到其它数据库实例

数据库备份DBS 支持恢复已有备份数据到源备份数据库实例上，同时也支持恢复到其它已有数据库实例上，包括RDS实例、ECS上的自建数据库等，可用于误操作后恢复以及分析历史数据等场景。本文以恢复到已有RDS实例为例介绍恢复操作。前提条件已...

MongoDB 4.4

不支持数据库admin和local作为源和目标库。由于DTS写入数据的逻辑为并发写入，所以会导致目标端占用的存储空间比源端大5%~10%。请确保目标端MongoDB没有与源端相同的主键（默认为_id），否则会导致数据丢失。若目标端有与源端相同的主键，...

Redis逻辑备份

无公网IP:Port的自建数据库(通过数据库网关DG接入)：可通过数据库网关备份自建数据库，您需要提前为数据库实例配置数据库网关，并在此配置步骤选择目标网关DG实例ID，配置方法请参见通过数据库网关DG备份本地或第三方云的私网数据库到云...

库表级恢复

数据库备份DBS 支持表级别的数据恢复能力。当发生数据误删除时，您可以选择只对单个表或数据库进行恢复，而无需恢复全部数据，可用于误操作后的快速订正，以及分析历史数据等场景。功能介绍 数据库备份DBS 在执行逻辑备份时，以数据库对象...

库表级恢复

数据库备份DBS 支持表级别的数据恢复能力。当发生数据误删除时，您可以选择只对单个表或数据库进行恢复，而无需恢复全部数据，可用于误操作后的快速订正，以及分析历史数据等场景。功能介绍 数据库备份DBS 在执行逻辑备份时，以数据库对象...

AUTO模式数据库与DRDS模式数据库

PolarDB-X数据库模式概述从 PolarDB-X 5.4.13版本开始，新增支持AUTO模式的数据库（也称为自动分区数据库）。AUTO模式的数据库支持自动分区，即创建表时无需指定分区键，数据即可自动在集群内均匀分布；同时也支持使用标准的MySQL分区表语...

迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库...

本文为您介绍如何使用数据传输迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库 MySQL 租户。重要如果数据迁移项目长期处于非活跃状态（项目状态为失败、已暂停或已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输...

从备库备份MongoDB数据库

有公网IP:Port的自建数据库 通过专线/VPN网关/智能网关接入的自建数据库 无公网IP:Port的自建数据库(通过数据库网关DG接入)操作步骤本示例的源库部署位置为通过专线/VPN网关/智能网关接入的自建数据库。登录 DBS控制台。单击左侧导航栏中...

自建SQL Server同步至云原生数据仓库 AnalyticDB ...

前提条件自建SQL Server数据库支持的版本，请参见同步方案概览。已创建目标云原生数据仓库AnalyticDB PostgreSQL版实例，如未创建请参见创建实例。目标云原生数据仓库AnalyticDB PostgreSQL版实例的存储空间须大于自建SQL Server...

新功能发布记录

OceanBase 数据库之间的数据迁移支持 TiDB 数据库至 OceanBase 数据库 MySQL 租户的结构迁移、全量迁移、增量同步、全量校验和反向增量迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户支持 PolarDB-X 1.0 数据库至 OceanBase ...

技术架构

高扩展 PolarDB-X 基于Share-Nothing的架构支持水平扩展，同时支持数据库在线扩缩容能力，在OLTP场景下可支持千万级别的并发、以及PB级别的数据存储规模，同样在OLAP场景下，引入MPP并行查询技术，扩展机器后查询能力可线性提升，满足TPC-H...

产品概述

高扩展 PolarDB分布式版基于Share Nothing的架构支持水平扩展，同时支持数据库在线扩缩容能力，在OLTP场景下可支持千万级别的并发、以及PB级别的数据存储规模，同样在OLAP场景下，引入MPP并行查询技术，扩展机器后查询能力可线性提升，...

DDL 同步范围

本文 DDL 同步支持说明中的 DDL 语句，仅作为 DDL 示例，具体语法受不同数据库支持影响，略有差异，请根据不同数据库实际语法评估支持的 DDL 语句。本文 DDL 同步支持说明中的表相关的 CREATE DDL，需要以匹配规则的方式选择对象，并且 ...

设置Dataphin实例的计算引擎为Hadoop

如下图所示：NameNode Hadoop支持添加同集群多个HDFS地址，只要有一个地址校验成功，即可完成元数据采集。例如 host=192.xxx.xx.xxx,webUiPort=500xxx,ipcPort=80xx。集群存储根目录计算引擎类型为E-MapReduce 5.x Hadoop且集群存储类型为...

使用DTS迁移单节点架构的自建MongoDB数据库上云

不支持数据库admin和local作为源和目标库。由于DTS写入数据的逻辑为并发写入，所以会导致目标端占用的存储空间比源端大5%~10%。请确保目标端MongoDB没有与源端相同的主键（默认为_id），否则会导致数据丢失。若目标端有与源端相同的主键，...

企业版和标准版功能对比

支持数据库跨节点动态调度，秒级完成切换，极大提升实例整体并发读写能力。支持不支持全球数据库全球数据库网络（Global Database Network，简称GDN）是由分布在同一个国家内多个地域的多个 PolarDB 集群组成的网络。GDN网络中所有集群...

存储过程

删除数据库 T-SQL命令 sp_rds_drop_database 支持的实例高可用系列说明基础系列实例暂不支持本存储过程，请使用 DROP DATABASE db。请在非目标库的命令窗口下使用高权限账号执行该命令，并确保该账号拥有目标数据库的操作权限。更多...

Parquet

Parquet是Apache开源项目Hadoop支持的一种列存储文件格式，同一份数据以ORC格式和Parquet格式存储时，其数据扫描性能要优于普通文本CSV格式。本文介绍如何在DLA中为Parquet类型的文件创建表。前提条件请参见文档文件格式转换，准备...

AnalyticDB PostgreSQL版7.0版本

支持 数据库连接连接基本信息（连接地址和端口等信息）支持申请外网地址支持监控与报警监控支持报警规则支持数据安全白名单支持 SQL审计支持 SSL 支持备份恢复支持配置参数设置支持数据迁移 7.0版本的数据迁移支持情况...

MongoDB数据库大版本升级说明

支持升级的数据库大版本云数据库 MongoDB 版控制台可以直接升级数据库大版本，但不同产品架构、不同版本的实例支持升级的版本不同，具体情况如下：产品架构规格类型实例的数据库大版本可升级到的数据库大版本单节点架构通用型云盘版...

产品整体介绍

云原生数据仓库AnalyticDB PostgreSQL版提供PB级数据实时交互式分析、ETL/ELT、BI报表展示功能，支持数据高吞吐实时写入与批量导入，提供ACID保证和标准事务隔离级别，采用MPP全并行架构，是一款具有高性价比的云原生数仓产品，提供基于...

2020年

通过CEN实现本地IDC与DTS云服务互通 2020年4月 DTS支持将数据库网关DG（Database Gateway）中接入的本地或第三方云的数据库作为源库或目标库。通过数据库网关将本地IDC或第三方云的数据库接入至阿里云支持阿里云Redis企业版实例间的单向或...

SDK概述

支持数据写入Loghub数据源。Spark Structured Streaming支持写入Druid数据源。优化Loghub数据的类型转换。对Loghub数据源出现的几种服务端错误进行重试。Loghub数据源offset计算逻辑重构，减少额外计算和存储开销。修复读取DataHub无数据时...

JindoData版本说明

JindoData是阿里云开源大数据团队自研的数据湖存储加速套件，面向大数据和AI生态，为阿里云和业界主要数据湖存储系统提供全方位访问加速解决方案。本文为您介绍JindoData各版本支持的功能。背景信息 JindoData是原阿里云EMR SmartData组件...

JindoData概述

JindoFSx存储加速系统 JindoFSx（JindoData服务）是原JindoFS Cache模式的全新升级版本，是面向大数据和AI生态的云原生数据湖存储加速系统，为大数据和AI应用访问各种云存储提供访问加速，支持数据缓存、元数据缓存和P2P加速等功能。...

DESCRIBE

如果您想要新建结构相似的表或数据库，可以通过DESCRIBE语法获取原表或原数据库的结构。适用引擎 DESCRIBE语法适用于宽表引擎和时序引擎。语法 describe_statement:={ DESCRIBE|DESC }[{ DATABASE|TABLE }]identifier 差异说明宽表引擎和...

Serverless模式

支持使用\COPY命令导入本地数据支持使用OSS外表高速导入OSS数据支持 Hadoop生态外表联邦分析支持仓级迁移自建Greenplum迁移到AnalyticDB PostgreSQL版暂不支持。您可以通过外表文件中转导入。Teradata应用迁移至AnalyticDB ...

./hadoop-mapreduce/hadoop-2.8.5/share/hadoop/hdfs/*:./hadoop-mapreduce/hadoop-2.8.5/share/hadoop/hdfs/lib/*:./hadoop-mapreduce/hadoop-2.8.5/share/hadoop/yarn/*:./hadoop-mapreduce/hadoop-2.8.5/share/hadoop/yarn/lib/*:./...

通过CDH5 Hadoop读取和写入OSS数据

CDH（Cloudera's Distribution,including Apache Hadoop）是众多Hadoop发行版本中的一种，最新版本CDH6.0.1中的Hadoop3.0.0版本已经支持OSS，但CDH5中的Hadoop2.6版本不支持OSS。本文介绍如何配置CDH5支持OSS读写。前提条件拥有一个已搭建...

Iceberg数据源

本文介绍云数据库 SelectDB 版与Iceberg数据源进行对接使用的流程，帮助您对Iceberg数据源进行联邦分析。注意事项支持Iceberg V1、V2表格式。V2格式仅支持Position Delete方式，不支持Equality Delete。创建Catalog 基于Hive Metastore...

数据库管理

Database的概念每个正在运行的Lindorm时序引擎实例都管理着一个或多个数据库（简称Database）。在各个Database之间，数据会被隔离。每个Database都有若干时序数据表，结合名词解释的描述，我们可以对时序引擎的数据层级归纳为下图所示：...

REVOKE

REVOKE ALL ON DATABASE db1 FROM user1;或者 REVOKE ALL ON SCHEMA db1 FROM user1;删除指定权限删除用户 user2 对数据库 db2 中的表 table2 所拥有的管理员权限。REVOKE ADMIN ON TABLE db2.table2 FROM user2;删除用户 user3 对表 ...

hadoop支持数据库

新品推荐