通过Linked Server访问云下自建SQL Server
本文介绍如何通过VPN在RDS SQL Server上建立Linked Server，以连接到云下自建的SQL Server。前提条件 RDS SQL Server实例需满足如下条件：实例版本：标准版（高可用系列）：2012、2014、2016、2017、2019、2022 企业版（高可用系列）：2012...
自建数据源SelectDB
本文为您介绍如何添加SelectDB自建数据源。前提条件 请确保您的网络连通性：您通过公网连接Quick BI与SelectDB数据库，请添加 Quick BI的IP地址 至数据库白名单，请参见 添加安全组规则。您通过内网连接Quick BI与SelectDB数据库，请通过...
自建数据源达梦
Quick BI支持以公网或阿里云VPC的方式连接达梦数据库，本文为您介绍如何添加达梦自建数据源。前提条件 请确保您的网络连通性：您通过公网连接Quick BI与达梦数据库，请添加 Quick BI的IP地址 至数据库白名单，请参见 添加安全组规则。您...
自建数据源MongoDB
Quick BI支持以公网或阿里云VPC的方式连接MongoDB，本文为您介绍如何添加MongoDB自建数据源。确保您的网络已连通：您通过公网连接Quick BI与MongoDB数据库，请添加 Quick BI的IP地址 至数据库白名单，请参见 添加安全组规则。您通过内网...
异构数据源访问
当目标数据源为自建Hadoop集群，选择 自建Hadoop。数据库类型 选择 HDFS。数据来源 E-MapReduce集群ID。说明 自建Hadoop集群无此参数。网络校验 单击 网络校验，提示网络连通。单击下一步，填写 配置文件。参数 说明 获取方式 参数配置 无 ...
云·智选建站简介
介绍云·智选建站产品，为客户进一步了解，选择适合的产品。云·智选建站，是一款所见即所得的在线自助建站产品，三合一终端，以易用流畅、轻松快速、效果丰富、百度收录、赋能获客与留客为特色，帮助企业建立多端网站，提升品牌，最终为...
使用Druid
hyperUnique","fieldName":"user"}]},"tuningConfig":{"type":"hadoop","partitionsSpec":{"type":"hashed","targetPartitionSize":5000000 },"jobProperties":{"mapreduce.job.classloader":"true"} } },"hadoopDependencyCoordinates":...
基于Hadoop集群支持Delta Lake或Hudi存储机制
选择该方式时，需要配置相关的数据库连接参数，详情请参见 配置自建RDS。内置MySQL：表示元数据存储在集群本地环境的MySQL数据库中。说明 仅限在测试场景下使用该方式，生产场景建议选择 自建RDS。集群创建成功后，单击目标集群 操作 列的 ...
无法连接ECS实例中自建的MySQL服务器
概述 在Linux系统的ECS实例上自建MySQL服务器，可能会出现无法远程连接异常情况，本文主要介绍该情况下的常见错误及解决办法。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据...
Lindorm文件引擎
spark.hadoop.dfs.client.failover.proxy.provider.<dfs.nameservices>":"org.apache.hadoop.hdfs.server.namenode.ha.ConfiguredFailoverProxyProvider","spark.hadoop.dfs.ha.namenodes.<dfs.nameservices>":"nn1,nn2","spark.hadoop....
配置自建RDS
本文介绍如何配置自建的阿里云RDS，作为E-MapReduce（简称EMR）上DataLake集群、Custom集群或Hadoop集群的元数据。前提条件 已购买RDS MySQL实例（EMR所有版本均支持MySQL 5.7，仅EMR-3.35.0以上版本、EMR-5.0.0以上版本同时支持MySQL 5.7...
自建数据源Kylin
本文为您介绍新建自建数据源Kylin。前提条件 确保您的网络已连通：您通过公网连接Quick BI与Kylin数据库，请添加 Quick BI的IP地址 至数据库白名单，请参见 添加安全组规则。您通过内网连接Quick BI与Kylin数据库，请通过以下任意一种方式...
概览
支持 从自建数据库同步数据 文档 简介 是否支持Serverless版本 从ECS上的自建MySQL同步至AnalyticDB PostgreSQL版 数据传输服务DTS（Data Transmission Service）支持将ECS上的自建MySQL数据同步至 AnalyticDB PostgreSQL版，帮助您轻松...
访问Hive数据源
E-MapReduce集群业务场景为 新增数据湖，需具有Hadoop-Common、HDFS、YARN和Hive服务，且元数据为 自建 RDS 或 内置 MySQL。具体操作，请参见 创建集群。或已自建与AnalyticDB MySQL湖仓版（3.0）集群同地域的Hive集群。重要 元数据类型为 ...
实例接入DAS常见问题
数据库网关DBGateway需要使用数据库所在机器的IP地址连接数据库，但MySQL root账号通常只允许使用localhost或127.0.0.1的IP连接，因此DAS暂不支持自建MySQL使用root账号接入。说明 考虑到最小权限原则和账号隔离的情况，建议自建MySQL使用...
迁移方案
本文为您介绍从原有集群（线下IDC自建集群或ECS自建）迁移Flink作业到DataFlow集群的整体流程，包括准备工作，如何迁移作业，以及常见问题等。背景信息 EMR集群的基础信息，请参见 集群规划。准备工作 集群规划 创建DataFlow集群时，集群...
产品优势
特性 Lindorm时序引擎 OpenTSDB 运维管控 服务可用性 99.9%需自行保障，自行搭建集群，自建组件依赖 数据可靠性 99.9999%需自行保障，自行搭建集群，自建组件依赖 软硬件投入 无软硬件投入，按需付费 数据库服务器成本相对较高 维护成本 ...
客户案例
价值体现 从大数据平台上云整体“降本增效”的方案快速切入，迁移到大数据MaxCompute、实时计算、DataWorks后，部分任务有10倍以上的性能提升，存储从自建Hadoop 3PB降到900T，利用Flink实时数据处理能力，将宝宝树现有的场景实时化（...
数据迁移
本文为您介绍如何迁移自建Kudu集群的数据到E-MapReduce上的Hadoop集群。前提条件 您已自建Kudu集群。已创建E-MapReduce的Hadoop集群，并选择了Kudu服务，详情请参见 创建集群。背景信息 EMR Kudu支持社区1.10以及1.11版本，可以使用社区...
数据源管理
当 连接类型 为Kafka时，支持阿里云消息队列Kafka，EMR Kafka，自建Kafka。实例类型：当 连接类型 为数据库时，支持RDS实例，PolarDB实例。访问设置。当 连接类型 为数据库时：实例类型：可选择当前阿里云账号下的RDS，其他阿里云账号的RDS...
操作指导
报错原因 可能是由于自建DNS的连接延迟大造成的。解决方案 您需要在该作业中关闭对于TM的域名解析，即配置 jobmanager.retrieve-taskmanager-hostname:false，该配置并不会影响作业通过域名连接外部服务。配置方法请参见 如何配置作业运行...
HiveMetastore
云原生数据湖分析（Data Lake Analytics，DLA）支持通过CU版访问用户自建的HiveMetastore。本文主要介绍如何通过DLA连接并查询HiveMetastore里存储在HDFS的数据。前提条件 DLA目前仅支持通过CU版访问HiveMetastore，请确保您已经开通了DLA ...
使用E-Mapreduce访问
E-MapReduce HDFS文件系统上的数据，需要使用数据迁移工具hadoop distcp进行数据迁移，详情请参见 从自建HDFS迁移数据。执行下面的指令将E-MapReduce HDFS全部数据迁移到文件引擎，实例ID为文件引擎的实例ID，根据实际情况修改。hadoop ...
AnalyticDB PostgreSQL版7.0版本
支持 使用\COPY命令导入本地数据 支持 使用OSS外表高速导入OSS数据 支持 Hadoop生态外表联邦分析 支持 仓级迁移 自建Greenplum迁移到AnalyticDB PostgreSQL版 支持 Teradata应用迁移至AnalyticDB PostgreSQL 暂不支持 您可以通过外表文件...
自建SQL Server通过物理网关迁移上云
说明 若您的自建SQL Server数据库所在服务器无法连接公网，但有一台专门的堡垒机进行网络通信时，请参考其他迁移方案，请参见 自建SQL Server通过堡垒机架构的物理网关迁移上云。前提条件 源端自建SQL Server需要满足以下条件。源端自建...
迁移HDFS数据到OSS-HDFS
如果您使用的是自建ECS集群，需确保集群具备Hadoop2.7+或Hadoop3.x环境以及进行MapReduce作业的能力。通过自建ECS集群完成迁移任务前，您需要自行部署 JindoData（JindoData包含JindoSDK以及JindoFSx）。建议跟随版本迭代，下载最新版本。...
ECS实例自建数据库间迁移
本文以MySQL数据库为例，介绍如何配置DTS迁移任务，实现ECS实例上自建数据库间的数据迁移。前提条件 在目标ECS实例的安全组中放行MySQL监听的端口（默认端口号为3306）。具体操作，请参见 添加安全组规则。分别为源ECS实例和目标ECS实例上...
使用Presto访问
本章节介绍如何通过自建的Presto使用文件引擎。背景信息 Presto是一个开源的分布式SQL查询引擎，适用于交互式分析查询，数据量支持从GB到PB字节。Presto支持在线数据查询，包括Hive、Cassandra、关系数据库以及专有数据存储。说明 本文中...
本地自建数据库迁移到ECS
本文以MySQL数据库为例，介绍如何配置DTS迁移任务，实现从本地自建数据库到ECS实例自建数据库间的数据迁移。前提条件 创建ECS实例。具体操作，请参见 自定义购买实例。在ECS实例的安全组中已放行MySQL监听的端口号（默认端口号为3306）。...
通过Hive访问云数据库HBase
如果您使用的是ECS自建的Hive时，不需要配置value可以直接和云数据库HBase连接。在Hive中读写云数据库HBase表。如果云数据库HBase表不存在，可在Hive中直接创建云数据库HBase的关联表。使用以下命令进入Hive cli命令行。hive 执行如下语句...
EMR HBase版本
本文为您介绍HBase版本的兼容性、选择建议以及发布记录。EMR HBase版本 EMR HBase随EMR版本一起发布，EMR主版本分为3.x系列和5.x系列，其中EMR 3.x系列...如果没有自建集群，可根据依赖的Hadoop版本，选择EMR 3.x或EMR 5.x系列的HBase版本。
迁移HDFS数据到OSS
如果您使用的是自建ECS集群，需要具备Hadoop2.7+或Hadoop3.x环境以及进行MapReduce作业的能力。步骤一：下载JAR包 登录EMR集群。登录 EMR on ECS控制台。单击创建的EMR集群。单击 节点管理 页签，然后单击节点组左侧的。单击ECS ID。在ECS...
Hive服务异常排查及处理
问题原因2：可能是客户端与HiveMetastore之间网络不通，常见于自建ECS客户端场景。解决方案：先查看两台机器能否连通，如果不能则需要解决机器网络互通的问题。HiveServer2问题 常见异常一：HiveServer2突然重启，一段时间内恢复正常 问题...
HDFS
云原生数据湖分析（Data Lake Analytics，DLA）支持通过CU版访问用户自建的HDFS。本文主要介绍如何通过DLA连接并查询HDFS上的数据。前提条件 DLA目前仅支持通过CU版访问HDFS，请确保您已经开通了DLA CU版本，详情请参见 CU版本快速入门。...
快速入门
相比自建HDFS存储，使用 文件存储 HDFS 版 服务可以大量节约维护成本，降低数据安全风险。文件存储 HDFS 版 服务适用什么场景？文件存储 HDFS 版 适用于互联网行业、金融行业等有大数据计算与存储分析需求的行业客户进行海量数据存储和离线...
从自建TiDB增量迁移至RDS MySQL
前提条件 说明 增量迁移前，您可先将自建TiDB中的存量数据迁移至RDS MySQL，请参见 从自建TiDB全量迁移至RDS MySQL。快速创建RDS MySQL实例。重要 由于该功能仅在部分地域支持，目标RDS MySQL实例所属的地域需为华东1（杭州）、华东2（上海...
Hive作业异常排查及处理
在自建ECS上提交Hive作业异常 在自建ECS上提交Hive作业（不在EMR产品范围内），会出现不可预期报错。请使用EMR Gateway集群或者使用EMR-CLI自定义部署Gateway环境。更多信息，请参见 使用EMR-CLI自定义部署Gateway环境。数据倾斜导致的作业...
自助建站方式汇总
管理ECS实例自建数据库 ECS实例自建数据库，是指在ECS实例上安装并配置的数据库。您可以使用数据管理服务DMS来管理ECS实例自建数据库。本教程以MySQL为例，介绍如何使用DMS添加并管理ECS实例自建数据库。部署Linux主机管理系统WDCP WDCP...
使用CreateCluster API创建集群
参数值为USER_RDS，对应控制台的 自建RDS。参数值${dbURL}：填写RDS地址，示例值：jdbc:mysql:/rm-bp1qg11xjszt3x3*.mysql.rds.aliyuncs.com/hivemeta 。参数${dbUser}：填写RDS用户名。参数${dbPassword}：填写RDS用户${dbUser}对应的密码...
自建数据源MySQL
Quick BI支持以公网或内网的方式连接MySQL，本文为您介绍如何添加MySQL自建数据源。使用原则 支持5.5、5.6、5.7、8.0版本。前提条件 您通过公网连接Quick BI与MySQL数据库，请添加Quick BI的IP地址至数据库白名单，请参见 添加安全组规则。...
- 产品推荐
- 这些文档可能帮助您