集群版-单副本
使用场景 数据量较大 集群版可以有效地扩展数据规模量大小，相比标准版可提供更大的存储量，例如64 GB、128 GB、256 GB集群版，可以有效的满足数据扩展需求。纯缓存应用 单副本集群版的分片服务器由单节点组成，分片服务器某节点出现故障时...
使用独立的Trino集群
背景信息 在使用开源大数据平台E-MapReduce控制台时，您可以在创建DataLake集群、自定义集群或Hadoop集群时选择Trino服务，或者创建独立的Trino集群使用Trino服务。Trino集群具备以下特点：Trino独享集群资源，受其他组件干扰少。支持弹性...
支持倚天云服务器
阿里云E-MapReduce支持使用倚天云服务器构建开源大数据集群。适用客户 全网用户 新增功能/规格 阿里云E-MapReduce（简称EMR）支持使用倚天云服务器构建开源大数据集群。与现有X86架构实例体验完全相同的情况下，具有更高的性价比，帮助用户...
CLB释放和挂载
当您在使用ClickHouse集群实例进行大规模数据处理并希望确保高效负载均衡时，云数据库ClickHouse集群会默认为您挂载CLB。挂载CLB后，ClickHouse集群将实现自动故障转移，通过健康检查分配流量至正常节点，确保集群高可用。挂载CLB属于依赖...
选型配置说明
大数据使用场景 E-MapReduce各集群的场景和核心组件如下表。说明 具体各集群类型支持的组件以控制台实际展示为准。集群类型 场景介绍 核心组件 DataLake 云原生数据湖场景，提供Hive和Spark计算引擎，适用于数据湖场景和离线数据分析等情况...
ECS实例说明
大数据量（10 TB或以上）情况下，推荐使用大数据机型，可以获得极高的性价比。重要 当Core核心实例使用本地盘时，HDFS数据存储在本地盘，需要您自行保证数据的可靠性。Task计算实例 用于补充集群的计算能力，可以使用除大数据型外的所有...
连接数据库集群
连接数据库集群 使用DMS连接集群 DMS是阿里云提供的图形化的数据管理工具，它是一种集数据管理、结构管理、访问安全、BI图表、数据趋势、数据轨迹、性能与优化和服务器管理于一体的数据管理服务。支持对关系型数据库（MySQL、SQL Server、...
访问外部数据源
数据源访问说明 对于Aliyun EMR HDFS集群，数据源打通之后您可以通过以下方式访问集群数据。对于HA集群，默认使用emr-cluster作为hostname。sc.textFile("hdfs:/emr-cluster/tmp/user0/airline_statistic_usa.csv").count()对于非HA集群，...
集群自定义监控报表
集群数据库 io_write_rt SSStore 每次写入平均耗时 集群数据库 io_read_size SSStore 每秒读取数据量 集群数据库 io_size SSStore 每秒处理数据量 集群数据库 io_write_size SSStore 每秒写入数据量 集群数据库 transaction_multi_...
EMR Doctor概述
E-MapReduce Doctor（简称EMR Doctor）是E-MapReduce产品自研的面向开源大数据集群的智能运维诊断系统。通过EMR Doctor（即集群管理页面的“健康检查”功能）可以全局了解集群的健康状况和动态走势，为运维决策和资源优化提供有力的信息...
存储空间分析
您可以在 AnalyticDB for MySQL 空间总览页面查看集群和表的总数据量、冷数据量、热数据量、索引数据量、分区数量、节点的磁盘使用率等指标。查看集群级别的数据量 通过 空间总览 可以查看当前集群的 总数据量、热数据量、冷数据量、以及 ...
集群
Q：如何购买Databricks数据洞察集群 请使用阿里云账号进行购买，如需折扣优惠，请提工单或在产品群中联系我们享受折扣优惠。Q：可以使用阿里云子账号创建集群么？可以。但子账号必须通过主账号进行授权方可购买，权限包括：...
集群架构
云原生内存数据库Tair 提供双副本集群架构实例，可轻松突破Redis自身单线程瓶颈，满足大容量、高性能的业务需求。集群架构支持代理和直连两种连接模式，您可以根据本章节的说明，选择适合业务需求的连接模式。注意事项 云原生 版集群架构不...
集群版-双副本
云数据库Redis版提供双副本集群版实例，可轻松突破Redis自身单线程瓶颈，满足大容量、高性能的业务需求。集群版支持代理和直连两种连接模式，您可以根据本章节的说明，选择适合业务需求的连接模式。注意事项 云原生 版集群架构不支持同时...
security-inspector
版本号 镜像地址 变更时间 变更内容 变更影响 v0.5.0.2-g5e33765-aliyun registry.cn-hangzhou.aliyuncs.com/acs/security-inspector:v0.5.0.2-g5e33765-aliyun 2021年06月24日 解决多个集群使用同一个SLS Project时会出现报表数据显示异常...
Hive统一元数据
EMR上可以支持将数据存放在阿里云OSS中，在大数据量的情况下将数据存储在OSS上会大大降低使用的成本，EMR集群主要用来作为计算资源，在计算完成之后可以随时释放，数据在OSS上，同时也不用再考虑元数据迁移的问题。数据共享。使用统一的...
查看或申请连接地址
使用DMS访问数据库集群。公网 您可以申请或释放公网的连接地址。具体操作，请参见 申请连接地址 和 释放连接地址。公网即因特网，通过公网访问将无法实现 PolarDB 最佳性能。例如：通过公网访问数据库集群进行维护操作。查看连接地址和端口...
查看或申请连接地址
使用DMS访问数据库集群。公网 您可以申请或释放公网的连接地址。具体操作，请参见 申请连接地址 和 释放连接地址。公网即因特网，通过公网访问将无法实现 PolarDB 最佳性能。例如：通过公网访问数据库集群进行维护操作。查看连接地址和端口...
metrics-server
metrics-server是离线监控数据组件。即使您处于离线状态，您也可以通过metrics-server组件查看监控数据。本文介绍metrics-server组件的详细信息、使用说明和变更记录。组件介绍 metrics-server是阿里云容器服务Kubernetes版基于社区开源...
csi-provisioner
csi-provisioner支持数据卷的自动创建能力。本文介绍csi-provisioner组件的介绍、使用说明及变更记录。组件介绍 阿里云csi-provisioner组件提供了数据卷的自动创建能力，目前仅支持云盘、NAS两种存储卷，要求容器服务Kubernetes为1.14及...
csi-plugin
csi-plugin支持数据卷的挂载、卸载功能。ACK默认提供云盘、NAS、OSS三种存储卷的挂载能力。本文介绍csi-plugin组件相关内容的最新动态。组件介绍 阿里云csi-plugin组件遵循标准CSI规范，提供了云盘、NAS、OSS等类型阿里云云存储服务的挂载...
资源类型索引
无 云数据库专属集群MyBase ALIYUN:CDDC:DedicatedHost：添加专属集群主机 ALIYUN:CDDC:DedicatedHostGroup：创建专属集群 ALIYUN:CDDC:MyBase：创建专有版主机 DATASOURCE:CDDC:DedicatedHostGroups：查询专属集群的资源信息 内容分发网络...
集群数据盘使用率告警
处理方法 打开 租户管理 页面，查看租户的 已使用磁盘，如果所有租户累计使用磁盘空间很大，表示业务数据量确实很大，需要对集群做扩容处理。登录业务租户，查询是否开启了回收站：show variables like 'recyclebin'，ON 表示开启，OFF ...
设置透明数据加密TDE
GDN中的主集群开启TDE功能后，GDN中的从集群会默认同步开启该功能，且从集群使用的密钥及密钥所在地域与主集群相同，密钥的地域不支持修改。暂不支持单独为GDN中的从集群开启TDE功能。操作步骤 重要 启用TDE加密会导致PolarDB集群重启，请...
查看代理信息
共享代理：使用共享模式提供数据库代理能力，多个数据库集群共同使用一个数据库代理。独占代理：数据库代理使用单独的资源，具有更高的性能，但需要单独付费使用。当代理版本为 1.0 时，单击“代理版本”处的 升级，可将代理版本升级到共享...
成本控制
概述 集群成本控制：ACK集群中使用的阿里云资源都会在云资源实例中统一打上key为ack.aliyun.com，value为集群ID的标签。您可以在阿里云用户中心建立标签财务单元，从而可以快速统计集群成本。部门成本控制：部门通常是一批应用的组合。通常...
云监控控制台查看监控
云数据库ClickHouse 监控项 说明 连接数使用比例 客户端的使用连接数与最多可使用连接数的比值。连接数 连接集群的客户端个数。cpu使用率 集群各节点的CPU使用率。磁盘空间已用比例 磁盘空间的使用量与最多可使用磁盘空间容量的比值。磁盘...
创建集群模板
使用限制 集群模板目前仅支持Hadoop和Dataflow两种集群类型。注意信息 如果您在2022年2月21日21点（UTC+8）前未使用过EMR数据开发，则无法使用该部分功能。操作步骤 进入数据开发的项目列表页面。通过阿里云账号登录 阿里云E-MapReduce控制...
kritis-validation-hook
支持使用RRSA特性配置组件所需的RAM权限（ACK Serverless集群 默认使用此方法）。组件升级异常可能会导致集群资源变更失败，若需要升级组件，请在业务低峰期进行升级操作。2021年12月 版本号 镜像地址 变更时间 变更内容 变更影响 v0.6.0.5...
数据湖元数据管理
Databricks 数据洞察DBR 7.3,Spark 3.0.1,Scala 2.12及之后版本，在创建集群选择元数据类型时支持数据湖元数据作为Hive数据库。数据湖元数据是服务化高可用并且可扩展的元数据库，您无需额外购买独立的元数据库，就可以实现多个引擎计算，...
设置集群白名单
创建 PolarDB PostgreSQL版 数据库集群后，您需要设置PolarDB集群的IP白名单，并创建集群的初始账号，才能连接和使用该集群。注意事项 默认情况下，IP白名单只包含IP地址127.0.0.1，表示任何IP地址均无法访问该数据库集群。若将IP白名单...
大版本升级常见问题
通过大版本升级进行迁移时，会先从源集群复制一份全量数据至一个新的 PolarDB MySQL版 集群，然后将增量数据保持同步至该新集群。源集群上DTS数据同步任务的数据源仍然是其自身，数据迁移至新的 PolarDB MySQL版 集群并不会影响源集群上的...
设置集群白名单
创建 PolarDB PostgreSQL版（兼容Oracle）集群后，您需要设置PolarDB集群的IP白名单，并创建集群的初始账号，才能连接和使用该集群。注意事项 默认情况下，IP白名单只包含IP地址 127.0.0.1，表示任何IP地址均无法访问该数据库集群。若将IP...
什么是容器服务 Serverless 版
数据计算 面对Spark等数据计算需求，ACK Serverless集群 可以在短时间内启动大量Pod及时处理任务，计算结束时Pod自动释放停止计费，极大降低整体计算成本。更多信息，请参见 通过ACK Serverless创建Spark计算任务。CI/CD 基于 ACK ...
创建Redis集群
您需要先创建 专属集群MyBase，才能使用 专属集群MyBase 内的各项功能。背景信息 关于MyBase Redis的更多介绍，请参见 概述。注意事项 一个 专属集群MyBase 只能位于一个地域。一个 专属集群MyBase 只能属于一个专有网络VPC。创建专属集群 ...
SDK概述
说明 emr-oss：支持Hadoop、Spark与OSS数据源的交互，默认已经存在集群的运行环境中，作业打包时不需要将emr-oss打进去。emr-tablestore：支持Hadoop、Hive、Spark与TableStore数据源的交互，使用时需要打进作业JAR包。emr-mns_2.11：支持...
新功能发布记录
DirectMail:Doman ALIYUN:DirectMail:Ipfilter ALIYUN:KMS:Key ALIYUN:KMS:Secret ALIYUN:MNS:Queue ALIYUN:MNS:Topic ALIYUN:OOS:Parameter ALIYUN:OOS:SecretParameter ALIYUN:OOS:PatchBaseline ALIYUN:RAM:User ALIYUN:RAM:Group ...
API概览
SyncRecordingRules 将某个集群的聚合规则批量同步到全Region的其他目标集群 将某个集群的聚合规则批量同步到全Region的其他目标集群。AddIntegration 集成大盘及采集规则 集成ARMS Prometheus监控的大盘以及采集规则。AddGrafana 集成...
原理优势
专属集群 MyBase 是由多台主机组成的集群，使用本地盘只需为主机支付费用，在集群内可自由分配部署数据库实例。同时，专属集群提供超配能力，提升资源利用效率，实现高性价比。MyBase 的特别之处在于它能通过直接购买主机建立独占的云资源...
创建MySQL集群
您需要先创建 专属集群MyBase，才能使用 专属集群MyBase 内的各项功能。背景信息 关于MyBase MySQL的更多介绍，请参见 概述。重要 MyBase MySQL实例自2023年08月31日起停止新购，已购实例不影响使用，详情请参见【通知】2023年08月31日起...
- 产品推荐
- 这些文档可能帮助您