增强E-R
使用方法 传统E-R DMS具有传统E-R能力，可以基于数据库中的物理外键构建E-R图。如下操作步骤为您演示如何实现传统E-R。登录 数据管理DMS 5.0。单击首页左侧的数据库实例，在实例列表中选择目标实例。单击目标实例，左键双击目标数据库名称...
Redis社区版性能白皮书
r 使用的Key的随机范围，即使用多少个不同Key。threads 启动多线程压测，并指定线程个数。说明 参数的更多信息，请参见 redis-benchmark。测试结果 对包括 SET、GET 等在内的十余种 Redis 基础命令进行性能测试并给出测试指标，且囊括了...
内存型（兼容Redis 6.0）性能白皮书
r 使用的Key的随机范围，即使用多少个不同key。threads 启动多线程压测，并指定线程个数。说明 参数的更多信息，请参见 redis-benchmark。测试结果 主要对包括SET、GET等在内的十余种 Redis 基础命令进行性能测试并给出测试指标，且囊括了...
内存型（兼容Redis 6.0）性能白皮书
r 使用的Key的随机范围，即使用多少个不同key。threads 启动多线程压测，并指定线程个数。说明 参数的更多信息，请参见 redis-benchmark。测试结果 主要对包括SET、GET等在内的十余种 Redis 基础命令进行性能测试并给出测试指标，且囊括了...
内存型实例规格取值表
实例规格 默认vCPU数 CPU物理核心数取值范围 每核线程数默认值 每核线程数取值范围 ecs.r6e.large 2 1 2 1、2 ecs.r6e.xlarge 4 2 2 1、2 ecs.r6e.2xlarge 8 2、4 2 1、2 ecs.r6e.4xlarge 16 2、4、6、8 2 1、2 ecs.r6e.8xlarge 32 2、4、6...
内存型
内存型实例规格族r8a 内存型实例规格族r8i 内存平衡增强型实例规格族r8ae 内存型实例规格族r8y 内存增强型实例规格族re7p 内存型实例规格族r7p 存储增强内存型...实例规格族r6e 内存型实例规格族r6 内存增强型实例规格族re6 其他在售（如果售罄...
存储I/O性能
重要 本章节仅适用于全新一代企业级实例规格族，包括hfg7、hfc7、hfr7、g6e、c6e、r6e等，更多规格族请参见 全新一代企业级实例规格族存储I/O性能表。同时，不适用于本地盘。I/O大小介绍 I/O（input/output，即读写）是应用发起的一次或多...
共享内存通信（SMC）使用说明
Alibaba Cloud Linux 3提供的共享内存通信SMC（Shared Memory Communication）是一种兼容socket层、使用共享内存技术实现的高性能内核网络协议栈。根据共享内存技术的不同，SMC又可以细分为基于Internal Shared Memory（ISM）技术的SMC ...
共享内存通信（SMC）使用说明
Alibaba Cloud Linux 3提供的共享内存通信SMC（Shared Memory Communication）是一种兼容socket层、使用共享内存技术实现的高性能内核网络协议栈。根据共享内存技术的不同，SMC又可以细分为基于Internal Shared Memory（ISM）技术的SMC ...
使用HBase Shell
创建HBase集群后，您可以使用HBase Shell连接HBase，并进行读取和写入数据等操作。本文为您介绍如何连接HBase，以及常用的HBase Shell命令。前提条件 已创建数据服务场景（DataServing）的集群，详情请参见 创建集群。连接HBase 通过SSH...
Spark SQL、Dataset和DataFrame基础操作
Python和R不支持Dataset API，但是由于Python和R的动态特性，Dataset API的许多优点已经可用。DataFrame是组织成命名列的Dataset。他在概念上相当于关系数据库中的一个表，或R和Python中的一个DataFrame，但是进行了更丰富的优化。...
计费概述
计费项 GCS的计费项是基于渲染实例（R实例）的使用量计费，即使用不同算力规格的R实例单价（小时或月）与使用时长（小时或月）的乘积。说明 渲染实例（R实例）是面向实时3D渲染组合实例，实例计算资源包含：CPU计算资源，GPU计算资源（含...
Join优化
Shuffle方式 网络开销 物理算子 适用场景 BroadCast N*T(R)Hash Join/Nest Loop Join 通用 Shuffle T(S)+T(R)Hash Join 通用 Bucket Shuffle T(R)Hash Join Join条件中存在左表的分布式列，且左表执行时为单分区 Colocation 0 Hash Join ...
什么是EMR Workflow
产品优势 即开即用，免部署、免运维。基于阿里云基础设施提供稳定可靠的云原生Serverless服务。与阿里云RAM账号体系兼容，提供企业级的安全和隔离能力。无缝对接EMR资源集群和各种大数据计算存储引擎，例如Hive、Spark和Flink等。提供与...
退款说明
本文介绍阿里云E-MapReduce的退款规则和退款方式。退款规则与方式 计费方式 退款规则 退款方式 包年包月 包年包月的集群在购买时已经根据购买时长预先支付了费用。在释放ECS实例时，系统将同时退还您EMR未使用部分的款项。说明 释放ECS实例...
Superset（仅对存量用户开放）
因为E-MapReduce Druid也支持SQL，所以您可以通过Superset以两种方式访问E-MapReduce Druid，即Apache Druid原生查询语言和SQL方式。前提条件 已创建E-MapReduce（简称EMR）的Hadoop或Druid集群，并选择了Superset服务，详情请参见 创建...
相关性函数
相关性算子可以计算两组数据的相关系数，用于分析这两组数据的变化趋势是否存在关联关系。相关性算子 只支持华东2（上海）地域。相关性算子支持最大数据量为1000万行。用于离线调度的相关性算子。...下图为某种油液的温度-黏度示意图。
为RAM用户授权
为确保RAM用户能正常使用E-MapReduce控制台功能，您需要使用阿里云账号登录访问控制RAM（Resource Access Management）控制台，授予RAM用户相应的权限。背景信息 访问控制RAM是阿里云提供的资源访问控制服务，详情请参见 什么是访问控制。...
资源合并
资源重复与合并 假设您的某一台资源R 既拥有内网IP：A，又拥有外网IP：B，您在前期调研时采用录入了资源内网IP，CMH 会默认使用A作为资源R的标志符。但是当使用迁移工具SMC 进行迁移时，配置的迁移任务的源端采用了外网IP，则CMH会生成一个...
气泡图（v3.x版本）
气泡图是散点图的一种，与散点图相比，气泡图使用气泡来展示数据，且可以自定义气泡的大小，能够直观生动地展示多个时间下离散数据的差异。本文介绍气泡图各配置项的含义。配置 重要 本文介绍v3.x版本的气泡图的配置项，如需查看v3.0以下...
E-MapReduce服务等级协议（SLA）
本服务等级协议（Service Level Agreement，简称“SLA”）规定了阿里云向客户提供的E-MapReduce（简称“EMR”）的服务可用性等级指标及赔偿方案。服务等级协议详情请参见 E-MapReduce服务等级协议。
Spark概述
架构 Spark架构如下图所示，基于Spark Core构建了Spark SQL、Spark Streaming、MLlib和Graphx四个主要编程库，分别用于离线ETL（Extract-Transform-Load）、在线数据分析、流计算、机器学习和图计算等场景，详情请参见 Apache Spark官网。...
旧版控制台文档说明
监控大盘：作业大盘：您可以使用新版控制台的E-MapReduce Doctor（简称EMR Doctor）全局了解集群的健康状况和动态走势，详情请参见 E-MapReduce Doctor。日志中心：详情请参见 管理日志。事件中心：详情请参见 管理事件中心。集群监控：...
开启native查询加速
不支持EMR-5.X系列及后续版本的E-MapReduce集群。不支持代码spark.read.schema（userDefinedSchema）。支持Date类型区间为1400-01-01到9999-12-31。同一个表中查询列不支持区分大小写。例如，NAME和name两个列在同一个表中无法使用查询加速...
开启native查询加速
不支持EMR-5.X系列及后续版本的E-MapReduce集群。不支持代码spark.read.schema（userDefinedSchema）。支持Date类型区间为1400-01-01到9999-12-31。同一个表中查询列不支持区分大小写。例如，NAME和name两个列在同一个表中无法使用查询加速...
开启native查询加速
不支持EMR-5.X系列及后续版本的E-MapReduce集群。不支持代码spark.read.schema（userDefinedSchema）。支持Date类型区间为1400-01-01到9999-12-31。同一个表中查询列不支持区分大小写。例如，NAME和name两个列在同一个表中无法使用查询加速...
EMR对接外部KDC
EMR-3.43.1及后续版本，EMR-5.9.1及后续版本的E-MapReduce（简称EMR）集群支持在创建集群时对接您外部自建的KDC（Key Distribution Center）。这意味着当您在EMR集群中使用Kerberos身份验证时，您可以选择使用由集群创建的KDC，也可以选择...
通过JDBC方式访问Presto
在Maven中引入JDBC Driver 您需要根据您的E-MapReduce集群版本，在 pom.xml 文件中添加相应的依赖来引入Presto JDBC Driver。组件版本 JDBC Driver Driver类名 0.2XX<dependency><groupId>...
什么是EMR Notebook
它支持EMR多种类型的集群，无需复杂配置，即可实现与EMR集群服务的连通，开箱即用。协同开发 支持团队内多用户同时访问EMR Notebook，每个用户的Notebook开发环境是独立的，互不影响，实现高效协作。兼容开源 EMR Notebook兼容开源Jupyter ...
RFM分析
RFM分析用于分析 RFM模型 中用户的RFM指标情况，得出各RFM用户类型的分布，如下图所示。操作步骤 进入RFM分析页面，有两种方式：选择工作空间>用户洞察>用户分析>RFM分析，进入RFM分析页面，如上图所示。选择工作空间>用户洞察>营销模型>...
常见命令
您可以在已经创建好的E-MapReduce（简称EMR）集群中，直接使用Kudu命令来操作。本文为您介绍Kudu的常见命令。前提条件 已创建集群，并且选择了Kudu服务，详情请参见 创建集群。已登录集群，详情请参见 登录集群。查看Master列表 语法 kudu ...
计费概述
如果您想继续使用，可以在释放前手动续费，或开通自动续费，延长ECS和E-MapReduce的使用时间。续费说明 欠费说明 按量付费的集群欠费后有停机风险，系统会提醒或通知您。请及时续费，避免对您的服务造成影响。欠费说明 退款说明 为您介绍...
下线DataNode
随着数据湖技术的普及，越来越多的E-MapReduce（简称EMR）用户选择把数据存放在全托管的数据存储服务中（例如，OSS-HDFS和OSS对象存储等），这样原有的Hadoop集群就不需要很多的DataNode。下线（Decommission）EMR集群的DataNode（Core节点...
0040-00000241
问题描述 图片处理模糊算子的参数r使用了非法值。问题原因 图片处理模糊算子的参数r为非数字或不符合取值范围要求。问题示例 GET/example_image?x-oss-process=image/blur,r_abc,s_25 ...
内切圆
当r取值大于原图最小边的一半时，以原图最小边的一半为值返回内切圆，即r=（原图最小边-1）÷2，返回图片的宽和高为r×2+1。示例 您可以通过文件URL、SDK、API方式设置图片处理参数。本文以文件URL为例进行介绍。文件URL仅适用于公共访问的...
Hudi MetaStore使用说明
本文为您介绍如何使用E-MapReduce的Hudi MetaStore。背景信息 Hudi每次操作数据都会新增时间线（instant），查询时需要读取所有时间线元数据，以获得在该时间点上的有效分区或文件，其中Partition Listing和File Listing涉及大量IO操作，...
弹性伸缩概述
弹性伸缩是E-MapReduce提供的能够根据业务需求和策略自动调整计算能力（即节点数量）的功能。您可以为节点组设置按时间或按负载的伸缩策略，在业务需求增长时，弹性伸缩自动为节点组增加节点，来保证计算能力；在业务需求下降时，弹性伸缩...
克隆集群
当您需要基于已有集群快速创建一个新的集群时，您可以使用E-MapReduce的克隆集群功能。前提条件 已创建数据湖（DataLake）、实时数据流（DataFlow）、数据分析（OLAP）、数据服务（DataServing）和自定义场景（Custom）的集群，详情请参见 ...
0040-00000237
问题描述 图片处理圆角矩形算子的参数r使用了非法值。问题原因 图片处理圆角矩形的参数r为非数字或不符合取值范围要求。问题示例 GET/example_image?x-oss-process=image/rounded-corners,r_abc ...
在GPU实例上使用RAPIDS加速图像搜索任务
本文以使用RAPIDS加速图像搜索任务为例，介绍如何在预装镜像的GPU实例上使用RAPIDS加速库。前提条件 使用本教程进行操作前，请确保您已经注册了阿里云账号。如还未注册，请先完成 账号注册。背景信息 RAPIDS（全称Real-time Acceleration ...
- 产品推荐
- 这些文档可能帮助您