产品优势
灵活支撑系统规模快速增长及业务突发性带来的资源伸缩，提高视频计算资源利用率。启动成本低，建设周期短 设备端无需集成SDK，RTMP或GB/T28181国标协议直接接入。极低的初始启动成本，减少本地建设、集成和运维。API方便业务集成和二次开发...
资源预估选型
为了避免业务突发峰值，推荐您预留40%左右的计算资源，保证线上服务稳定。QPS（行/秒）推荐VCU 说明 0~1000 2 VCU 建议作为最小生产环境的VCU配置使用，适用于较低负载时访问。1000~20000 4~6 VCU 适用于中低负载时配置使用。20000以上 10 ...
如何选择升配与扩容
因此选择升配还是扩容，遵循以下原则：业务突发流量、高峰期等引起的资源不足，优先选择升配，可以更快的解决性能瓶颈。同时，业务高峰过去之后，也更方便使用降配来节省资源。日常开发、运维等过程中计划内的增加资源，优先选择增加节点，...
传媒行业最佳实践
方案优势：阿里云DCDN提供有序回源，多源负载均衡等能力减少业务突发时源站的压力。同时您可以将热点新闻的页面资源预取至全球边缘节点，供用户就近访问，提升体验的同时降低源站压力。网站/APP加速 业务挑战：新闻媒体网站或APP，除了有...
SmartData常见问题
本文汇总了使用SmartData时的常见问题。基本概念 什么是JindoFS？已经有阿里云OSS，为什么还要使用JindoFS？JindoFS有哪些使用方式？使用场景是什么？JindoFS SDK和缓存模式的区别是什么？JindoFS缓存模式和Block模式的区别是怎么？JindoFS...
IO突发
如果您的业务波动较大，业务波峰较频繁，可以开启通用云盘的IO突发功能，使云盘的IOPS不受限于最大IOPS，在业务波峰时获得更高的IO能力，满足突发业务需求。简介 通用云盘是RDS PostgreSQL支持的一种新存储类型。在兼容ESSD云盘所有特性的...
管理通用云盘
相较于ESSD云盘，通用云盘开启IO突发功能后，能够在保持云盘容量不变的情况下，在业务波峰时提供更高的IO能力，使云盘的IOPS不受限于最大IOPS，从而满足IO突发业务的需求。本文介绍如何管理通用云盘，您可以将ESSD云盘类型的实例存储类型...
IO突发
如果您的业务波动较大，业务波峰较频繁，可以开启通用云盘的IO突发功能，使云盘的IOPS不受限于最大IOPS，在业务波峰时获得更高的IO能力，满足突发业务需求。本文介绍如何通过控制台和API接口开启和关闭RDS MySQL实例通用云盘的IO突发功能。...
什么是通用云盘
为满足多样化的存储需求，并在存储资源有限的情况下提升数据库性能，推荐您使用RDS SQL Server推出的新型存储类型，即通用云盘，本文介绍通用云盘的主要特性、使用方法及通用云盘IO突发功能，帮助您了解并部署这一新型存储类型。...
SOFAStack 总体经济影响报告
非量化收益 对突发业务支撑能力带来的营业额提升 在受访企业面临业务量突发增大的情况下，SOFAStack平台的容器实例优化了资源的启动速度，达到毫秒级别，结合容器集群的弹性扩容能力，每秒交易量（TPS）从几年前的3000-5000提高至峰值5万的...
管理通用云盘
相较于ESSD云盘，通用云盘开启IO突发功能后，能够在保持云盘容量不变的情况下，在业务波峰时提供更高的IO能力，使云盘的IOPS不受限于最大IOPS，从而满足IO突发业务的需求。本文介绍如何将ESSD云盘变更为通用云盘、以及如何开启通用云盘IO...
Hudi
本文为您介绍如何使用Hudi连接器。背景信息 Apache Hudi是一种开源的数据湖表格式框架。Hudi基于对象存储或者HDFS组织文件布局，保证ACID，支持行级别的高效更新和删除，从而降低数据ETL开发门槛。同时该框架还支持自动管理及合并小文件，...
通用云盘
面对多样化的存储需求，在存储资源有限的状况下提升数据库性能，推荐使用RDS PostgreSQL推出的新型存储类型-通用云盘，本文档为您介绍通用云盘的性能特点、适用场景及计费方式，帮助您理解并部署这一新型存储类型。简介 通用云盘是RDS ...
存储类型介绍
通用云盘 通用云盘兼容ESSD云盘的所有特性，基础能力与ESSD PL1云盘相同，在ESSD云盘的基础上提供了IO突发能力（MySQL、PostgreSQL、SQL Server支持），使云盘的IOPS不受限于最大IOPS，在业务波峰时提供更高的IO能力，满足突发业务需求。...
在线教育最佳实践
背景信息 随着在线教育市场规模不断扩大，呈现出流量大、用户分布广、直播教学等特点。低时延性、强交互性、稳定流畅是保障...切换加速区域 相关链接 购买套餐资源包 开通DCDN服务 计费概述 什么是DCDN DCDN与CDN的区别 使用DCDN为ECS业务提效
零售行业最佳实践
背景信息 随着电商零售市场的成熟，消费者越来越关注购物体验。电商零售平台的响应速度、稳定性和安全性，均可能直接影响...切换加速区域 相关链接 购买套餐资源包 开通DCDN服务 计费概述 什么是DCDN DCDN与CDN的区别 使用DCDN为ECS业务提效
什么是弹性容器实例
也可以通过Virtual Kubelet对接Kubernetes集群，借助ECI的弹性能力轻松应对突发业务流量。如上图所示，ECI与您业务系统的对接方式包括：（推荐）通过阿里云ACK Serverless集群部署业务，支持基于Kubernetes的容器服务全托管，提供无需运维...
存储类型
通用云盘 通用云盘兼容ESSD云盘的所有特性，基础能力与ESSD PL1云盘相同，在ESSD云盘的基础上提供了IO突发能力和IO加速能力：IO突发能力：使云盘的IOPS不受限于最大IOPS，在业务波峰时提供更高的IO能力，满足突发业务需求。IO加速能力：...
新零售：特步
PolarDB-X 专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题，历经各届天猫双十一及阿里云各行业客户业务的考验，助力企业加速完成业务数字化转型。本文介绍特步（中国）有限公司如何通过 PolarDB-X 应对...
产品优势
副本集架构 适用于读多写少或有临时活动的突发业务场景。副本集实例提供一个可供读写访问的Primary节点（主节点），一个、三个或五个提供高可用的Secondary节点（从节点），一个隐藏的Hidden节点（隐藏节点），0~5个可选的ReadOnly节点...
存储类型
在ESSD云盘的基础上提供了IO突发能力（MySQL、PostgreSQL、SQL Server支持）和IO加速能力（MySQL、PostgreSQL支持）：IO突发能力：使云盘的IOPS不受限于最大IOPS，在业务波峰时提供更高的IO能力，满足突发业务需求。IO加速能力：帮助扩展...
IO加速
如果您的业务波动较大，业务波峰较频繁，可以开启通用云盘的IO突发功能，使云盘的IOPS不受限于最大IOPS，在业务波峰时获得更高的IO能力，满足突发业务需求。更多信息，请参见 IO突发。常见问题 Q：SQL执行时，报错 ERROR:could not write ...
平衡业务目标与成本
可以根据业务场景选择使用 突发性能实例，用于应对突发性能需求并优化成本。更多性能注意事项请参见 高效性能支柱。成本与安全合规 高安全性要求的应用负载通常会导致高成本，企业需要根据业务特性对应用负载设定安全性要求，不建议在应用...
使用Druid
背景信息 E-MapReduce将Druid作为单独的集群类型，主要基于以下几方面的考虑：E-MapReduce Druid可以完全脱离Hadoop来使用。大数据量情况下，E-MapReduce Druid对内存要求比较高，尤其是Broker和Historical节点。E-MapReduce Druid本身资源...
YARN高安全特性使用指南
YARN服务管理权限 默认高安全配置为 yarn.admin.acl=hadoop，其中 hadoop 前有单个空格，表示授权给hadoop组（EMR的服务启动Linux用户通常都是使用hadoop组）作为服务管理员。Hadoop中用户默认的组映射来自节点操作系统的组信息。说明 yarn...
在ECI中访问HDFS数据
usr/local/hadoop-2.7.2/share/hadoop/hdfs:/usr/local/hadoop-2.7.2/share/hadoop/hdfs/lib/*:/usr/local/hadoop-2.7.2/share/hadoop/hdfs/*:/usr/local/hadoop-2.7.2/share/hadoop/yarn/lib/*:/usr/local/hadoop-2.7.2/share/hadoop/...
DataWorks on EMR数据安全方案
本文以联合使用DataWorks与EMR为例，为您介绍DataWorks on EMR场景下的数据安全方案。背景信息 DataWorks on EMR目前支持LDAP认证方式，Open LDAP组件目前已经集成 Hive,spark thrift-server,kyuubi,presto,impala，保障认证通过的用户才...
Spark本地调试环境搭建
因为JindoSDK暂时不支持Windows系统和Mac M1系列，所以该类系统如果想在本地测试，可以使用 hadoop-aliyun，具体操作如下。在 pom.xml 中添加 hadoop-aliyun 相关的依赖。oss-><dependency><groupId>org.apache.hadoop</groupId>...
计费概述
通过本文您可以了解表格存储的计费模式、付费方式和使用推荐。表格存储包括预留模式和按量模式两种计费模式。视频介绍 计费模式 表格存储的计费模式请参见下表。重要 SQL本身不会有额外的费用，但是使用SQL查询数据过程中涉及到的表扫描、...
作业配置指南
设置为true时将使用标准snappy库解压，否则使用hadoop默认的snappy库解压。访问用户VPC 和 连接用户数据源 相关参数：参数名称 默认值 参数说明 spark.dla.eni.enable false 这个参数为true表示启用打通VPC功能。spark.dla.eni.vswitch.id ...
添加数据源
说明 请确保HDFS用户有足够的权限（推荐用hadoop或hdfs），否则可能导致数据同步时无法读取文件。数据源类型 为 阿里云对象存储（OSS）配置重要参数，描述如下：参数 描述 数据源类型 数据源来源类型，此处选择 阿里云对象存储（OSS）。...
什么是表格存储
预留模式 计量计费项 资源预估选型 业务存在突发流量 业务场景中存在不可预测的突发峰值，例如媒资、新闻等。按量模式和资源包 计量计费项 资源包介绍 批量离线任务 每天存在定时低频但海量的数据离线读写。按量模式和资源包 计量计费项 ...
准实时推理场景
突发流量支撑 函数计算平台提供充足的GPU资源供给，当业务遭遇突发流量时，函数计算将以秒级弹性供给海量GPU算力资源，避免因GPU算力供给不足、GPU算力弹性滞后导致的业务受损。功能原理 当GPU函数部署完成后，函数计算默认通过按量GPU实例...
准实时推理场景
突发流量支撑 函数计算平台提供充足的GPU资源供给，当业务遭遇突发流量时，函数计算将以秒级弹性供给海量GPU算力资源，避免因GPU算力供给不足、GPU算力弹性滞后导致的业务受损。功能原理 当GPU函数部署完成后，函数计算默认通过按量GPU实例...
迁移Hadoop文件系统数据至JindoFS
迁移数据 Hadoop FsShell 对于文件较少或者数据量较小的场景，可以直接使用Hadoop的FsShell进行同步：hadoop dfs-cp hdfs:/emr-cluster/README.md jfs:/emr-jfs/hadoop dfs-cp oss:/oss_bucket/README.md jfs:/emr-jfs/DistCp 对于文件较多...
风险治理的方法论
IT系统因无法承载突发的业务流量而瘫痪，又因缺乏基础的灾备恢复机制致使整个业务长时间中断，这将使企业遭受巨大的业务损失和后续的客户流失。经过第三方认证机构评定，IT系统不符合行业基础安全标准，商务合作伙伴认为该企业存在较大的...
ESSD云盘变更为通用云盘
通用云盘开启IO突发功能后，能够在保持云盘容量不变的情况下，在业务波峰时提供更高的IO能力，使云盘的IOPS不受限于最大IOPS，满足IO突发业务的需求。您可以将任何PL等级的ESSD云盘变更为通用云盘，提升云盘的IO性能。本文介绍如何将ESSD云...
排查Redis实例内存使用率高的问题
当Redis内存不足时，可能导致Key频繁被逐出、响应时间上升、QPS（每秒访问次数）不稳定等问题，进而影响业务运行。如果发现Redis内存占满或收到内存告警，可参考本文判断内存占用是否长期过高、内存占用是否突然上升、是否发生内存倾斜，并...
证券交易所
业务架构 技术架构 架构说明 ECS和RDS支持实时弹性扩展，以应对预期或突发的业务爆发及性能压力。稳定、高并发的Aliware，DRDS，Redis缓存等中间件和服务助力企业业务重组。云上方案优化企业资金分配，根据业务量支出费用，且计算、存储...
什么是OSS-HDFS服务
引擎支持列表 生态类型 引擎/平台 参考文档 开源生态 Flink 开源Flink使用JindoSDK处理OSS-HDFS服务的数据 Flume Flume使用JindoSDK写入OSS-HDFS服务 Hadoop Hadoop使用JindoSDK访问OSS-HDFS服务 HBase HBase使用OSS-HDFS服务作为底层存储 ...
- 产品推荐
- 这些文档可能帮助您