加速Job应用数据访问

replicas 表示创建JindoRuntime缓存Worker Pod的数量,该数量将会影响分布式缓存系统的最大缓存可用容量。worker.podMetadata.annotations 可以指定与 ECI实例规格 和 ECI实例镜像缓存 相关的信息。tieredstore.levels 可以通过 quota 字段...

AI加速使用案例汇总

分布式训练加速使用案例 案例名称 描述 NLP:TorchAcc提速BERT Base分布式训练 介绍如何在BERT-Base分布式训练中接入TorchAcc并实现训练加速。目标分类:TorchAcc提速ResNet-50分布式训练 介绍如何在ResNet-50分布式训练中接入TorchAcc并...

OSS/OSS-HDFS的性能优化最佳实践

JindoData缓存服务将文件以块的形式分散存储在分布式缓存服务中,从而避免重复从OSS或OSS-HDFS反复拉取数据,有效减少访问时延,增加计算资源的利用率。详情请参见 阿里云OSS/OSS-HDFS服务透明缓存加速。使用最新版本JindoSDK 最新版本的...

JindoCache概述

JindoCache(原JindoFSx)是阿里云EMR提供的用于加速云原生数据湖的一个服务。他提供了数据缓存和元数据缓存加速功能,并根据...缓存策略 JindoCache支持数据缓存(包括分布式数据缓存、一致性哈希数据缓存和本地缓存)和元数据缓存功能。

CDN加速和OSS传输加速的区别

以下主要介绍CDN加速OSS和OSS传输加速加速方式:实现原理 具体实现加速的原理如下:CDN加速OSS:是建立并覆盖在承载网之上,由遍布全球的边缘节点服务器群组成的分布式网络。阿里云CDN能分担源站压力,避免网络拥塞,确保在不同区域、...

存储类型

IO加速能力:帮助扩展缓存池的大小,提高磁盘IO效率和系统的响应速度,实现缓存加速,提升RDS实例的整体读写性能。IO加速功能正在公测中,详情请参见 RDS MySQL IO加速公测活动。更多信息,请参见 什么是通用云盘、通用云盘IO加速功能。各...

历史功能发布记录(2023年)

JindoRuntime支持加速PV和主机目录数据访问。全部 ack-fluid ack-kube-queue组件发布v0.3.3版本 ack-kube-queue是云原生AI套件提供的任务队列组件,在v0.3.3版本中,通过环境变量设置全局阻塞队列时,将会全局刷新所有Queue的阻塞队列模式...

存储类型

IO加速能力:帮助扩展缓存池的大小,提高磁盘IO效率和系统的响应速度,实现缓存加速,提升RDS实例的整体读写性能。IO加速功能正在公测中,详情请参见 RDS MySQL IO加速测活动、RDS PostgreSQL IO加速公测活动。更多信息,请参见 什么是通用...

事务与Read/Write Concern

本文将介绍关于事务以及Read/Write Concern的最佳实践,帮助您更地使用 云数据库 MongoDB 版 的事务以及Read/Write Concern功能。背景信息 MongoDB 4.0版本支持了单机事务(副本集事务),可以在副本集内的一个或多个集合进行事务操作。...

产品优势

✔️ ✔️ ✔️ ✔️ ✔️ 查询历史热点Key ✔️ ✔️ ❌ ✔️ ✔️ ✔️ 离线全量Key分析 ✔️ ✔️ ❌ ✔️ ✔️ ✔️ 高级功能 通过数据闪回按时间点恢复数据 ✔️ ✔️ ❌ ❌ ❌ ❌ 代理查询缓存 ✔️ ❌ ❌ ❌ ❌ ❌ 全球分布式缓存 ...

混合负载HTAP

说明 分析型查询指的是涉及数据量较大、计算比较复杂的查询,例如对一定时间区间内的数据进行聚合,相比于业务中常见的简单查询,这类查询往往要执行数秒甚至数分钟,需要消耗较多的计算资源。为了提高复杂分析型查询的速度,PolarDB-X 将...

整体架构

其次将实时数据存储在单独的存储IO节点(EIU)上,保证行级的数据实时性,同时对全量数据构建索引,并通过缓存能力对数据进行加速,满足百毫秒级高性能在线分析场景。计算层:羲和计算引擎,智能选择计算模式。开源Spark计算引擎,满足多种...

使用Fluid加速Lindorm S3协议兼容的数据访问

lindorm 100Gi RWO fluid 10m 步骤四:访问数据 方法一:使用Fluid加速数据访问 您可以通过创建应用容器来使用Fluid加速服务,或者提交机器学习作业来体验加速功能。以下示例中以创建一个应用容器多次访问同一数据,并通过比较访问时间来...

推荐的性能设计模式

在设计从OSS上传和下载数据的应用程序时,请使用我们推荐的性能设计模式,使应用程序达到最佳性能。我们还提供性能优化指导原则,供您在规划应用程序架构时参考。对频繁访问的内容使用缓存 如果您的应用程序需要支持同一地区大量用户同时...

PolarDB-X历史

DRDS的商业化成功,标志着阿里巴巴分布式数据库技术完成了从内部孵化到市场化运营的阶段性转变,以及从分布式数据库中间件到分布式数据库系统实质性跨越。PolarDB-X 1.0阶段 关键字:架构与品牌升级;国计民生项目 2018~2019年,DRDS凭借...

如何使用数据缓存加速文件备份?

云备份 本地文件备份客户端已经默认为您开启了利用数据缓存加速文件备份的功能。数据缓存用来加速文件备份并通过磁盘空间交换文件备份的内存开销,不影响本机或异机恢复。本文介绍优化数据缓存配置的操作方法。前提条件 已成功安装 云备份 ...

Tair开发运维规范

说明 针对多地部署应用的场景,您可以通过全球分布式缓存(全球多活),借助其提供的跨域复制(Geo-replication)能力,快速实现数据异地灾备和多活,降低网络延迟和业务设计的复杂度。更多信息,请参见 Tair全球多活简介。为每个业务提供...

技术原理

扩展性原理 扩展性本质在于分而治之,PolarDB-X 1.0 计算资源通过水平拆分(分库分表)和垂直拆分,将数据分散到多个存储资源MySQL以实现获取数据读写并发和存储容量分散的效果。水平拆分(分库分表)PolarDB-X 1.0 具备数据水平拆分的能力...

Tair(Redis企业版)简介

实例存储介质 随着互联网的高速发展,业务场景变得越来越丰富和复杂,Tair(Redis企业版)作为一个高可用、高性能的分布式NoSQL数据库,从访问延时、持久化需求、整体成本这三个核心维度考量,基于DRAM、NVM和ESSD云盘存储介质,推出了多种...

社交互动最佳实践

持续可用 分布式弹性扩容架、负载均衡机制、全站灵敏监控,助力构建高可用网络架构。接入便捷 您无需修改您的业务逻辑,即可通过简单的界面配置快速接入阿里云DCDN。降低成本 您可以将更多的算力、带宽从中心服务器转移到边缘节点,降低您...

DeleteDrdsDB

该接口只是提交了删除数据库的任务,接入方需要依据DescribeDrds接口(查询数据库信息的接口)的返回结果来判断分布式数据库是否删除成功。请求参数 参数名 类型 是否必须 描述 Action String 是 系统规定参数,取值:DeleteDrdsDB。DbName...

Doris概述

Apache Doris是一个高性能、实时的分析型数据库,能够较的满足报表分析、即席查询、数据湖联邦查询加速等使用场景。本文为您介绍Apache Doris。背景信息 关于更多Apache Doris信息,详情请参见 Doris介绍。使用场景 数据源经过各种数据...

应用场景

如果交易服务使用数据访问代理来分库分表,虽然数据访问代理本身不支持分布式事务,但是分布式事务可以轻松和数据访问代理集成,使得数据访问代理具备分布式事务的处理能力,解决分库分表后的跨库分布式事务问题。跨服务的分布式事务 例如...

南京银行

解决方案 2017 年,南京银行引入蚂蚁集团金融级分布式交易架构能力——分布式架构 SOFAStack、分布式数据库 OceanBase,以及大数据平台能力,构建新的互联网金融核心,并于同年 11 月上线互联网金融平台“鑫云+”。客户价值 新平台开创“1+...

技术架构

架构演进理念 当前,分布式领域有3大技术方向:Sharding技术,NewSQL原生分布式技术,云原生DB技术。每种分布式都有其独特的优势和特点。PolarDB-X 1.0 的架构继承了DRDS和X-DB技术的稳定性,结合了PolarDB的云原生技术,融入了NewSQL对于...

JindoData概述

JindoFSx存储加速系统 JindoFSx(JindoData服务)是原JindoFS Cache模式的全新升级版本,是面向大数据和AI生态的云原生数据湖存储加速系统,为大数据和AI应用访问各种云存储提供访问加速,支持数据缓存、元数据缓存和P2P加速等功能。...

使用前须知

CDN基础数据 统计健康度、缓存命中率、下载速度、延时分布等信息。帮助您了解CDN网络的访问性能,通过该数据您可以快速了解CDN整体的服务质量以及终端客户的访问效率,同时也可以根据突发的异常情况及时进行处理。CDN错误分析 统计错误最多...

功能特性

函数形态计算 安全防护 功能集 功能 功能描述 参考文档 DDoS防护 Tbps级别全力防护 DDoS攻击指分布式拒绝服务攻击,即攻击者使用多个被破坏或受控的来源生成大量数据包或请求,最终使攻击的目标(源站)无法正常使用。阿里云全站加速提供...

未来规划

云计算架构的核心逻辑就是通过虚拟化技术带来池化资源,云原生数据库采用分布式数据库架构,实现大规模扩展,每套数据库系统横跨多台服务器和虚拟机,带来了全新的系统管理挑战。其中最核心的挑战就是如何实现弹性以及高可用,实现按需按量...

常见问题

运维管理 容器应用服务常见问题 经典应用服务常见问题 中间件 SOFABoot 常见问题 微服务常见问题 微服务故障排查之 DRM 微服务故障排查之限流 微服务故障排查之 RPC 服务网格-故障排查 消息队列...数据访问代理常见问题 分布式事务常见问题

列存索引如何实现高效数据过滤

该技术可以在过滤数据时,提前过滤掉不需要访问的DataPack,从而减少数据访问量,提高查询效率。具体实现方式是通过访问分区信息和统计信息,结合特定的过滤条件,在查询之前就把不符合条件的数据剪去。这样就可以减少对存储的扫描次数,...

云数据库Redis版产品选型必读

跨地域容灾方案★由多个子实例构成全球分布式实例,所有子实例通过同步通道保持实时数据同步,由通道管理器负责子实例的健康状态监测、主从切换等等异常事件的处理,适用于异地灾备、异地多活、应用就近访问、分摊负载等场景。更多介绍,请...

Tair选型指南

跨地域容灾方案★由多个子实例构成全球分布式实例,所有子实例通过同步通道保持实时数据同步,由通道管理器负责子实例的健康状态监测、主从切换等等异常事件的处理,适用于异地灾备、异地多活、应用就近访问、分摊负载等场景。更多介绍请...

使用CDN加速OSS上的图片资源分发

本文为您介绍如何使用CDN加速OSS上的图片资源分发,提升用户的访问速度和站点稳定性。业务场景 说明 本最佳实践原文来自实战派的 使用CDN来加速OSS上存储的文件资源分发。您在运营电商网站时除了需要上传和下载大量的产品图片,还需要保障...

2023年

创建物化视图的跨机并行加速和批量写入 2023年3月 弹性跨机并行查询功能,支持多个计算节点分布式地执行SQL查询,加速 PolarDB PostgreSQL版 的分析型查询性能。弹性跨机并行查询(ePQ)2023年3月 云数据库ACL安全升级。账号权限 2023年3月...

政企安全加速

阿里云政企安全加速依托阿里云全球分布加速网络,承载全面的安全防护能力。为政府、金融、传媒、零售和交通等企业,提供边缘安全和加速一站服务。使用场景 场景 事件 政府 发生突发社会事件时,政府网站及应用产生高并发访问请求。面对...

功能特性

分布式事务(Distributed Transaction-eXtended,简称 DTX)是蚂蚁集团自主研发的金融级分布式事务中间件,支持跨数据库、跨服务以及混合的方式处理分布式应用,具备多种接入模式和金融级配套功能,本文将主要介绍分布式事务的功能特性。...

Fast Query Cache

其基本思想是:对于每个符合条件的查询语句,直接对结果集进行缓存,当下次查询命中时,直接从缓存中取出对应的结果集返回,不需要经历SQL的分析、优化、执行等复杂过程,通过节约CPU资源来达到查询加速的目标,是一项非常实用的技术。...

阿里云CDN的五大竞争力

加速直播流媒体 视频直播 视频直播服务(ApsaraVideo Live)是基于内容接入、分发网络和大规模分布式实时转码技术打造的音视频直播平台,提供便捷接入、高清流畅、低延迟、高并发的音视频直播服务。使用CDN服务前还没有域名 阿里云域名服务...

应用场景

场景一:Redis作为缓存加速应用访问 Redis作为缓存层,加速应用访问数据存储在后端的数据库中(RDS)。场景二:Redis作为存储数据库使用 游戏部署架构相对简单,主程序部署在ECS上,所有业务数据存储在Redis中,作为持久化数据库。云数据...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 数据库备份 DBS 弹性公网IP 短信服务 人工智能平台 PAI 金融分布式架构
新人特惠 爆款特惠 最新活动 免费试用