数据库备份DBS
数据库备份(Database Backup,简称DBS)是为数据库提供连续数据保护、低成本的备份服务。它可以为多种环境的数据提供强有力的保护,包括企业数据中心、其他云厂商、混合云及公共云。通过使用阿里实时数据流技术,实现数据库秒级备份,秒级恢复,保障数据安全。
秒级RPO,数据库日志解析同步 秒级RTO,全增合并 多级存储自动冷热数据分离 按付费与弹性扩缩.一键恢复到RDS DLA备份数据湖分析 DMS历史数据归档.更多产品与服务.DBS助力启博云保障云上云下数据库备份安全,实现多环境数据库统一管理。通过现代化备份平台,实现任意1秒的恢复、单表恢复,恢复能力大幅提升,解决不同云...
来自: 云产品
基于Elasticsearch的订单检索加速最佳实践
基于Elasticsearch的订单检索加速最佳实践
随着企业信息化程度越来越高,核心业务数据存储在传统关系型数据库中不可避免地会遇到一个问题:单表记录不断增多,数据检索速度会变慢,尤其是对中文的模糊查询(建立普通索引完全不起作用)。虽然数据库自身在不断完善,但效果有限且没办法灵活扩展,复杂场景无法应对。 本方案基于阿里云Elasticsearch作为二级索引库,数据集成产品提供Binlog实时订阅,实时解析、增量数据实时更新及二级索引库之间进行数据实时同步,为数据库提供“能力增益”, 不仅能从根本解决主库抗压问题,提升稳定性;同时支持高效率、高性能、高弹性、低成本、多复杂场景的检索加速服务。
本实践基于阿里云 Elasticsearch作为 二级索引库,数据集成产品提供 Binlog 订阅,实时解析、增量数据实时更新及二 级索引库之间的数据实时同步,为数据库提 供“能力增益”,不仅能从根本解决主库抗 压问题,提升稳定性;同时支持高效率、高 性能、高弹性、低成本、多复杂场景的检索 加速服务。解决问题 产品列表 1.单...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,云数据库RDS MySQL 版,DataWorks,Elasticsearch
基于MaxCompute的大数据BI分析
基于MaxCompute的大数据BI分析
场景描述 本文以电商行业为例,将业务数据和日志数据使用 MaxCompute做ETL之后,同步到ADB进行实时 分析,之后通过QuickBI进行快速可视化展示。 解决问题 1.互联网行业、电商、游戏行业等网站、App、 小程序应用内BI分析场景。 2.可扩展到各类网站BI分析场景使用。 产品列表 1.MaxCompute 2.分析型数据MySQL版 3.日志服务SLS 4.QuickBI 5.云服务器ECS 6.RDSMySQL版
它是一种集数据迁移、数据订阅及数据实时 同步于一体的数据传输服务。数据传输致力于在公共云、混合云场景下,解决远距 离、毫秒级异步数据传输难题。它底层的数据流基础设施为阿里双 11异地多活 基础架构,为数千下游应用提供实时数据流,已在线上稳定运行 5年之久。您 可以使用数据传输轻松构建安全、可扩展、高可用的...
来自: 最佳实践 | 相关产品:日志服务(SLS),大数据计算服务 MaxCompute,云原生数据仓库AnalyticDB My,Quick BI,云速搭CADT
云上高并发系统改造
云上高并发系统改造
场景描述 随着业务的发展,系统并发压力越来越大,如何 进行系统改造以满足高并发场景的业务需求成 为了一个技术难题。本实践抽象于客户的实际场 景,提供高并发下系统改造的理论指导和部分实 操演示。主要适用于以下场景: 1.系统并发压力大,需要进行系统应用改造。 2.数据层并发压力大,需进行分库分表改造。 3.数据库数据量巨大,亟待分库分表解决查询 和写入瓶颈的场景。 方案优势/解决问题 1.在水平扩展阶段,我们除了通过SLB做负载 均衡外,我们可以通过SLB下挂nginx的方 式,增加负载均衡侧的可扩展性 2.在数据库拆分阶段,在做好数据规划后,我 们借助DTS进行数据迁移,通过DRDS将 RDS MySQL的数据拆分到多个分库和分 表中。 产品列表 专用网络VPC 负载均衡SLB 云服务器ECS 数据库RDSMySQL 数据传输服务DTS PrivateZone 分布式关系型数据库DRDS
假设我们需要对表 lineitem进行拆分,现在该表数据 119994608 rows,加上预计增量规划 1.5亿数据,则在使用 1个 RDS实例进行拆分的时候,计算方式如下:文档版本:20220506(发布日期)40 云上高并发系统改造 数据迁移和压测演练 物理分库上的物理分表数=150,000,000/(1*8)/5,000,000=3.75,向上取整=4。本 例将使用 4...
来自: 最佳实践 | 相关产品:云服务器ECS,云数据库RDS MySQL 版,数据传输,云解析 PrivateZone,云原生分布式数据库PolarDB-X,云速搭CADT
小型互联网迁移阿里云
小型互联网迁移阿里云
场景描述 本方案主要适用于中小型互联网企业,从他云 迁移到阿里云的最佳实践。方案中会概述网络 规划、服务器、数据库、存储数据、Kafka和 镜像数据的迁移方案描述。同时在实践环节, 增加服务器和RDS的迁移操作演练和验证。 解决问题 提供服务器、数据库等关键环节的平滑迁移方 案 提供云上高可用架构参考 提供模拟简单的演练回归流程机制 产品列表 云服务器(ECS)、迁云工具(SMC)、数据库 (RDS)、数据库(Redis)、数据传输(DTS)、 负载均衡(SLB)、专有络(VPC)等
它是一种集数据迁移、数据订阅及数据实时同步于一体 的数据传输服务。解决远距离、毫秒级异步数据传输难题。详见:https://www.aliyun.com/product/dts RDS:(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据 库服务。基于阿里云分布式文件系统和 SSD盘高性能存储,RDS支持 MySQL、SQL Server、...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS
新零售商超基于Serverless服务化改造
新零售商超基于Serverless服务化改造
某零售商超行业龙头企业,主要业务涵盖购物中心、大卖场、综合超市、标准超市、精品超市、便利店、无人值守智慧商店等零售业态,涉及全渠道零售、仓储物流、餐饮、消费服务、数据服务、金融业务、跨境贸易等领域。为了持续支持业务高速且稳定地发展,其在快速上云后,将核心业务改造为全Serverless架构的中台模式,采用函数计算 + API网关 + 表格存储OTS 作为计算网络存储核心,弹性支撑日常和大促峰谷所需资源,轻松支撑618/双11/双12大促。 核心价值 l 全 Serverless 架构:FC + API 网关 + OTS Serverless 解决方案。 l 弹性高可用:毫秒级弹性扩容、充足的资源池水位、跨可用区高可用。 l 敏捷开发免运维:函数式极简编程可专注于业务创新,无采购和部署成本、提供监控报警等完备的可观测能力。
配置数据迁移 DTS:支持关系型数据库、NoSQL、大数据(OLAP)等数据源,集数据迁移、订阅及 时同步功能于一体,能够解决公共云、混合云场景下,远距离、毫秒级异步数据传输 难题。其底层基础设施采用阿里双 11 异地多活架构,为数千下游应用提供实时数据 流,已在线上稳定运行 6年之久。详见:...
来自: 最佳实践 | 相关产品:云数据库RDS MySQL 版,数据传输,函数计算,API网关,表格存储
企业构建统一CMDB数据源
企业构建统一CMDB数据源
典型场景 l 企业/ISV构建多云CMDB平台,对接数十款产品的API,拉取、清洗、格式化、存储配置数据是复杂且高成本的工作。 l 企业日常的资源管理,需依赖资源配置历史、资源关系数据进行故障溯源和影响评估。 解决方案 l 企业管理账号设置Config配置数据投递,将所有账号的资源配置快照和历史归集到统一地址留存。 l 使用OSS做长期归档,使用SLS做实时分析和监听。获取全量资源数据并及时感知云上资源的变更。 l 将数据集成到自有CMDB平台 客户价值 l 基于配置审计简单便捷的持续收集云上资源配置数据,在自建CMDB过程中节省大量人力和时间成本。 l 跨账号统一收集数据,实现中心化的资源配置管理。 l 实现资源配置数据的持续收集和监听,及时感知云上资源的增删改,洞察异常变更。
实现资源配置数据的持续收集和监听,及时感知云上资源的删改,洞察异常变 更。注意事项 方案中给出了基于增量变更的数据获取方式,企业可以需要根据自身实际情况进 行拓展,这些建立和示例并不确保满足每个企业的所有需求。企业目前通过配置审计将资源配置数据投递到指定存储空间不需要花费费用,但 您需为账号下存储这些...
来自: 最佳实践 | 相关产品:云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,日志服务(SLS),配置审计
Elasticsearch
阿里云检索分析服务 Elasticsearch 版是100%兼容开源的分布式检索、分析套件。提供ELK等开源全托管的产品服务能力。为结构化/非结构化数据提供低成本、高性能及可靠性的检索、分析平台级产品服务。具备读写分离、存算分离、弹性伸缩、智能化运维、免费的X-Pack高级商业特性等产品特性。
主副本分片实时增量同步提升写入性能.bulk写入请求批量聚合有效提高集群写入吞吐.云端10倍弹性索引构建,写入按付费降低成本.智能混合存储,无须预留存储容量降低成本.时序数据模型及PromQL查询,指标读写性能增强.基于多种索引压缩算法降低索引存储超40%.支持更丰富的SQL查询功能.集成达摩院NLP分词提供更强的分词能力....
来自: 云产品
企业上云workshop
企业上云workshop
本文模拟了如下场景: 1. 线下 IDC 环境中部署了一个业务系统,业务是利用 wordpress 系统提供网站服务。 2. 本文详细介绍了如何将以上线下系统搬迁到云上, 包括如何在云上构建以上业务系统,如何迁移线下 系统到云上,如何割接。 3. 最后介绍了迁移上云后,如何部署安全系统。 解决问题 IDC 业务系统搬迁上云 云上构建业务系统 部署安全系统
停止 DTS源库向目标库的迁移任务,并配置反向的数据同步 为保证在割接失败可以随时回退回 IDC环境,需要关闭 IDC数据库向云上数据库的 迁移任务(需确认迁移任务处于“增量迁移 无延迟”状态)。并配置反向的数据同步。文档版本:20200127 75 应用割接 企业上云 workshop-IDC业务迁移上云 操作步骤 步骤1 登录数据传输 ...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,负载均衡 SLB,弹性公网IP,文件存储NAS,云数据库PolarDB,Web应用防火墙,云防火墙,SSL证书,云速搭
阿里云最佳实践离线大数据workshop
阿里云最佳实践离线大数据workshop
本最佳实践,首先搭建一个简化的电商 demo 系统,然后为此 demo 系统构建一套离 线大数据分析系统。 实践目标 1. 学习搭建一个离线大数据分析系统,学习从数据采集到数据存储和业务分析的业 务流程。 2. 整个离线大数据分析系统全部基于阿里云产品进行搭建,学习掌运用各个服务组 件及各个组件之间如何联动。 背景知识要求 熟练掌握 SQL 语法 对大数据体系系统知识有一定的了解
步骤1 双击新业务1,打开开发窗口,在新业务1的开发窗口,找到数据集成下面的离线 ,在弹出的窗口中,填写节点名称ods_user_info_sync,单击提交。文档版本:20210802(发布日期)48阿里云最佳实践金融大数据WorkShop 构建离线大数据分析系统 步骤2 创建成功之后,双击这个节点的图标。步骤3 在打开的节点配置页面,...
来自: 最佳实践 | 相关产品:云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,日志服务(SLS),大数据计算服务 MaxCompute,DataV数据可视化,数据总线,Quick BI,云速搭
自建Hadoop迁移到阿里云EMR
自建Hadoop迁移到阿里云EMR
场景描述 场景1:自建Hadoop集群数据(HDFS)迁移到 阿里云EMR集群的HDFS文件系统; 场景2:自建Hadoop集群数据(HDFS)迁移到 计算存储分离架构的阿里云EMR集群,以OSS 和JindoFS作为EMR集群的后端存储。 解决的问题 客户自建Hadoop迁移到阿里云EMR集群的 技术方案; 基于IPSecVPN隧道构建安全和低成本数据 传输链路 产品列表 E-MapReduce,VPC,ECS,OSS,VPN网关。
在 EMR集群的 master节点进行大量数据迁移 步骤1 在 4.3节验证了少量数据的迁移,我们选择另一个较大数据的文件夹进行迁移,本 践 方 案 中 以 源 Hadoop 集 群 中 如 下 目 录 为 例 进 行 演 示/usr/dfs/data/flume/kafka/20191113,在您进行演练,请以实际环境为准。步骤2 参考 4.3节步骤 3启动数据迁移任务,将...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,VPN网关,E-MapReduce,云速搭
基于函数计算FC实现企业级权限精准控制Kafka跨实例消息同步
基于函数计算FC实现企业级权限精准控制Kafka跨实例消息<em>同步</em>
应用场景 在大数据场景,企业的Kafka实例可能存在多种情况,比如使用阿里云Kafka服务,可能是自建开源Kafka,或者是其他云上的云Kafka。不同的业务使用不同类型的Kafka实例,在这个前提下Kafka实例之间可能会需要消息同步的情况: 同帐号容灾场景:比如Kafka实例都是阿里云Kafka,但是Kafka实例会有主备之分,需要将主Kafka实例的消息实时同步到备Kafka。 跨帐号或异地容灾:这类场景比如主Kafka是阿里云Kafka,备Kafka是IDC开源自建Kafka,或者是其他云上的Kafka。 不同业务之间消息同步:因为现在的业务通常不会是信息孤岛,都需要消息互通,所以可能是A业务的Kafka实例消息需要同步到B业务的Kafka实例,并且这两个Kafka实例归属不同的RAM角色,有自己独自的权限控制。 解决问题 解决使用开源组件做消息同步的高成本问题。 解决使用开源组件做消息同步的并发性能、稳定性问题。 解决使用开源组件做消息同步的可靠性问题(重试机制,容错机制,死信队列等)。 大幅提升构建消息同步架构的效率,降低构建复杂度问题。
不同的业务使 用不同类型的Kafka实例,在这个前提下Kafka 例之间可能会需要消息同步的情况: 帐号容灾场景:比如Kafka实例都是阿里云 Kafka,但是Kafka实例会有主备之分,需要将 产品列表 主Kafka实例的消息实时同步到备Kafka。 专有网络VPC  跨帐号或异地容灾:这类场景比如主Kafka是阿 里云Kafka,备Kafka是IDC...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,函数计算,消息队列 Kafka 版
基于OSS Object FC实现非结构化文件实时处理最佳实践
基于OSS Object FC实现非结构化文件<em>实时</em>处理最佳实践
现在绝大多数客户都有很多非结构化的数据存在OSS中,以图片,视频,音频居多。举一个图片处理的场景,现在各种终端种类繁多,不同的终端对图片的格式、分辨率要求也不同,所以一张图片往往会有很多张衍生图,那如果所有的衍生图都存在OSS中,那存储的成本会增加,所以就可以通过OSS Object FC的方案,在不同的终端请求时,对OSS中的原图基于终端的要求做实时处理,然后响应返回,这样OSS中只需要存储原图即可。音视频也有类似的场景。
比如请求时实时加水印、 美颜处理、实时裁剪图片、实时截帧等。部署架构 名词解释  OPAP(ObjectProcessAccessPoint):是在AP的能力上,拓展了FC功能,通过OPAP访问 的GetObject会触发FC。其他类型的请求会退化到绑定的AP。文档版本:20240304 4基于OSSObjectFC实现非结构化文件实时处理最佳实践 最佳实践概述  AP...
来自: 最佳实践 | 相关产品:对象存储 OSS,函数计算
RTC
实时音视频(RTC)依托基于阿里云全球3200+节点及多年的音视频技术积累,提供高可用、高品质、超低延时的音视频通信服务。主要适用于直播互动、社交语聊、多人通话等场景。
主唱可以实时控制歌曲的播放状态,歌单管理,并且可以实现实时地将状态同步给其他演唱者和观众.提供音量调整、混音比例调整、美声变声等功能.适配大量设备,实现低延迟耳返,给演唱者及时的反馈.通用客户案例单logo.唐家哲,靖鑫,也树.通用客户案例单logo.【标题】更多产品与服务.唐家哲,靖鑫,也树.基于领先的内容接入与分发...
来自: 云产品
容器多云统一监控日志
容器多云统一监控日志
多云、混合云成为常态,Forrester 报告中指出,未来 89% 的企业至少使用两个云,74% 的企业至少使用三个甚至更多公有云,在面对多云/混合云这样大的趋势下,Gartner报告指出,安全、运维复杂性、财务复杂性是多云架构的主要挑战,本方案给出了在多云/混合云场景下,构建基于容器环境下的统一管理、统一监控和统一日志方案,解决多云、混合云场景下,运维复杂性问题。 应用场景 客户在阿里云以外的其他云服务商(AWS、Azure、GCP、TencentCloud、HuaweiCloud等)或者IDC基于容器(Kubernetes)运行业务系统,希望构建容器场景下的统一监控日志系统,方便做不同大屏和问题分析定位。 解决问题 •构建容器多云统一监控和日志系统,在一个平台可以看到不同环境系统的运行情况。
这里会将应用中的云资源按照免费、按付费和包年包月进行分类显示,如果产品享 受折扣这里会自动将账号对应的优惠显示出来,价格清单中的价格信息为当时的实时 价格,具体产品价格信息请以页面显示为准。文档版本:20240322 17容器多云统一监控日志 部署基础环境 应用计价成功后,CADT实时生成一个应用架构成本分析报告,...
来自: 最佳实践 | 相关产品:专有网络 VPC,容器服务 ACK,日志服务(SLS),应用实时监控服务 ARMS ,微服务引擎
基于MSE和SAE的微服务部署与压测
基于MSE和SAE的微服务部署与压测
通过云原生微服务引擎MSE、SAE、PTS、ARMS产品,为spring cloud微服务应用提供部署和测试能力,提供一个经典微服务应用上云的典型架构,实现微服务应用的快速落地。
2.2 引擎规格 1核2G 集群节点数 3 网络类型 专有网络 公网带宽 0 实例监控 可观测监控Prometheus版 节点 属性 配置 说明 开通产品 应用实时监控服务 arms 默认 服务规格 试用版 节点 属性 配置 说明 实例名 PTS压测包 商品类型 按抵扣资源包 资源包类型 基础版 PTS压测包 最高虚拟用户(VU)5万 VUM 3万 购买长 预付费/按...
来自: 最佳实践 | 相关产品:负载均衡 SLB,弹性公网IP,性能测试 PTS,应用实时监控服务 ARMS ,Serverless 应用引擎,微服务引擎,云速搭
实时同步RDS与Redis构建缓存一致性
通过DTS数据订阅能力,用户可以实时订阅RDS日志数据变更,并将其写入Redis以实现缓存数据的更新,可以实现MySQL与Redis之间的缓存同步一致性。
产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云备案控制台实时同步RDS与Redis构建缓存一致性方案介绍方案优势应用场景方案部署解决方案推荐实时同步RDS与Redis构建缓存一致性通过DTS数据订阅能力,用户可以实时订阅RDS日志数据变更,并将其写入Redis以实现缓存数据的更新。这样的配置可以实现MySQL...
来自: 解决方案
开源Flink迁移实时计算Flink托管版最佳实践
开源Flink迁移<em>实时</em>计算Flink<em>全</em>托管版最佳实践
本方案介绍如何将自建开源Flink集群的流式任务(包含Datastream、Table/SQL、PyFlink任务)迁移至阿里云实时计算全托管版。
文档版本:20211222 8 开源 Flink迁移实时计算Flink托管版 基础环境搭建 1.1.2.Flink集群资源评估 阿里云实时计算 Flink版产品按照 CU 计费,1CU=1Core+4G MEM,参考产品官 方介绍,每个计算 的 CU 节点每秒钟处理能力如下:简单作业(指仅仅进行数据同步,或者在数据同步中涉及一些简单的过滤清洗)1.每个计算 CU 可处理 ...
来自: 最佳实践 | 相关产品:专有网络 VPC,云数据库RDS MySQL 版,E-MapReduce,实时计算,消息队列 Kafka 版,云速搭CADT
离线实时一体化数仓
将OLAP分析、即席分析、在线服务等多个系统统一, 能够极大简化数仓架构,并实现一份数据、多种查询分析与服务,为企业大数据平台降本提效。
解决问题:数仓启动成本高即开即用,托管,满足离线分析、实时分析、在线服务等多个场景的需求。冷热数据分层,主从实例等Serverless能力,满足查询性能的前提下降低整体成本。解决问题:负载隔离及运维难一份数据,多个团队分析资源隔离保持稳定性;提供监控和告警,热升级等企业级运维需求。相关产品云原生大数据计算...
来自: 解决方案
Flink+Hologres搭建实时数仓
Flink+Hologres搭建实时数仓解决方案将Hologres与Flink深度集成,提供一体化的实时数仓联合解决方案,实现了数仓分层之间实时数据的高效流动,解决实时数仓分层问题。
具体价格与您选择的资源规格、数据、运行长等有关,请以控制台显示的实际报价以及最终账单为准)方案部署一步步跟随方案教程,带你快速上手,进行方案部署。方案介绍Flink+Hologres搭建实时数仓通过Flink将数据源写入Hologres,形成ODS层。Flink订阅ODS层的Binlog进行加工,形成DWD层再次写入Hologres。Flink订阅DWD层...
来自: 解决方案
< 1 2 3 >
共有3页 跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据传输服务 混合云存储 闪电立方 弹性公网IP 短信服务 人工智能平台 PAI

新品推荐

切换为移动版

新人特惠 爆款特惠 最新活动 免费试用