原理架构
本文简单介绍数据同步服务的整个系统架构及基本实现原理。系统架构 数据同步服务的逻辑架构图：全量同步：负责将表数据从源端数据库同步到目的端数据库，支持异构数据库间同步。增量同步：负责将源端的增量数据同步到目的端，主要包含 ...
函数存储选型
为了满足业务存储和访问文件的诉求，函数计算 提供丰富的存储类型，包括文件存储NAS、对象存储OSS、临时硬盘和层。本文介绍 函数计算 支持的存储类型的适用场景及差异，供您进行技术选型。选型分析 对比项 文件存储NAS 对象存储OSS 临时...
渐进显示
您可以通过渐进显示参数，将OSS内存储的原图修改为渐进显示。本文介绍设定图片渐进显示时所用到的参数及示例。当网络环境较差或图片较大时，图片在网页上有两种显示方式：标准显示：图片会按照从上到下的顺序一行一行地加载显示。渐进显示...
函数存储选型
为了满足业务存储和访问文件的诉求，函数计算 提供丰富的存储类型，包括文件存储NAS、对象存储OSS、临时硬盘和层。本文介绍 函数计算 支持的存储类型的适用场景及差异，供您进行技术选型。选型分析 对比项 文件存储NAS 对象存储OSS 临时...
索引切割
您可以通过索引切割参数，将OSS存储的原图按指定大小分割，并截取需要的图片。本文介绍索引切割所用到的参数及示例。参数说明 操作名称：indexcrop 参数说明如下：参数 描述 取值范围 x 指定在x轴切割出的每块区域的长度。x参数与y参数只能...
OSS中的透明图片添加水印不生效
问题描述 为存储在阿里云对象存储OSS中的图片文件增加水印时，水印不生效。问题原因 图片水印不支持原图有 透明图 层。添加水印时是以原图颜色为背景色，将水印图片融合进入RGB通道，Alpha通道保留原值。Alpha通道只有两个值（全透明或者不...
查询Bucket级别的用量情况
背景信息 您可以在OSS管理控制台查看以下资源的使用量：基础数据：包括存储空间、使用带宽、使用流量、请求次数、图片处理量和图片处理请求次数。热点统计：包括PV（访问次数）、UV（来源IP数）、Referer（Top 10）或IP（Top 10）。其中，...
CDN访问加速
存储空间难以扩容 静态资源的存储空间会受到服务器硬盘容量的限制。当存储空间不足时，要对服务器硬盘进行扩容或升级，需要投入更多的资金和时间成本。云上网站架构 如下图所示，云上网站架构下，动态资源和静态资源分离，能够解决海量用户...
应用场景
本文介绍对象存储OSS的主要应用场景。图片和音视频等应用的海量存储 OSS可用于图片、音视频、日志等海量文件的存储。各种终端设备、Web网站程序、移动应用可以直接向OSS写入或读取数据。OSS支持流式写入和文件写入两种方式。网页或者移动...
常见问题
产品简介FAQ 云存储网关提供哪些服务？云存储网关支持哪些协议？产品原理FAQ 文件网关中的文件与OSS间的映射关系如何？文件网关缓存的淘汰机制是什么？文件网关的缓存有什么作用？云存储网关文件上传原理解析是什么？极速同步如何保证反向...
查看集群日报与分析
HDFS基础信息 在HDFS基础信息中，您可以获取以下图表信息：存储量趋势图 文件数趋势图 HDFS存储评分趋势图 文件总数，总存储量，小文件、极小文件个数，冷数据存储大小 HDFS使用分析 在HDFS使用分析中，您可以获取以下图表信息：HDFS User...
主从实例读写分离部署（共享存储）
本文介绍高可用方案的一些基本原理以及如何配置共享存储的主从多实例。单实例自动恢复的高可用方案 Hologres计算节点均为容器调度（即下图中的Worker Node），资源管理器（Resource Manager）负责周期性健康检查。当出现1分钟容器响应超时...
OSS图片文件在进行图片处理之后被旋转的处理方法
问题描述 阿里云对象存储OSS中的图片文件在进行图片处理之后，原图片被旋转。问题原因 一般通过手机或者倒置相机等方式拍出来的照片其实已经旋转，带有旋转参数。但是在图片查看器、浏览器中打开会对旋转参数的图片进行处理，由于倒置无法...
多元索引介绍
多元索引基于倒排索引和列式存储，可以解决大数据的复杂查询难题，包括非主键列查询、全文检索、前缀查询、模糊查询、多字段自由组合查询、嵌套查询、地理位置查询、统计聚合（max、min、count、sum）等功能。多元索引在车联网场景中主要...
冷热分离介绍
冷热分离功能支持将冷热数据存储在不同的介质上，冷存储的存储类型为容量型存储，热存储的存储类型为标准型云存储、性能型云存储、本地SSD盘或本地HDD盘。冷存储的价格仅为标准型存储的20%，大大降低了存储成本。原理简介 在功能实现上，...
资源包概述
低频-本地冗余存储包 抵扣低频-本地冗余存储类型的OSS文件的存储费用 归档-本地冗余存储包 抵扣归档-本地冗余存储类型的OSS文件的存储费用 标准-同城冗余存储包 抵扣标准-同城冗余存储类型的OSS文件的存储费用 低频-同城冗余存储包 抵扣...
成本
AnalyticDB PostgreSQL版 采用计算节点本地存储的模式，支持行式存储和列式存储，支持非易失存储、固态硬盘、机械硬盘等多种存储介质，支持单节点最大10TB存储空间。在此基础之上，AnalyticDB PostgreSQL版 进一步提供了存储压缩能力、OSS...
现代IM系统中的消息系统—架构
本章节主要介绍现代IM系统中的消息系统架构以及基于表格存储（Tablestore）自研的Timeline模型构建的消息系统。基于Timeline构建的现代消息系统能够同时支持消息系统的多种特性，包括多端同步、消息漫游和在线检索，在性能和规模上能够实现...
数据导入概览
从阿里云对象存储OSS导入数据至图数据库GDB实例 图数据库GDB服务端集成有数据导入模块，可以获取您提供的.csv格式的OSS数据文件，并将其解析为图中的点数据和边数据，然后将点数据和边数据导入至图数据库GDB实例。步骤 步骤说明 ① 将需要...
格式转换
通过格式转换参数，您无需将图片下载到本地进行转换，只需指定URL转换存储在OSS内原图的格式。本文介绍对图片进行格式转换时所用到的参数及示例。使用场景 适应不同设备和平台：不同的浏览器、操作系统或移动设备可能支持不同的图片格式。...
概述
PolarDB PostgreSQL版 支持冷热数据分层存储功能，使用OSS等更低成本的存储介质，将冷热数据进行分层存储。将访问频率和更新频率低的数据转存到OSS中，可以有效降低存储成本。本文介绍了冷数据分层存储的优势和技术原理。功能优势 当 开启...
迁移工具
将MySQL数据同步迁移到表格存储 将HBase数据同步到表格存储 将MaxCompute数据同步到表格存储 将表格存储数据同步到MaxCompute 将表格存储数据同步迁移到OSS 将表格存储数据表中数据同步到另一个数据表 将表格存储时序表中数据同步到另一个...
概述
PolarDB PostgreSQL版（兼容Oracle）支持冷热数据分层存储功能，使用OSS等更低成本的存储介质，将冷热数据进行分层存储。将访问频率和更新频率低的数据转存到OSS中，可以有效降低存储成本。本文介绍了冷数据分层存储的优势和技术原理。功能...
概述
PolarDB PostgreSQL版（兼容Oracle）支持冷热数据分层存储功能，使用OSS等更低成本的存储介质，将冷热数据进行分层存储。将访问频率和更新频率低的数据转存到OSS中，可以有效降低存储成本。本文介绍了冷数据分层存储的优势和技术原理。功能...
快速入门
阿里云对象存储OSS与智能媒体管理（IMM）深度结合，支持文档预览、文档格式转换、人脸识别、图片分析、二维码识别等丰富的数据分析处理操作。本文介绍如何通过OSS使用IMM的相关功能。前提条件 仅华北 2（北京）、华东 1（杭州）、华东 2...
锐化
您可以通过锐化参数，提高存储在OSS内原图的清晰度。本文介绍对图片进行锐化时所用到的参数及示例。参数说明 操作名称：sharpen 参数说明如下：参数 描述 取值范围[value]设置锐化效果的强度。[50,399]取值越大，图片越清晰，但过大的值...
产品架构
存储引擎Storage Engine（SE）主要用于管理和处理数据，包括创建、查询、更新和删除（简称 CRUD）数据等，关于存储引擎详细的技术原理请参见 Hologres存储引擎技术揭秘。Cache（缓存）主要是结果缓存，提高查询性能。HOS Scheduler 轻量级...
iGraph Writer配置
1.快速介绍 图计算服务iGraph是阿里云自主研发的高性能分布式图计算产品，为开发者提供万亿级数据规模的一站式图技术服务。iGraphWriter插件用于批量向iGraph增量更新数据。2.实现原理 在iGraph中，对数据的增删改都属于增量更新。...
通过HTTP请求存储在OSS的图片时出现403错误
问题描述 图片上传到阿里云对象存储OSS后，通过HTTP请求该图片URL，发现返回403错误。...相关文档 OSS权限相关常见错误的排查方法 OSS跨域资源共享（CORS）出现的常见错误及解决方案 OSS上传回调中的常见错误及分析处理 适用于 对象存储OSS
如何打造千万级Feed流系统
本技术解决方案技术实现原理请参见 表格存储Feed流方案原理。方案实现 本方案使用Timeline模型实现Feed流系统的存储与同步功能，包含示例代码并支持一键部署，详情请参见 方案实现。后续步骤 针对本技术方案没有讨论到但是您可能需要关注的...
DELETE
技术原理 DELETE会先写到内存表（Mem Table），然后Flush成文件，如下图所示。在此过程中，如果是行存表，被删除的数据将会被Flush成一个新的小文件，在Compaction的时候做合并成文件块；如果是列存表，系统会在内存中存储一张标记表，然后...
文件系统存储类型
存储类型 通用型NAS文件系统提供了为实现低成本存储而设计的不同存储类型，分别为标准存储、低频存储和归档存储。标准存储：提供高可靠、高可用、高性能的文件存储服务，适用于存储频繁访问的热数据。在创建文件系统后，文件系统数据首先...
对比度
您可以通过对比度参数，调整存储在OSS内原图的对比度。本文介绍调节图片对比度时所用到的参数及示例。参数说明 操作名称：contrast 参数 描述 取值范围[value]指定图片的对比度。[-100,100]取值降低图片对比度。取值=0：维持原图对比度。...
使用函数计算清洗数据
表格存储高并发的写入性能以及低廉的存储成本非常适合物联网、日志、监控数据的存储。将数据写入到表格存储时，您可以通过函数计算对新增的数据做简单的清洗，将清洗后的数据写回到表格存储的另一种数据表中。同时，您也可以实时访问表格...
OSS管理控制台概览
查询所有Bucket当前的存储用量 您可以在 基础数据 区域查询所有Bucket的存储用量，包括标准存储、低频访问、归档存储、冷归档存储、深度冷归档存储和ECS快照的存储量。低频访问、归档存储、冷归档存储、深度冷归档存储类型文件有最小计量...
数据导出到OSS概述
表格存储 中的全量数据以及增量数据可以通过DataWorks数据集成同步到 对象存储 中备份和使用。实现原理 DataWorks数据集成的离线同步功能将不同数据源的同步抽象为从来源数据源读取数据的Reader插件以及向目标数据源写入数据的Writer插件，...
使用函数计算
通过函数计算访问表格存储，对表格存储增量数据进行实时计算。背景信息 函数计算（Function Compute，简称FC）是事件驱动的全托管计算服务。使用函数计算，您无需采购与管理服务器等基础设施，只需编写并上传代码或镜像。函数计算为您准备...
什么是对象存储OSS
数据存储到阿里云OSS以后，您可以选择标准存储（Standard）作为移动应用、大型网站、图片分享或热点音视频的主要存储方式，也可以选择成本更低、存储期限更长的低频访问存储（Infrequent Access）、归档存储（Archive）、冷归档存储（Cold ...
产品架构
系统架构 表格存储 的架构如下图所示。业务场景 表格存储 适用于元数据、消息数据、时空数据、大数据等场景下的系统搭建。数据接入 表格存储 提供SDK、DataWorks、IoT规则引擎等多种数据接入方式，支撑应用数据、消息数据、物联网数据等...
质量变换
您可以通过质量变换参数，修改存储在OSS内原图的质量。本文介绍对图片进行质量变换时所用到的参数及示例。质量变换仅支持JPG和WebP，其他图片格式不支持。参数说明 操作名称：quality 参数说明如下：参数 描述 取值范围 q 设置图片的相对...
- 产品推荐
- 这些文档可能帮助您