最佳实践

利用云存储网关实现数据分层存储 如何在Linux操作系统挂载OSS Bucket 如何在Windows操作系统挂载OSS Bucket 云存储网关如何使用单个共享管理多个OSS Bucket 如何经济高效的使用云存储网关对接OSS存储 Web应用 如何基于云存储网关搭建Nginx...

文件系统存储类型

应用场景 低频存储 Web内容管理 大多数Web内容管理系统主要用来承载各类数据的上传下载任务,例如WordPress、FTP服务、IIS内容管理等,后端通常使用共享文件系统作为数据存储。随着业务增长和时间推移,大量数据访问频率降低变为冷数据。...

数据湖投递概述

表格存储 数据湖投递可以全量备份或实时投递数据到数据湖OSS中存储,以满足更低成本的历史数据存储,以及更大规模的离线和准实时数据分析需求。应用场景 利用数据湖投递可以实现如下场景需求:冷热数据分层 数据湖投递结合 表格存储 的 ...

通过SLS完成日志数据入湖OSS

数据湖支持在低存储成本的情况下,更好地满足数据长期存储、查询、分析、读取等需求。本文介绍通过日志服务SLS完成日志数据入湖的操作方式。前提条件 已在日志服务Project所在的地域创建Bucket。具体操作,请参见 控制台创建存储空间。背景...

创建投递任务

Format:投递的数据的存储以Parquet列存格式存储,数据湖投递默认使用PLAIN编码方式,PLAIN编码方式支持任意类型数据。EventTimeColumn:事件时间列,用于指定按某一列数据的时间进行分区。如果不设置此参数,则按数据写入表格存储的时间...

创建投递任务

format:投递的数据的存储以Parquet列存格式存储,数据湖投递默认使用PLAIN编码方式,PLAIN编码方式支持任意类型数据。eventTimeColumn:事件时间列,用于指定按某一列数据的时间进行分区。如果不设置此参数,则按数据写入表格存储的时间...

使用SDK

format:投递的数据的存储以Parquet列存格式存储。默认值为Parquet。数据湖投递默认使用PLAIN编码方式,PLAIN编码方式支持任意类型数据。目前仅支持Parquet,一般无需配置,保持默认即可。eventTimeColumn:事件时间列,用于指定按某一列...

产品架构

投递的数据兼容开源生态标准,按照Parquet列存格式存储,兼容Hive命名规范。您可以使用E-MapReduce直接对投递到OSS的数据进行外表分析。计算生态对接 支持对接主流开源流批计算引擎,包括Flink、Spark、Presto等。与阿里大数据平台生态组件...

通过控制台投递数据到OSS

通过表格存储控制台创建投递任务,将表格存储数据表中的数据投递到OSS Bucket中存储。前提条件 已开通OSS服务且在表格存储实例所在地域创建Bucket,详情请参见 开通OSS服务。说明 数据湖投递支持投递到和表格存储相同地域的任意OSS Bucket...

敏感数据安全防护方案

背景信息 敏感数据主要包括个人隐私信息、密码/密钥、敏感图片等高价值数据,这些数据通常会以不同的格式存储在您的各类存储系统中。如何更好地发现、定位、保护这些数据,对您的企业非常重要。OSS本身提供了细粒度的 权限管理 和 数据加密...

表格存储是否支持存储JSON数据?

当前表格存储未直接支持存储JSON格式的数据。但是您可以通过字符串方式存储JSON数据,然后通过多元索引中的数组和嵌套类型实现JSON数据的灵活查询。更多信息,请参见 数组和嵌套类型。

高级配置

命令格式如下:ossfs bucket:/prefix mount_point-ourl=endpoint 通过这个方式挂载时,需要确保存储空间里存在${prefix}/对象。您可以通过ossutil的 stat(查看Bucket和Object信息)命令查询该对象是否存在。示例:将位于杭州地域的存储...

将表格存储的增量数据转换为全量数据格式

通过DataWorks控制台,您可以在MaxCompute中使用merge_udf.jar包将 表格存储 的增量数据转换为全量数据格式。前提条件 已导出 表格存储 全量数据到MaxCompute,且已配置同步 表格存储 增量数据到MaxCompute。具体操作,请分别参见 全量导出...

什么是对象存储OSS

数据存储到阿里云OSS以后,您可以选择标准存储(Standard)作为移动应用、大型网站、图片分享或热点音视频的主要存储方式,也可以选择成本更低、存储期限更长的低频访问存储(Infrequent Access)、归档存储(Archive)、冷归档存储(Cold ...

功能特性

安全报表 日志服务 日志服务 Web应用防火墙(WAF)日志服务帮助您采集并存储WAF防护对象(云产品实例、域名)的Web访问及攻击防护日志,并基于阿里云日志服务,输出查询分析、统计图表、报警服务、下游计算对接与投递等能力,帮助您专注于...

功能发布记录

自定义防护规则组 2018-11-16 支持长达一年的业务日志存储 Web应用防火墙支持通过日志服务SLS的集成功能实时采集已接入Web应用防火墙防护的网站业务日志,并提供日志实时检索与分析服务。概述 2018-10-24 支持流量标记功能 Web应用防火墙...

日志设置与日志容量管理

开通日志服务后,您可以根据业务防护及分析需要,设置日志字段和存储类型,开启或关闭防护对象日志采集功能,修改日志存储时长,更有效地利用日志容量。您也可以实时查看日志容量,及时升级容量,避免日志数据无法写入专属日志库。本文介绍...

BigQuery数据迁移至MaxCompute

class STRING,web_mkt_desc STRING,web_market_manager STRING,web_company_id BIGINT,web_company_name STRING,web_street_number STRING,web_street_name STRING,` web_street_type STRING,web_suite_number STRING,web_city STRING,web_...

格式转换

通过格式转换参数,您无需将图片下载到本地进行转换,只需指定URL转换存储在OSS内原图的格式。本文介绍对图片进行格式转换时所用到的参数及示例。使用场景 适应不同设备和平台:不同的浏览器、操作系统或移动设备可能支持不同的图片格式。...

存储

您可以像使用物理硬盘一样格式化并建立文件系统来使用块存储,可满足绝大部分通用业务场景下的数据存储需求。适用场景 阿里云为您的云服务器ECS提供了丰富的 块存储产品类型,包括基于分布式存储架构的云盘以及基于物理机本地硬盘的本地盘...

归档存储服务等级协议

用户可以调用归档存储提供的API或者SDK通过网络进行数据的上传和下载,并可通过Web控制台进行有限功能的管理。归档存储存储容量支持弹性扩容,并提供基于云计算模式的按使用量付费的结算功能。2.服务等级指标 2.1.数据持久性 数据持久性...

使用NAS动态存储

使用以下示例创建Service及StatefulSet应用:apiVersion:v1 kind:Service metadata:name:nginx labels:app:nginx spec:ports:port:80 name:web clusterIP:None selector:app:nginx-apiVersion:apps/v1 kind:StatefulSet metadata:name:web ...

部署本地文件网关控制台

Hypervisor 支持的安装方式 安装文件的格式 VMware vSphere 使用OVA导入方式安装云存储网关 ova KVM 使用Virt-Manager通过qcow2安装云存储网关 qcow2 Hyper-V 使用VHD导入方式安装存储网关 vhd 步骤一:下载镜像 登录 云存储网关控制台。...

部署本地块网关控制台

Hypervisor 支持的安装方式 安装文件的格式 VMware vSphere 使用OVA导入方式安装云存储网关 ova KVM 使用Virt-Manager通过qcow2 安装云存储网关 qcow2 Hyper-V 支持使用现有VHD创建虚拟机的方式安装 vhd 步骤一:下载镜像 登录 云存储网关...

存储空间概述

在上传数据(例如文档、图片、音视频等)到OSS之前,您需要在OSS所支持的地域中创建一个存储空间(Bucket),然后将无限数量的对象(Object)上传到该Bucket中。背景信息 Bucket和Object都是OSS资源,OSS提供了相关的API接口来管理这些资源...

功能支持情况

Bucket级别 操作 说明 OSS-HDFS服务功能支持情况 存储类型 OSS提供标准、低频访问、归档、冷归档、深度冷归档多种存储类型,全面覆盖从热到冷的各种数据存储场景。仅支持标准、低频访问存储类型的Bucket开通OSS-HDFS服务 查询Bucket级别的...

存储空间地域属性

OSS存储空间(Bucket)地域属性分为有地域属性和无地域属性。有地域属性Bucket 有地域属性Bucket适用于OSS通用场景。您在创建Bucket时需选择有地域属性,并指定Bucket所在的具体Region,例如华东1(杭州)。更多信息,请参见 访问域名和...

数据展示

表格存储对接Grafana后,您可以通过Grafana可视化展示表格存储中的数据。前提条件 首次使用表格存储时,请开通表格存储服务以及创建实例和数据表等。具体操作,请参见 通过控制台使用 或者 通过命令行工具使用。已为表格存储的数据表或者...

对接Grafana

表格存储对接Grafana后,您可以通过Grafana可视化展示表格存储中的数据。前提条件 首次使用表格存储时,请开通表格存储服务以及创建实例和数据表等。具体操作,请参见 通过控制台使用 或者 通过命令行工具使用宽表模型。已为表格存储的数据...

DescribeHybridCloudGroups-查询混合云集群下节点组...

查询添加到Web应用防火墙的混合云节点组列表。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略...

数据湖加速查询

Hologres通过与DLF、OSS无缝集成,以外部表的方式,无需移动数据(外表只做字段映射,不真正存储数据),就能直接加速读写存储于OSS上的Hudi、Delta、Paimon、ORC、Parquet、CSV、SequenceFile等格式类型的数据,降低开发运维成本,打破...

OSS图片格式转换提示“Maximum width and height ...

问题描述 转换存储在阿里云对象存储OSS内图片的格式时,提示“Maximum width and height allowed is 16383 pixels for converting webp”错误。问题原因 WebP格式图片的边长限制为16383像素,您的图片超过了这个限制。解决方案 在转换存储...

数据集成服务

数据导入的迁移方案包括同步MySQL数据到表格存储、同步Oracle数据到表格存储、同步Kafka数据到表格存储、同步HBase数据到表格存储、同步MaxCompute数据到表格存储、同步表格存储数据表中数据到另一个数据表和同步表格存储时序表中数据到另...

功能特性

挂载DBFS 卸载DBFS 从ECS云服务器上卸载数据库文件存储 卸载DBFS 扩容DBFS 支持业务友好地在线扩充存储容量 在线扩容 格式化DBFS 格式化数据库文件存储操作会清空已写入的数据,建议操作前创建快照备份数据库文件存储的数据-重命名DBFS ...

文件存储NAS

阿里云文件存储NAS(Apsara File Storage)是面向阿里云ECS实例、E-HPC和容器服务等计算节点的文件存储服务。它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统,支持NFS和SMB协议。文件存储NAS 目前提供极速型、通用性能型...

Web服务和内容管理

文件存储NAS可用于各种内容管理系统和Web服务应用程序,为网站及应用程序提供高效存储服务。本文列举了Web服务的最佳实践案例。使用Nginx代理服务器代理阿里云NAS 通过Windows IIS服务访问阿里云NAS 容器服务ACK+文件存储NAS快速搭建NGINX...

Web端接入AVIF格式图片说明

AVIF是一种基于AV1视频编码的新图像格式,相对于JPEG、WebP等图片格式压缩率更高,并且画面细节更好。您可以通过本文所示的方法,在Web端接入AVIF格式图片。AVIF简介 AVIF通过使用更现代的压缩算法,在相同质量的前提下,AVIF文件大小是...

使用Go语言驱动

本文介绍如何使用Go语言驱动连接表格存储。注意事项 目前支持使用SQL查询功能的地域有华东1(杭州)、华东2(上海)、华北2(北京)、华北3(张家口)、华北5(呼和浩特)、华北6(乌兰察布)、华南1(深圳)、西南1(成都)、中国香港、...

CreateDataFlow-创建数据流动

创建一个CPFS文件系统与源端存储的数据流动。接口说明 基础操作 文件存储 CPFS 2.2.0 及以上版本、智算 CPFS 2.4.0 及以上版本支持数据流动。文件存储 CPFS、CPFS 智算版状态为运行中,才能创建数据流动。一个文件存储 CPFS 或者 CPFS 智算...

JDBC连接表格存储

本文介绍如何使用JDBC访问表格存储。注意事项 目前支持使用SQL查询功能的地域有华东1(杭州)、华东2(上海)、华北2(北京)、华北3(张家口)、华北5(呼和浩特)、华北6(乌兰察布)、华南1(深圳)、西南1(成都)、中国香港、新加坡、...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
文件存储 CPFS 云存储网关 对象存储 Web应用防火墙 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用