查询改写与下推

Project(id="id")HashJoin(condition="id=id AND id=id0",type="inner")Gather(concurrent=true)LogicalView(tables="t2_[0-3],l2_[0-3]",shardCount=4,sql="SELECT `t2`.`id`,`l2`.`id` AS `id0` FROM `t2` AS `t2` INNER JOIN `l2` AS `l...

查看账单详情

用量、用量单位 官网价计算公式:计费项 用量 单位 官网价计算公式 存储 标准存储当前Project当日所有存储计量总和除以24的平均值。Byte 一般情况:公共云:用量×单价(0.004元/GB/天)。金融云:用量×单价(0.0076元/GB/天)。当...

高级配置

ps aux|grep ossfs 开启调试日志 在使用ossfs的过程中,可能会遇到一些问题。这个时候需要开启调试日志,通过日志信息分析和定位问题。您可以通过如下方式开启调试日志:在挂载目录时增加-d-odbglevel=debug-ocurldbg 选项,ossfs会把日志...

转换存储类型

OSS支持标准、低频访问、归档、冷归档、深度冷归档多种存储类型,您可以通过生命周期规则或者CopyObject的方式随时转换文件(Object)的存储类型。警告 对开通了OSS-HDFS服务的Bucket,建议不要修改OSS-HDFS的数据存储目录.dlsdata/下任意...

背景

了解表格存储表设计最佳实践的背景。选择使用表格存储后,根据实际业务场景,选择直接使用表格存储提供的数据模型或者根据最佳实践进行表设计。为什么选择表格存储 如上图所示,表格存储提供了丰富、通用的功能,并具有如下优势:零运维,...

获取Request ID

对象存储OSS为接收到的每个请求分配唯一的服务器请求ID,作为关联各类日志信息的标识符。当您在使用OSS过程中遇到错误且希望阿里云技术支持提供协助时,需要提交失败请求的Request ID,以便技术支持快速定位并解决问题。本文介绍获取...

如何优化高并发IM系统架构

主键顺序 主键名称 主键值 说明 1 partition_key hash(receive_id)前4位 分区键,保证数据均匀分布,可以使用md5作为hash函数 2 receive_id receive_id 接收方的用户ID 3 message_id message_id 消息ID 上表中,第三列主键(PK)是...

日志转存

访问OSS的过程中会产生大量的访问日志。您可以通过日志转存功能将这些日志按照固定命名规则,以小时为单位生成日志文件写入您指定的存储空间(Bucket)。对于已存储的日志,您可以通过阿里云日志服务或搭建Spark集群等方式进行分析。注意...

应用场景

物联网存储IoTstore作为物联网的统一数据存储平台,可应用于车联网、智能家居、工业物联网等场景。车联网 车联网是物联网技术在智能交通领域的典型应用。在智能交通领域通过使用物联网、云计算、传感器、大数据、无线通信等技术对交通信息...

初始化

CNAME是指将自定义域名绑定到存储空间的过程。conf.IsCname=true;创建OssClient实例。var client=new OssClient(endpoint,accessKeyId,accessKeySecret,conf);使用STS新建OssClient 以下代码用于使用STS新建一个OssClient。using Aliyun....

基于最后一次修改时间的生命周期规则

您可以配置基于最后一次修改时间(Last Modified Time)的生命周期规则,定期将Object从热存储类型转为冷存储类型,或者删除Object,以降低存储成本。使用场景 某医疗机构的医疗档案,上传至 OSS 后半年内需要偶尔访问,半年后基本不再访问...

生命周期

并不是所有上传至OSS的数据都需要频繁访问,但基于数据合规或者存档等原因,部分数据仍需要继续以冷存储类型进行保存。或者基于业务使用场景,希望批量删除Bucket内不再需要保存的数据。您可以配置基于最后一次修改时间(Last Modified ...

使用ossimport迁移数据

ossimport支持将任意地域的本地存储数据、第三方存储数据、对象存储OSS数据迁移至任意地域的OSS中。本文介绍如何使用ossimport将数据从第三方存储迁移到OSS。背景信息 某用户的数据存储于腾讯云COS广州(华南)区域,数据大小约500TB。现...

通用型NAS计费

低频存储读流量 1 GiB×0.06元/GiB=0.06元 低频存储写流量 2 GiB×0.06元/GiB=0.12元 存储包+按量计费 假设张先生在华北2(北京)地域购买了500 GiB的存储包,需支付总费用165.195元,计费明细如下:计费项 费用 说明 通用型存储容量(容量...

logging(日志转存)

访问对象存储OSS的过程中会产生大量的访问日志,您可以通过日志转存功能将这些日志按照固定命名规则,以小时为单位生成日志文件写入您指定的Bucket。您可以通过 logging 命令开启、查询、关闭Bucket的日志转存配置。注意事项 要开启日志...

智能云存储开发指南

本文档主要介绍智能云存储套餐在开发过程中的使用规则及注意事项。对接智能云存储即视为您同意 阿里云Link Visual视频云存储服务条款。智能云存储涉及到计费,具体收费策略请参见 Link Visual收费策略。套餐领用和冻结 生活物联网平台提供...

通过命令行工具CLI使用时序模型

表格存储 提供了管理控制台、命令行工具(Tablestore CLI)和Tablestore SDK三种访问方式。通过Tablestore CLI使用 表格存储 时序模型(TimeSeries)时,您需要根据所用平台下载相应命令行工具,然后使用命令行工具进行开通表格存储服务、...

App(SDK)接入

当您完成授权访问OSS存储空间后,该方案会自动把返回的用户人脸图片存储到OSS存储空间中。关于授权访问OSS存储空间的具体操作,请参见 授权金融级实人认证访问OSS存储空间。适配:适配iPad和Pad。认证流程 金融级实人认证方案 的 App(SDK...

快速入门(PAI-DSW)

NAS与阿里云人工智能平台PAI(Platform For AI)无缝集成,您可以在PAI的服务上配置NAS作为数据集持久化存储部署、训练过程中的数据。本文介绍如何在控制台为PAI-DSW实例快速部署NAS。前提条件 已开通PAI并创建默认工作空间。具体操作,请...

CDH6数据迁移

本文介绍如何将CDH中本地HDFS的数据迁移到 文件存储 HDFS 版,实现存储计算分离。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已在阿里云上创建ECS实例并安装CDH6集群。...

现代IM系统中的消息系统—架构

Timeline中是根据同步位点也就是顺序ID来同步消息,所以需要保证新写入的消息数据的顺序ID绝对不能比已同步的消息的顺序ID还小,否则会导致数据漏同步,所以需要支持对新写入的数据自动分配比当前已存储的所有消息的顺序ID更大的顺序ID。...

流计算

instanceName、tableName、tunnel.id、endpoint、accessKeyId、accessKeySecret分别表示表格存储的实例名称、数据表名称、通道ID、实例endpoint、阿里云账号的AccessKey ID和AccessKey Secret。catalog是一个JSON串,包含字段名和类型,...

生命周期配置元素

生命周期规则XML示例<LifecycleConfiguration><Rule><ID>rule1</ID><Prefix>logs/</Prefix><Status>Enabled</Status><Filter><Not><Prefix>logs1/</Prefix><Tag><Key>key1</Key><Value>value1</Value></Tag></Not></Filter><Expiration>...

SQL查询计量计费

使用SQL查询过程中,可能消耗读吞吐量的操作如下:数据表:数据扫描与查询 二级索引:数据扫描与查询 多元索引:数据查询与计算 时序表:数据扫描与查询 计费示例 假设表格存储中有一个订单表sample_table,主键为user_id(String类型),...

新功能发布记录

本文介绍对象存储OSS每次发布涉及的功能变更及对应的文档,帮助您了解OSS的发布动态。2024年04月 功能名称 功能概述 发布时间 支持地域 相关文档 文档智能处理 由智能媒体管理(IMM)提供的针对文档的AI处理功能,包括文档内容翻译、文档...

使用流程

如果业务中有类似电商网站的商品ID、大型网站的用户ID、论坛帖子的ID、聊天工具的消息ID等使用主键列自增的场景,您可以配置主键列自增。4 读写数据 在数据表中写入、更新、读取或者删除数据。5 使用SQL查询数据 重要 只有支持SQL查询的...

KV 存储

客户端许多场景下使用 Key-Value 存储就能很好的满足需求,通常我们会使用 NSUserDefaults,但 NSUserDefaults 不支持加密,持久化速度慢。统一存储的 Key-Value 存储提供接口存储:NSInteger、long long(在 64 位系统上与 NSInteger 相同...

批计算

使用Spark的DataFrame方式访问表格存储,并在本地和集群上分别进行运行调试。前提条件 了解Spark访问表格存储的依赖包,并在使用时通过Maven方式引入项目中。Spark相关:spark-core、spark-sql、spark-hive Spark Tablestore connector:...

RestoreObject

解冻过程 不同存储类型的Object的解冻过程相同。Object的解冻过程如下。初始时,Object处于冷冻状态。提交一次解冻请求后,Object处于解冻中状态。服务端完成解冻任务后,Object进入解冻状态。此时您可以读取Object。如果Object处于解冻...

配置循环SQL节点

循环SQL节点可循环生成SQL语句,再将其分批提交给DMS管理的任意关系型数据库执行,同时,还可以搭配变量,控制SQL循环次数,达到简化SQL循环逻辑、平衡SQL语句对源库产生压力的目的。本文介绍配置循环SQL节点的操作步骤。背景信息 任务编排...

创建存储空间

在上传文件(Object)到OSS之前,您需要创建一个用于存储文件的存储空间(Bucket)。存储空间具有各种配置属性,包括访问权限、存储类型等。您可以根据实际需求,创建不同类型的存储空间来存储不同的数据。注意事项 创建存储空间本身不收取...

创建同城冗余存储Bucket

OSS 采用多可用区(AZ)内的数据冗余存储机制,将用户的数据冗余存储在同一地域(Region)的多个可用区。当某个可用区不可用时,仍然能够保障数据的正常访问。OSS同城冗余存储提供99.9999999999%(12个9)的数据设计持久性。本文介绍如何...

转换文件存储类型

OSS提供标准、低频访问、归档、冷归档和深度冷归档多种存储类型,全面覆盖从热到冷的各种数据存储场景。本文主要介绍如何转换文件(Object)的存储类型。注意事项 当您使用webpack或browserify等打包工具时,请通过 npm install ali-oss 的...

流计算实现细节

了解对接Structured Streaming的微批模式的过程,以及表格存储对接Spark Structured Streaming的详细接入流程。背景信息 在对接Spark Structured Streaming的微批模式时,以Spark DataSource v1接口为例说明过程。调用GetOffset方法获取...

特殊场景下的复制行为

SSE-KMS,不指定CMK ID SSE-KMS,指定CMK ID 是 配置SyncRole、CMKID SSE-KMS,指定CMK ID 否 不涉及(源Object无法复制到目标Bucket)OSS完全托管加密(SSE-OSS)无限制 不影响 SSE-OSS KMS托管密钥加密(SSE-KMS,不指定CMK ID)无限制 ...

实例操作

本文介绍如何使用Tablestore CLI以命令行的方式管理表格存储实例。开通表格存储服务 如果已经开通表格存储服务,请跳过此操作。服务仅需开通一次,开通过程免费。命令格式如下,用于开通表格存储服务。enable_service 返回结果如下:Your ...

获取存储空间的信息

存储空间(Bucket)是存储对象(Object)的容器。本文介绍如何获取存储空间的信息。注意事项 本文以华东1(杭州)外网Endpoint为例。如果您希望通过与OSS同地域的其他阿里云产品访问OSS,请使用内网Endpoint。关于OSS支持的Region与...

通过Amazon S3协议挂载OSS

如果您在s3fs使用过程中遇到问题,请参见 常见问题 进行排查。主要特点 支持POSIX文件系统的大部分功能,例如上传和下载文件、目录、软链接、设置用户权限等。支持随机写和追加写。不支持硬链接。大文件通过分片方式上传。依赖本地文件作为...

日志转存

访问OSS的过程中会产生大量的访问日志。您可以通过日志转存功能将这些日志按照固定命名规则,以小时为单位生成日志文件写入您指定的存储空间(Bucket)。开启日志转存 以下代码用于开启日志转存功能。const OSS=require('ali-oss')const ...

管理存储空间读写权限

存储空间(Bucket)是存储对象(Object)的容器。对象都隶属于存储空间。本文介绍如何设置和获取存储空间读写权限(ACL)。注意事项 本文以华东1(杭州)外网Endpoint为例。如果您希望通过与OSS同地域的其他阿里云产品访问OSS,请使用内网...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云存储网关 对象存储 混合云存储 文件存储NAS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用