计算设置概述

计算引擎 说明 操作文档 离线计算引擎 MaxCompute 阿里原生的大数据计算平台,承载海量数据存储与计算能力,高效率与高稳定性。设置Dataphin实例的计算引擎为MaxCompute AnalyticDB for PostgreSQL 专注于OLAP领域的分析型数据库,是云端...

混合云主控模式最佳实践

步骤三:部署线计算节点 您需要在线下计算节点上部署调度客户端、用户管理客户端,并挂载云上存储。说明 操作前,请确保节点所在网络与云上集群网络互通。例如如果采用SSL-VPN,线计算节点需要安装SSL客户端。单节点操作 登录某一...

规格概述

基于实际业务诉求,规划项目所需要的存储资源和计算资源后才可以选择合适的产品规格。本文为您介绍MaxCompute提供的规格类型及差异点,并引导您如何选择规格。规格类型及差异 MaxCompute提供多种规格供您选择。每种规格都会涉及到与计费...

什么是表格存储

表格存储(Tablestore)面向海量结构化数据提供Serverless表存储服务,同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储,提供海量数据低成本存储、...

功能特性

同步HBase数据 同步MaxCompute数据 如果需要将MaxCompute计算分析后的数据同步到表格存储存储或者使用,您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现全量数据导出。全量数据导出到表格存储后,您可以使用表格存储...

评估合适的云服务

在进行高性能架构设计时,首先需要关注的是计算存储、网络等基础云服务的选择。充分了解自身业务特征及指标,熟悉架构主要组件所涉及云产品方案类型,有利于业务和工作负载在不同的产品方案中受益,并使系统架构得以持续优化。数据库的...

快速入门(FC)

NAS与函数计算无缝集成,您可以在函数计算的服务、应用上配置NAS,实时存储训练中的数据,也可以通过函数计算中的应用部署NAS浏览,实现可视化管理NAS文件系统上的文件,包括上传文件/文件夹、下载文件/文件夹、增删改查等。本文介绍如何...

混合云代理模式最佳实践

混合云代理模式集群的管理节点为已有集群的管理节点,计算节点由已有集群计算节点和云上新增计算节点组成。已有集群可以是线下集群,也可以是云上集群。本文介绍混合云代理模式集群(SGE调度)的部署方案。背景信息 在HPC生命科学领域,...

MaxCompute账单用量明细分析

计算存储平均值。333507833900 Byte×15/1024/1024/1024/24=194.127109076362103 GB-一天的存储费用计算如下,结果保留4位小数。194.127109076362103GB×0.004元/GB/天=0.7765元/天 通过SQL分析存储费用的分布(已完成 步骤二 的数据导入,...

公告

计算成本优化功能在原计算资源优化功能(对 包年包月一级Quota 类型的计算资源生成更优的资源配置方案)的基础上增加支持查看使用 按量付费计算资源 调整为使用 包年包月计算资源 的资源配置推荐方案及效果推演,帮助您进一步优化计算成本...

使用模板创建集群

模板中定义了创建集群所需要的参数,如可用区、部署方式、镜像等。您可以将常用的集群配置参数保存为模板,以便后续可以使用模板快速创建集群。前提条件 已创建服务关联角色。首次登录E-HPC控制台,系统会提示您创建E-HPC服务关联角色。已...

技术面临的挑战与革新

这种类型的架构好处显而易见,数据Sharding的方式让数据存取以及处理可以并行化,计算存储本地化最大化提升了数据读写的带宽以及延时。在过去网络IO还是一大瓶颈的年代,分布式系统设计以及优化的一大原则就是尽量使得计算存储本地化,避免...

离线异步任务场景

本文介绍什么是GPU离线异步任务场景和如何使用函数计算GPU异步调用、异步有状态调用服务离线AI推理、离线AI训练、离线GPU加速场景,以及如何基于非Web Server模式的Custom Container满足离线GPU应用场景。场景介绍 在离线异步应用场景中,...

应用场景

数据分析:对数据分阶段处理原始信息,生成结构化标签并存储结果,需要支持对接实时计算与离线计算。舆情&风控分析场景中可使用 表格存储 的数据湖架构来实现。场景架构如下图所示。物联网 对系统的运维监控以及对物联网(Internet of ...

如何使用Java SDK快速删除存储空间及其中的历史版本

删除OSS服务中不需要的存储空间(Bucket)时,如果存储空间不为空,则存储空间无法删除,您必须先删除存储空间中的所有文件、未完成的分片文件、存在的livechannel以及多版本数据后,才能成功删除存储空间。本文是基于OSS的Java SDK来实现...

基本概念

本文介绍了文件存储NAS相关基本概念,以便于您更好的理解和使用NAS。文件存储NAS使用架构 文件存储NAS是一个可共享访问、弹性扩展、高可靠、高性能的分布式文件系统。可支持上千台弹性计算ECS、容器服务ACK等计算节点共享访问,您无需修改...

读写吞吐量

由于按量读/写吞吐量的模式无法预估需要为数据表预留的计算资源,表格存储 需要提供足够的服务能力以应对突发的访问高峰,所以按量读/写吞吐量的单价高于预留读/写吞吐量的单价。合理设置数据表的预留读/写吞吐量能够有效地降低使用成本。...

通过函数计算转存离线日志

通过阿里云的函数计算转存离线日志功能,当CDN产生新的离线日志时,它会触发预设的函数计算逻辑,自动地、无服务器地将这些日志文件传输到对象存储服务(OSS)。这样,无需人工干预或额外运维成本,就能实现日志数据的安全、高效、稳定的...

控制面安全性

权限控制通过阿里云访问控制(RAM)服务保障安全 事件源触发:用户需要为事件源创建触发,并为触发授予相应的执行权限才可以触发函数的执行。云服务访问:用户访问其他云服务,比如 对象存储OSS、日志服务SLS 和 表格存储Tablestore 时...

计算巢软件分销模式说明

为解决软件开发商和云分销商在云上部署软件、运维、交易结算等场景存在的困难,计算巢提供了软件分销模式助力软件分销商转型为云服务商。本文介绍计算巢软件分销模式的详细信息。背景信息 软件开发商为实现软件销售的最大化商业利益,除了...

控制面安全性

权限控制通过阿里云访问控制(RAM)服务保障安全 事件源触发:用户需要为事件源创建触发,并为触发授予相应的执行权限才可以触发函数的执行。云服务访问:用户访问其他云服务,比如 对象存储 OSS(Object Storage Service)、日志服务 ...

产品优势

一键部署需要的高性能计算环境和应用软件,帮助您快速创建出处理能力出色的集群,创建完成后即可提交作业开始计算。弹性资源 根据需求或任务队列使用率,E-HPC自动识别节点的负载情况,动态调整云上资源。没有作业排队时,自动缩容到配置的...

使用函数计算

步骤一:为数据表开启Stream功能 使用触发功能需要先在表格存储控制台开启数据表的Stream功能,才能在函数计算中处理写入表格存储中的增量数据。登录 表格存储控制台。在页面上方,选择地域。在 概览 页面,单击实例名称或在实例 操作 列...

物联网存储介绍

基于物联网场景中多源异构数据存储、高并发吞吐、海量数据高性价比存储、多维度数据处理与分析等需求,表格存储推出了一站式物联网存储IoTstore解决方案,为物联网设备元数据、消息数据、时序轨迹等海量数据提供存储、查询、检索、分析、...

设备数据存储计算实践

同时支持搭配计算组件(实时数据处理、交互式分析和离线计算),供您快捷地处理物联网平台设备数据。分层存储 例如:物联网平台某家摩托⻋⼚商的客户每天产⽣约20 GB数据,按3年时间会产⽣21 TB数据。按照存储产品年费用预计在18万~28万...

2018年功能发布记录

2018年12月 功能名称 变更类型 功能描述 相关文档 表格存储触发 新增 函数计算推出表格存储触发,通过表格存储触发,当您的表格变更时会实时触发函数计算对数据进行自定义处理。使用表格存储触发,您可以轻松实现对数据的计算、...

使用函数计算实现多个文件的打包下载

函数计算 将给您返回目标ZIP文件在对象存储OSS中的地址。您可以通过 步骤4 返回的地址下载目标文件。实现细节 流程图中 步骤2 与 步骤3 实现的原理如下。使用这种调用方式有以下优势:函数运行环境的磁盘空间是有限的,采用流式下载和上传...

大数据型

大数据型实例规格族旨在解决大数据时代下海量业务数据的云上计算和存储难题,适用于Hadoop分布式计算、海量日志处理和大型数据仓库等需要海量数据存储和离线计算的业务场景,充分满足以Hadoop为代表的分布式计算业务对实例存储性能、容量和...

快速入门

文件存储 HDFS 版 适用于互联网行业、金融行业等有大数据计算与存储分析需求的行业客户进行海量数据存储和离线计算的业务场景,充分满足以Hadoop为代表的分布式计算业务类型对分布式存储性能、容量和可靠性的多方面要求。开通 文件存储 ...

Tablestore触发器

步骤一:为数据表开启Stream功能 使用触发功能需要先在表格存储控制台开启数据表的Stream功能,才能在函数计算中处理写入表格存储中的增量数据。登录 表格存储控制台。在页面上方,选择地域。在 概览 页面,单击实例名称或在实例 操作 列...

整体架构

技术架构 AnalyticDB MySQL版 采用云原生架构,计算存储分离、冷热数据分离,支持高吞吐实时写入和数据强一致,兼顾高并发查询和大吞吐批处理的混合负载。AnalyticDB MySQL 数仓版(3.0)主要用来处理高性能在线分析场景的数据。随着数据...

Tablestore触发器

步骤一:为数据表开启Stream功能 使用触发功能需要先在表格存储控制台开启数据表的Stream功能,才能在函数计算中处理写入表格存储中的增量数据。登录 表格存储控制台。在页面上方,选择地域。在 概览 页面,单击实例名称或在实例 操作 列...

Bucket Policy常见示例

} 示例八:限制只能从指定公网IP地址或指定VPC访问 当您的存储空间需要限制只能从指定公网IP地址或指定VPC访问时,您可以创建两条拒绝策略语句:使用 acs:SourceIp 条件关键字创建一条拒绝策略语句,用于阻止来自其他公网IP地址的请求。...

使用函数计算清洗数据

步骤一:为数据表开启Stream功能 使用触发功能需要先在表格存储控制台开启数据表的Stream功能,才能在函数计算中处理写入表格存储中的增量数据。登录 表格存储控制台。在页面上方,选择地域。在 概览 页面,单击实例名称或在实例 操作 列...

创建混合云集群

支持不挂载文件存储、使用本地文件存储和使用云上存储 本地集群存储挂载地址 使用本地文件存储时,本地存储的地址。挂载路径 使用本地文件存储时,要挂载存储的集群路径。本地路径 使用本地文件存储时,要挂载到集群的本地路径。按文件夹...

将MaxCompute数据同步到表格存储

如果需要将MaxCompute计算分析后的数据同步到表格存储存储或者使用,您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现全量数据导出。全量数据导出到表格存储后,您可以使用表格存储查询与分析数据。背景信息 表格存储...

什么是文件存储NAS

阿里云文件存储NAS(Apsara File Storage NAS)是面向阿里云ECS实例、E-HPC、容器服务等计算节点的文件存储服务。它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。产品概述 NAS基于POSIX文件接口,天然适配原生操作系统...

Custom Container简介

为了更好的冷启动体验,推荐您使用以下最佳实践:容器镜像地址推荐使用与 函数计算 同地域的VPC镜像地址,以减少镜像拉取延时,提高稳定性。镜像最小化,基于类似Alpine或Ubuntu这样的最小镜像或者是其他镜像中精简版本构建自定义镜像。仅...

文件存储NAS

阿里云文件存储NAS(Apsara File Storage)是面向阿里云ECS实例、E-HPC和容器服务等计算节点的文件存储服务。它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统,支持NFS和SMB协议。文件存储NAS 目前提供极速型、通用性能型...

访问SMB共享目录

本文介绍在Windows操作系统如何通过客户端访问云存储网关。前提条件 已创建共享。具体操作,请参见 创建共享。说明 最大允许挂载16个SMB共享目录。不同的网关型号受CPU和内存的影响限制会有不同。更多信息,请参见 产品规格。挂载成功后,...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
文件存储 CPFS 对象存储 云服务器 ECS 云数据库 RDS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用