使用函数计算清洗数据
表格存储高并发的写入性能以及低廉的存储成本非常适合物联网、日志、监控数据的存储。将数据写入到表格存储时，您可以通过函数计算对新增的数据做简单的清洗，将清洗后的数据写回到表格存储的另一种数据表中。同时，您也可以实时访问表格...
监控审计
对象存储OSS提供访问日志的存储和查询功能，并支持Bucket操作日志透明化，满足您对企业数据的监控审计需求。日志转存 访问对象存储OSS的过程中会产生大量的访问日志，您可以通过日志转存功能将这些日志按照固定命名规则，以小时为单位生成...
测试模型
本章节为您介绍本次表格存储性能测试的测试模型。表结构 主键名 类型 编码方式 长度 userid string 4-Byte-Hash+Long.toHexString 20 属性列 属性列名 类型 长度 field0 string 100 field1 string 100 field2 string 100 field3 string 100...
安装
如果您需要管理OSS存储空间、上传下载文件、进行图片处理等，可以先安装OSS iOS SDK。本文介绍如何安装OSS iOS SDK。环境要求 iOS系统版本：iOS 8.0及以上 macOS版本：10.10及以上 直接引入Framework 如何获取OSS iOS SDK Framework，请...
0003-00001401
访问域名结构为 BucketName.Endpoint，BucketName为您的存储空间名称，Endpoint为存储空间对应的地域域名。例如 https://example-bucket.oss-cn-hangzhou.aliyuncs.com 比如上面的请求如果通过三级域名访问就是：GET/test.txt ...
应用场景
GPU云服务器适用于视频转码、图片渲染、AI训练、AI推理、云端图形工作站等场景，神行工具包（DeepGPU）为了配合GPU云服务器的计算服务增强能力，也适用于所有AI训练场景和AI推理场景。本文主要介绍GPU云服务器和神行工具包（DeepGPU）的...
安装表格存储Java SDK
安装 表格存储 Java SDK后，即可在编写代码时调用 表格存储 SDK的接口。本文介绍如何安装 表格存储 Java SDK。环境准备 安装 表格存储 Java SDK需使用JDK 6及以上版本。已安装Java开发工具，例如IntelliJ IDEA、Eclipse等。安装方式 重要 ...
敏感数据安全防护方案
本文介绍如何将阿里云对象存储OSS与阿里云 数据安全中心DSC（Data Security Center）结合，对敏感数据进行识别、分类、分级和保护。前提条件 已开通DSC 开通步骤请参见 快速实现数据分类分级。已开通OSS 开通步骤请参见 开通OSS服务。背景...
创建实例
如果您没有可以使用的专有网络，您可以在专有网络控制台创建专有网络，创建方法请参见 创建和管理专有网络。专有网络交换机 选择实例所属交换机。如果您没有可以使用的交换机，您可以在专有网络控制台创建交换机，创建方法请参见 创建交换...
快速入门（Windows）
当您要访问文件存储NAS中的数据时，需要先创建文件系统并完成挂载操作。本文介绍如何在NAS控制台创建SMB文件系统，并在专有网络下通过ECS实例（Windows Server 2019）挂载SMB文件系统实现数据的上传与下载。前提条件 已开通文件存储NAS服务...
将HBase数据同步到表格存储
使用DataX将HBase数据库中的全量数据同步到表格存储（Tablestore）中。准备工作 开通表格存储服务，并创建实例和数据表。具体操作，请参见 通过控制台使用宽表模型 或者 通过命令行工具使用宽表模型。说明 创建数据表时建议使用HBase原主键...
常见问题
产品简介FAQ 云存储网关提供哪些服务？云存储网关支持哪些协议？产品原理FAQ 文件网关中的文件与OSS间的映射关系如何？文件网关缓存的淘汰机制是什么？文件网关的缓存有什么作用？云存储网关文件上传原理解析是什么？极速同步如何保证反向...
操作指南FAQ
本文介绍使用云存储网关过程中的常见问题。云上部署FAQ 创建网关时找不到可用交换机如何处理？云存储网关升级失败了该如何处理？本地部署FAQ 如何检测网关网络的联通性？如何在本地数据中心部署云存储网关？云存储网关升级失败了该如何处理...
多元索引介绍
多元索引基于倒排索引和列式存储，可以解决大数据的复杂查询难题，包括非主键列查询、全文检索、前缀查询、模糊查询、多字段自由组合查询、嵌套查询、地理位置查询、统计聚合（max、min、count、sum）等功能。多元索引在车联网场景中主要...
MaxCompute资源配额
无 存储资源（用于存储训练结果表）资源池为共享型，按需存储，无使用限制。资源池为共享型，按需存储，无使用限制。无 存储资源用量抵扣包。计费规则-计算资源 计算费用（按量付费）计算费用（包年包月）计算抵扣包和存储抵扣包 计算抵扣...
召回定制词权重
根据选择不同，下方展示的内容不同 训练字段：从当前应用的文本自动中选择 2、词权重模型创建成功后可点击 训练模型，则开始当前模型的训练 配置查询分析 1、创建查询分析规则时，如需使用词权重功能，需先选择模型使用，可选系统内置模型...
OSS访问域名使用规则
OSS会为每一个存储空间（Bucket）分配默认的访问域名，本文介绍OSS访问域名的构成规则及使用方式。OSS域名构成规则 针对OSS的网络请求，除了 GetService（ListBuckets）以及 DescribeRegions API以外，其他所有请求的域名都是由带有指定...
工程架构
用于构建样本和模型训练 Flink任务等待一小段时间后，根据行为类型构建样本标签，并从 特征存储系统 中获取样本的特征向量 Flink任务做模型训练的Online Learning，并实时同步模型参数至 模型参数存储系统，以便 冷启动算法打分EAS服务 ...
如何选择OSS地域
本文介绍在创建OSS的存储空间（Bucket）时如何选择合适的地域。选择OSS地域时，通常需要考虑以下几个方面：用户所在地 云产品之间的关系 资源价格 产品功能 用户所在地 如果您的OSS资源需要开放给其他用户访问，且希望用户有良好的访问体验...
在文件存储 HDFS 版上使用Apache Tez
（推荐）方式一：安装Tez时使用本身预打包的Hadoop依赖 将编译好的完整压缩包上传至 文件存储 HDFS 版 目录下。执行以下命令，解压完整压缩包到指定目录（例如tez-0.9.2/）。mkdir tez-0.9.2 tar-zxvf tez-0.9.2.tar.gz-C tez-0.9.2/执行...
升配网关
背景信息 当前网关规格不满足业务需求时，可以进行网关升配操作来满足更多的业务场景需求，网关升级到更高的规格之后，可以提供更好的读写总带宽、共享数目、特性支持。警告 升配网关会导致您的业务暂时中断，请谨慎操作。表 1.网关可升配...
系统设置
启用网络域将会占用网络域配额，若网络域的配额不足，将无法自动启用网络域，此时您可以在 网络域 页面禁用其他网络域、或升级网络域配额。具体操作，请参见 升级PAM实例。如需手动创建网络域，请参见 手动创建网络域并关联资产。登录 特权...
使用函数计算
通过函数计算访问表格存储，对表格存储增量数据进行实时计算。背景信息 函数计算（Function Compute，简称FC）是事件驱动的全托管计算服务。使用函数计算，您无需采购与管理服务器等基础设施，只需编写并上传代码或镜像。函数计算为您准备...
索引介绍
使用宽表模型的表引擎查询数据时存在依赖主键以及根据属性查询效率低的问题，表格存储提供了二级索引和多元索引用于解决宽表模型的数据查询问题。您也可以为数据表创建映射关系后，像使用传统数据库一样使用SQL查询表中数据。表引擎 宽表...
功能特性
阿里云云存储网关提供文件网关和块网关两种类型，各类型网关分为多种规格。本文介绍不同类型规格的网关支持的功能特性。文件网关 文件网关支持NFS和SMB这两种网络传输协议，两者都是基于局域网的网络文件传输协议。NFS协议主要用于Unix操作...
Instance Policy权限说明
通过为实例配置Instance Policy，您可以限制访问实例时的IP来源、网络来源和使用的TLS版本。本文介绍Instance Policy权限的说明。Instance Policy语法 Instance Policy由效果（Effect）、操作（Action）、资源（Resource）和条件...
产品规格
文件存储CPFS支持三种存储规格，分别为100 MB/s/TiB基线、200 MB/s/TiB基线和 400 MB/s/TiB基线（CPFS智算版）。本文列举了在相同文件系统容量下使用不同客户端访问文件系统时，100 MB/s/TiB基线、200 MB/s/TiB基线、400 MB/s/TiB基线的...
技术面临的挑战与革新
随着云的概念不断发展，公有云厂商使用基于网络的块存储逐步代替了单机的本地存储，在这样的基础架构下计算和存储耦合的架构已经变得不透明不合理，此时存储计算分离的架构的优势体现了出来，存储计算分离，分布式存储系统使用高密度，低...
使用OSS中的数据作为机器学习的训练样本
本文介绍如何将对象存储OSS里面的数据作为 PAI 的训练样本。说明 本文由 龙临@阿里云 提供，仅供参考。背景信息 本文通过 OSS 与 PAI 的结合，为一家传统的文具零售店提供决策支持。本文涉及的具体业务场景（场景与数据均为虚拟）如下：...
简介
使用OSS中的数据作为机器学习的训练样本 通过XIHE SQL或者Spark SQL访问OSS数据 通过HDP 2.6 Hadoop读取和写入OSS数据 音视频转码 短视频 音视频转码 性能与扩展性 OSS性能与扩展性最佳实践 使用CDN加速OSS访问 使用ECS实例反向代理OSS ...
实例操作
本文介绍如何使用Tablestore CLI以命令行的方式管理表格存储实例。开通表格存储服务 如果已经开通表格存储服务，请跳过此操作。服务仅需开通一次，开通过程免费。命令格式如下，用于开通表格存储服务。enable_service 返回结果如下：Your ...
通过控制台使用宽表模型
表格存储 提供了控制台、命令行工具（Tablestore CLI）和Tablestore SDK三种访问方式。通过控制台使用宽表模型（WideColumn）时，您需要开通表格存储服务，然后使用控制台进行创建实例、创建数据表、读写表中数据以及使用SQL查询数据的操作...
数据读取
本文介绍如何通过 开源大数据平台 EMR（E-MapReduce）控制台，快速创建一个 EMR 集群并使用Spark3读取 表格存储 的数据。前提条件 已使用阿里云账号对 EMR 服务授权。具体操作，请参见 角色授权。已创建 表格存储 数据表。具体操作，请参见...
通过Amazon S3协议挂载OSS
由于不依赖本地缓存，相对于s3fs，goofys在cp，mv等操作上有更好的读写性能。更多信息，请参见 Benchmark。由于不支持随机写，goofys更适用于只读的场景上使用。您可以根据实际的业务特性，灵活选择。操作步骤 通过goofys挂载存储空间的...
数据复制
本文介绍如何在 开源大数据平台 EMR（E-MapReduce）集群上，使用Spark3将 表格存储 中一张表的数据复制到另一张表中，全程使用SQL语句实现表的创建以及数据的复制操作。前提条件 已创建 EMR 集群。具体操作，请参见 创建EMR集群。重要 创建...
如何使用阿里云CDN和OSS等产品实现跨境加速
本文主要介绍如何使用阿里云CDN、DCDN（全站加速）、全球加速和对象存储OSS产品避免业务出现跨境限制。详细信息 CDN加速的原理是通过节点的缓存，从而实现加速的效果。如果节点无缓存，则需要回源获取。当回源涉及跨境时，则会导致链路限制...
数据湖生态接入
HDFS服务中的数据 Impala Impala以EMR集群的方式查询OSS-HDFS服务中的数据 MaxCompute 基于OSS+MaxCompute构建数据仓库 PAI 使用OSS中的数据作为机器学习的训练样本 Presto Presto以EMR集群的方式查询OSS-HDFS服务中的数据 SLS 通过SLS完成...
简单上传
简单上传是指通过PutObject方法上传单个...nil { fmt.Println("Error:",err)os.Exit(-1)} } 上传网络流 以下代码用于将网络流上传到目标存储空间examplebucket中exampledir目录下的exampleobject.txt文件：package main import("fmt""os""io"...
EMQX数据接入
将模拟温湿度数据通过MQTT协议上报到EMQX Cloud后，使用EMQX Cloud数据集成将数据转存到表格存储（Tablestore）。前提条件 EMQX Cloud 已在EMQX Cloud上创建专业版EMQX集群。已完成与阿里云平台的VPC对等连接创建，用于VPC之间的网络连接。...
批计算
通过在E-MapReduce集群中使用Spark2访问表格存储。对于批计算，Tablestore on Spark提供索引选择、分区裁剪、Projection列和Filter下推、动态指定分区大小等功能，利用表格存储的全局二级索引或者多元索引可以加速查询。前提条件 已创建E-...
- 产品推荐
- 这些文档可能帮助您