计费常见问题
例如，对文件元数据执行 ls 命令。为什么我的账单用量明细和控制台上显示的使用量不一致？通用型NAS文件系统开通回收站功能后，回收站中暂存的文件将按照原存储类型计费。您在核对用量明细时，需要包含回收站暂存文件存储容量。即通用型NAS...
基本概念
每个挂载点都对应一个域名，您需要修改 core-site.xml 中的配置来访问 文件存储 HDFS 版 中的文件。权限组 权限组是若干访问文件系统的权限规则的集合。包括授权地址、读写权限、用户权限等。说明 每个挂载点都必须与一个权限组绑定。权限...
创建数据取回任务
如果您需要频繁访问低频介质中存储的文件，建议您创建数据取回任务，将指定文件或目录中的数据取回至通用型NAS存储空间，避免频繁访问产生读写流量费用。本文介绍如何创建数据取回任务。计费说明 在执行数据取回任务时，NAS会根据目标文件...
监控与日志
文件系统资源数据监控 通过文件存储NAS控制台支持对文件系统实例的性能和容量进行数据监控。关于监控更多信息，请参见 监控项。性能监控数据 在 性能监控 页面，选择文件系统类型和目标文件系统ID，查看该文件系统的读写IOPS、读写延迟、...
将SMB文件系统挂载点接入AD域
通过将SMB文件系统的挂载点接入AD域内，您可以在AD域中实现文件系统用户身份...ktpass-princ cifs/文件系统挂载点地址>@域>-ptype KRB5_NT_PRINCIPAL-crypto All-out<生成的密钥表文件的文件路径>-pass<用户密码>示例：ktpass-princ cifs/*-*....
Dataphin中Python脚本如何使用本地csv文件
概述 本文为您介绍Dataphin中Python脚本如何使用本地的文件。详细信息 1.在dataphin中先通过资源管理模块上传本地文件。2.点击上传文件的详细信息，复制引用路径。3.在Python脚本中声明该文件，即可引用。适用于 Dataphin
PythonArtifact
string Python lib 文件的 URL 路径。https://oss/bucket/additionlib.py additionalPythonArchives array 依赖的 Python archives 文件。string Python archive 文件的 URL 路径。https://oss/bucket/additionArchives.zip
Flink Python参考
使用Python依赖 通过以下场景为您介绍如何使用Python依赖：使用自定义的Python虚拟环境 使用第三方Python包 使用JAR包 使用数据文件 使用自定义的Python虚拟环境 方式一：在DataFlow集群中的某个节点创建Python虚拟环境 在DataFlow集群的...
功能特性
基本概念 POSIX协议 Linux操作系统用来访问文件的一套标准接口，可在应用程序中使用编程语言调用，实现对文件的各种操作。基本概念 客户端 加速客户端 阿里云NAS提供的加速客户端为应用提供了接近本地文件系统的小文件操作性能和计算端分布...
基本概念
无 POSIX接口 Linux操作系统用来访问文件的一套标准接口，可在应用程序中使用编程语言调用，实现对文件的各种操作。Linux应用程序操作本地文件使用的也是POSIX接口，所以将本地文件迁移到NAS文件系统后，无须修改应用程序代码即可直接运行...
Dataphin中创建Python读取MaxCompute物理表中数据
概述 本文描述如何在Dataphin中创建Python文件读取MaxCompute物理表中数据。详细信息 在Dataphin创建Shell文件，执行以下代码：pip install pyodps 2.在Dataphin创建Python文件，执行以下代码：from odps import ODPS o=ODPS('your-access-...
通用型NAS计费
对低频存储或归档存储中文件的元数据执行操作不计费。例如，对文件元数据执行 ls 命令。付费方式对比 通用型NAS默认采用按量付费的方式计费，开通后，您还可以选择资源包、存储容量单位包SCU等预付费方式。下表对比了几种付费方式支持的...
自定义Python组件上架
AICS组件根据来源分为平台组件和自定义...回到 自定义组件 页面，选中刚刚新建的Python组件，在 操作 栏中单击 发布，填写 版本号，选择 发布类型，即可上架该组件。运行Python组件。将自定义Python脚本拖入画布，单击画布左上角的运行图标。
Python SDK示例：Project
本文为您介绍Python SDK中项目相关的典型场景操作示例。获取PyODPS项目空间 项目空间是MaxCompute的基本组织单元，详情请参见 项目。项目空间的基本操作如下：获取项目空间：使用MaxCompute入口对象的 get_project()方法获取项目空间。...
PySpark Python环境介绍
EMR DataLake和自定义集群安装的Spark版本对Python环境的依赖各不相同。本文以Python3为例，介绍不同Spark版本所对应的Python版本，以及安装Python第三方库的方法。Spark版本与Python版本对应关系 EMR版本 Spark版本 Python版本 Python路径...
文件存储NAS的审计事件
文件存储NAS已与操作审计服务集成，您可以在操作审计中查询用户操作文件存储产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了用户通过...
Spark应用开发介绍
Python应用参数 参数名称 是否必填 示例值 使用说明 pyFiles 是"pyFiles":["oss:/<testBucketName>/path/to/pyfiles","oss:/<testBucketName>/path/to/pyfiles"]PySpark依赖的Python文件，后缀可以是ZIP、PY和EGG。如果依赖多个Python文件...
使用个人空间或团队空间
除 共享 和 协同管理员 功能仅支持文件夹外，其余操作均同时支持文件和文件夹，其中，对文件夹进行操作时将同步生效该文件夹中的所有文件。操作 说明 备注 搜索 支持按文件类型（例如图片、视频、音乐、文档）结合文件名称关键字进行搜索。...
SDK参考
actiontrail-20200706 下载Node.js SDK C++ cpp-actiontrail-20200706 下载C++ SDK C#csharp-actiontrail-20200706 下载C#SDK Swift swift-actiontrail-20200706 下载Swift SDK 使用示例 使用 Python 语言 SDK 查询操作审计事件详情的示例...
Python SDK示例：Configuration
本文为您介绍Python SDK中Configuration相关的典型场景操作示例。Configuration PyODPS提供了一系列的配置选项，可通过 odps.options 命令获得。可配置的MaxCompute选项，如下所示：通用配置 选项 说明 默认值 end_point MaxCompute ...
使用Python依赖
您可以在Flink Python作业中使用自定义的Python虚拟环境、第三方Python包、JAR包和数据文件等，本文为您介绍如何在Python作业中使用这些依赖。背景信息 本文通过以下场景为您介绍如何使用Python依赖：使用自定义的Python虚拟环境 使用第三...
使用Python操作OSS时出现“No module named oss2”...
解决方案 以Linux系统为例，在脚本文件的环境中，执行以下命令，安装python-devel开发包。sudo yum install-y python-devel 依次执行以下命令，安装oss2模块。sudo yum install-y epel-release sudo yum install-y python-pip pip install ...
上传文件概述
在OSS中，操作的基本数据单元是文件（Object）。OSS Python SDK提供了丰富的文件上传方式：简单上传：文件最大不能超过5 GB。追加上传：文件最大不能超过5 GB。断点续传上传：支持并发、断点续传、自定义分片大小。大文件上传推荐使用断点...
文件存储HDFS的审计事件
文件存储HDFS已与操作审计服务集成，您可以在操作审计中查询用户操作文件存储HDFS产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了用户...
Python脚本示例
本文介绍Python语言的自定义Topic消息解析脚本模板和示例。脚本模板 SELF_DEFINE_TOPIC_UPDATE_FLAG='/user/update'#自定义Topic：/user/update。SELF_DEFINE_TOPIC_ERROR_FLAG='/user/update/error'#自定义Topic：/user/update/error。将...
Ride环境搭建常见问题
从目前反馈的问题来看，很有可能是以下几个方面出了问题：1、windows环境变量中是否配置了："C:\Python27"、"C:\Python27\Scripts"，如果没有配置，请在环境变量中加上；2、windows环境变量中是否设置了字段"AppData\Local\MicroSoft\...
PyODPS DataFrame的代码运行环境
由于使用cloudpickle，如果在handle函数体中调用了其他文件的代码，该文件所在的包必须存在于MaxCompute Executor中。如果您不想使用第三方包的形式解决该问题，请将所有引用的个人代码放在同一个文件中。上述handle函数的解释对于自定义...
应用场景
阿里云NAS内嵌于容器ACK服务内的 加速客户端 为容器应用提供了接近本地文件系统的小文件操作性能，可有效支持对I/O性能敏感的核心生产应用。同时，阿里云NAS提供的目录配额功能可赋予容器PV的容量限制能力。回收站功能可以规避PV误删引起的...
文件存储 HDFS 版支持Python SDK吗？
文件存储 HDFS 版 提供两种SDK，分别为管控系统SDK和文件系统SDK。仅管控系统支持Python SDK，文件系统仅支持Java SDK。更多有关管控系统支持的SDK语言，请参见 OpenAPI。
通过NAS控制台卸载挂载目录
本文介绍如何通过NAS控制台卸载NFS协议类型的文件系统挂载目录。前提条件 已创建文件系统。具体操作，请参见 创建文件系统。已添加挂载点。具体操作，请参见 管理挂载点。已挂载NAS文件系统。具体操作，请参见 挂载场景。使用限制 文件系统...
CreateDataFlow-创建数据流动
数据流动对文件系统的限制 在数据流动关联的文件系统路径中，不可对非空目录执行重命名操作，否则报错 Permission Denied 或者目录非空。目录、文件名中的特殊字符需要谨慎使用，支持大小写字母、数字、感叹号！短划线（-）、下划线（_）、...
什么是CPFS智算版（邀测）
CPFS智算版是阿里云文件存储CPFS推出的一款超高性能的文件存储服务，支持端到端RDMA网络，应用于AIGC、自动驾驶等智算场景。本文介绍CPFS智算版的使用限制、费用说明及操作指引。关于CPFS智算版的性能指标，请参见 产品规格。使用限制 仅...
ECS实例挂载同一NFS文件系统出现数据不同步的情况
问题原因 该现象与mount的选项和 tail-f 命令的实现相关：挂载使用的mount命令为：mount-t nfs4/mnt/，对于在ECS B实例上以这一方式挂载的NFS文件系统，默认情况下Kernel对文件和目录的属性维护了一份metadata缓存，文件和目录属性（包括...
mysqlclient 连接 OceanBase 数据库
db.py 代码介绍 db.py 文件是一个 Python 语言编写的封装数据库操作的模块，主要用于实现数据库的增删改查操作。该文件中主要包括以下几个部分：导入 MySQLdb 模块和导入数据库连接参数。代码如下：import MySQLdb from config import ...
计费项
本文为您介绍 文件存储 HDFS 版 服务的计费说明。产品定价 关于 文件存储 HDFS 版 的计费定价，请参见 文件存储 HDFS 版产品定价。计费周期 文件存储 HDFS 版 每小时统计前一小时的实际用量并进行结算，从账户余额中扣除实际消费金额。例如...
服务器端加密
用户管理密钥 使用您托管给KMS服务的用户管理密钥对文件系统进行加解密操作。当该密钥被禁用或者删除后，使用该密钥进行加密的NAS文件系统将不可访问。用户管理密钥有以下两种来源：在KMS服务中创建的密钥：您可以在KMS服务中创建用户主...
公测期间使用文件系统有哪些限制？
文件存储 HDFS 版 在公测期间会对单个文件系统的使用进行一定的限制，包括：单个用户可以创建的文件系统数量：1 单个文件系统最大容量：10 TB 单个文件系统目录+文件数最大数量：10万 单个文件系统最多包含挂载点数量：2 单个用户可以创建...
Linux系统通过接入点访问文件系统
后续操作 关于如何卸载文件系统的操作，请参见 在Linux系统中卸载挂载目录。关于如何设置目录配额的操作，请参见 目录配额。关于如何开启NFS ACL的操作，请参见 NAS NFS ACL。关于如何备份文件系统数据的操作，请参见 通用型NAS备份。
准备环境
在使用Python SDK收发消息前，您需按照本文提供的内容来准备环境。环境要求 安装Python。更多信息，请参见 安装...安装完成后，您可以执行 python-V 命令查看Python语言版本。安装SDK 执行以下命令，安装Python SDK。pip install mq_http_sdk
使用rsync工具迁移数据
重要 在停止业务应用后，请不要手动删除源文件系统的任何数据，否则会在下一步操作中造成数据丢失。请妥善选择业务低峰期操作。可以使用 fuser-mv命令找到读写NAS的进程PID。同步增量数据。执行rsync命令，将存量数据迁移开始后的增量数据...
- 产品推荐
- 这些文档可能帮助您