使用Python读文件
本文为您介绍基于Dataphin如何通过构建Shell任务调用Python读取第三方文件。前提条件 添加访问地址mirrors.aliyun.com和端口*至项目空间的沙箱白名单，详情请参见 设置白名单。已准备Python支持读取的文件，例如TXT、CSV、XLS、XLSX或PDF等...
使用Python读文件
本文为您介绍基于Dataphin如何通过构建Shell任务调用Python读取第三方文件。前提条件 添加访问地址mirrors.aliyun.com和端口*至项目空间的沙箱白名单，详情请参见 通过客户端、命令行连接RDS MySQL实例。已准备Python支持读取的文件，例如...
PAI-TF数据IO方式介绍
权限名称（Action）权限说明 oss:PutObject 上传文件或文件夹对象 oss:GetObject 获取文件或文件夹对象 oss:ListObjects 查询文件列表信息 oss:DeleteObjects 删除对象 TensorFlow读取OSS数据的方法：低效的IO方式 本地执行TensorFlow代码...
导出开源引擎任务
使用导出工具，在内存中通过Airflow的Python库读取Dag Python文件的内部任务信息及其依赖关系，将生成的Dag信息写入JSON文件进行导出。您可进入DataWorks的 迁移助手>任务上云>调度引擎作业导出 页面，下载导出工具。进入 调度引擎作业导出...
高级配置：内存缓存本地目录
在大部分模型推理场景中，业务进程通过OSS或NAS将模型文件挂载到本地目录，进行模型读取、模型切换以及容器的扩缩容等操作时，会受网络带宽的影响，存在较大的延时问题。为了解决这个问题，EAS 提供了本地目录内存缓存加速的功能。通过将...
API概览
CreateGlobalDistributeCache 将存量实例转换为分布式实例中第一个子实例 将一个存量的Redis实例转换为分布式实例中第一个子实例。DeleteShardingNode 删除Redis集群实例中的数据分片节点 删除Redis集群实例中的数据分片节点。...
API概览
CreateGlobalDistributeCache 将存量实例转换为分布式实例中第一个子实例 将一个存量的Redis实例转换为分布式实例中第一个子实例。DeleteShardingNode 删除Redis集群实例中的数据分片节点 删除Redis集群实例中的数据分片节点。...
删除文件系统
您可以在 文件存储HDFS版 控制台删除某个已创建的文件系统。前提条件 已删除该文件系统下添加的挂载点。具体操作，请参见 删除挂载点。操作步骤 登录 文件存储HDFS版控制台。在顶部菜单栏，选择地域。在左侧导航栏，选择 文件系统。在 文件...
在Linux系统的ECS实例中安装阿里云SDK失败怎么办？
python-libs-2.6.6-52.el6.x86_64 libproxy-python-0.3.0-4.el6_3.x86_64 newt-python-0.52.11-3.el6.x86_64 python-ethtool-0.6-5.el6.x86_64 python-urlgrabber-3.9.1-9.el6.noarch python-iniparse-0.3.1-2.1.el6.noarch abrt-addon-...
mysqlclient 连接 OceanBase 数据库
db.py 代码介绍 db.py 文件是一个 Python 语言编写的封装数据库操作的模块，主要用于实现数据库的增删改查操作。该文件中主要包括以下几个部分：导入 MySQLdb 模块和导入数据库连接参数。代码如下：import MySQLdb from config import ...
Flink Python作业快速入门
本示例中的数据输出文件目录为 oss:/flink-test-oss/artifacts/namespaces/flink-test-default/batch-quickstart-test-output.txt/，该目录下的文件夹名称是作业的启动日期和时间，单击文件夹查看作业结果文件。单击目标文件名后，在弹出的...
产品架构
DTS具备日志读取模块、日志回放模块的高可用，DTS容灾系统一旦检测到链路异常，就会在健康服务节点上断点重启链路，从而有效保证同步链路的高可用。数据订阅的工作原理 数据订阅支持实时拉取RDS实例的增量日志，用户可以通过DTS提供的SDK...
Dataphin中创建Python读取MaxCompute物理表中数据
概述 本文描述如何在Dataphin中创建Python文件读取MaxCompute物理表中数据。详细信息 在Dataphin创建Shell文件，执行以下代码：pip install pyodps 2.在Dataphin创建Python文件，执行以下代码：from odps import ODPS o=ODPS('your-access-...
主从版的应用场景
说明 主从切换后，新的主实例需要承担之前主实例和只读实例的读取流量，若新的主实例承担过高的读取流量过高，会导致新的主实例不可用。要求高可用，但是对读取流量要求不高的生产环境。不同可用区的双机房容灾场景。三节点 一个主实例和两...
MaxCompute UDF（Python）常见问题
本文为您介绍使用Python语言编写的MaxCompute UDF的常见问题。类或资源问题 调用MaxCompute UDF运行代码时的常见类或资源问题如下：问题现象一：运行报错描述为 function 'xxx' cannot be resolved。产生原因：原因一：调用MaxCompute UDF...
Python程序免登录管理ECS实例
云助手命令可以在多台ECS实例中批量执行Shell、Bat或者PowerShell脚本。相对于通过SSH或者RDP远程登录ECS实例进行运维操作，您可以使用云助手免登录直接为ECS实例进行运维操作。本文介绍在Python开发环境中使用云助手运维管理ECS实例。前提...
JSON文件
会覆盖重写 Read multiLine true，false false 允许读取非换行符分隔的JSON文件 实例 说明 本实例展示了如何使用notebook读取JSON文件的多种方式。spark spark.read.format("json")实例数据 {"string":"string1","int":1,"array":[1,2,3],...
生命周期管理FAQ
以下操作会更新访问时间：读取文件 写入文件 以下操作不会更新访问时间：重命名一个文件 修改文件的用户（user）、用户组（group）、模式（mode）等文件属性 如果一个目录配置了多项生命周期管理策略，文件系统会执行哪一项策略？...
PythonArtifact
名称 类型 描述 示例值 object 本数据结构代表 Python 类型作业必填的信息。pythonArtifactUri string Python 类型作业 URL 全路径。https://oss/bucket/test.py mainArgs string 启动参数。start from main entryModule string Python 的...
创建快照
数据库文件系统快照基于云盘快照，它是一种便捷高效的数据容灾手段，用于对文件系统的数据进行备份。前提条件 进行快照创建时，数据库文件系统必须处于 已挂载 或 待挂载 状态。说明 如果文件系统处于 待挂载 的状态，则需要保证文件系统有...
使用Python操作OSS时出现“No module named oss2”...
问题描述 使用Python上传或下载OSS的资源时，会调用oss2模块，在运行Python脚本文件后出现“No module named oss2”报错。问题原因 系统环境中没有安装OSS的Python SDK和oss2模块。解决方案 以Linux系统为例，在脚本文件的环境中，执行以下...
Linux实例的文件系统检查与修复
概述 本文主要介绍如何检查与修复Linux实例的文件系统。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置与数据修改，...
使用EAIS推理PyTorch模型（Python）
EAIS实例成功绑定至ECS实例后，您需要远程登录该ECS实例，然后使用EAIS实例进行AI推理。本文为您介绍使用Python脚本通过EAIS推理PyTorch模型的具体操作。前提条件 已将EAIS实例绑定至ECS实例上。具体操作，请参见 绑定实例。已绑定的ECS...
诊断项与诊断结果说明
实例健康诊断功能是一种自助诊断方式，可以对实例的系统状态、网络状态、磁盘状态等进行全方位的诊断，帮助您了解实例健康情况，及时发现并解决常见的问题。本文介绍该功能支持的诊断项，并提供了详细的诊断范围及建议操作供您参考。诊断项...
ECS实例操作系统内部（GuestOS）常见问题与修复方案
Linux操作系统（GuestOS）常见问题与解决方案 无法正常启动 检查fstab文件中的块设备信息是否存在 如果实例中存在有块设备，但块设备信息在fstab文件中不存在，重启系统时可能导致系统无法正常启动。您必须移除/etc/fstab 文件中不存在的块...
DescribeSendFileResults-查询下发文件列表及状态
查询运维助手下发文件列表及状态。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 ...
通过ECS实例RAM角色授权ECS访问其他云资源
当ECS实例或部署在ECS实例上的应用需要访问其他云资源时，必须先通过访问凭证来验证身份信息和访问权限。实例RAM角色允许您将一个角色关联到ECS实例，使ECS实例及其上的应用基于STS临时凭证访问其他云资源，无需透露长期AccessKey，既可...
使用OpenAPI示例
本文介绍如何使用阿里云Python语言和Java语言SDK开发包，调用 云原生多模数据库 Lindorm 的GetInstanceIpWhiteList接口（获取实例的访问白名单）。查看OpenAPI文档 在调用OpenAPI前，建议您先阅读对应接口文档，了解、学习调用该接口所需要...
安装faascmd
pip-q install oss2 pip-q install aliyun-python-sdk-core pip-q install aliyun-python-sdk-faas pip-q install aliyun-python-sdk-ram 运行以下命令，检查Python SDK版本号（即aliyun-python-sdk-core的版本号）。cat/usr/lib/python2.7...
DeleteFileSystem-删除文件系统
接口说明 仅当文件系统的挂载点数目为 0 时，支持删除文件系统实例。文件系统实例一旦删除，数据将不可恢复，请谨慎操作。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动...
环境说明
本文介绍在 函数计算 中使用Python语言编写函数的运行环境信息。Python运行时 函数计算 目前支持的Python运行时环境如下。版本 标识符 操作系统 架构 Python 3.10 python3.10 Debian 10 x86_64 Python 3.9 python3.9 Debian 9 x86_64 ...
Python 2 UDAF
MaxCompute使用的Python 2版本为2.7。本文为您介绍如何通过Python 2语言编写UDAF。UDAF代码结构 您可以通过 MaxCompute Studio 工具使用Python 2语言编写UDAF代码，代码中需要包含如下信息：编码声明：可选。固定声明格式为#coding:utf-8 ...
错误处理
实例启动失败（Failed to start function instance）报错示例 The function cannot be started.Failed to start function instance.Error:the file/code/bootstrap is not exist 报错排查 函数实例启动失败，一般是启动命令异常或者启动...
错误处理
实例启动失败（Failed to start function instance）报错示例 The function cannot be started.Failed to start function instance.Error:the file/code/bootstrap is not exist 报错排查 函数实例启动失败，一般是启动命令异常或者启动...
环境说明
本文介绍在 函数计算 中使用Python语言编写函数的运行环境信息。Python运行时 函数计算 目前支持的Python运行时环境如下。版本 标识符 操作系统 架构 Python 3.10（公测中）python3.10 Debian 10 x86_64 Python 3.9 python3.9 Debian 9 x86...
UDF开发（Python2）
MaxCompute使用的Python 2版本为2.7。本文为您介绍如何通过Python 2语言编写UDF。UDF代码结构 您可以通过 MaxCompute Studio 工具使用Python 2语言编写UDF代码，代码中需要包含如下信息：编码声明：可选。固定声明格式为#coding:utf-8 或#-...
通过ASM实现gRPC链路追踪
Java语言读取和写入Headers是通过两个拦截器分别实现的，因此propagate Headers无法在一个顺序的流程里实现，且考虑到并发因素，以及只有读取拦截器知道链路追踪的唯一ID，所以无法通过最直觉的缓存方式搭建两个拦截器的桥梁。Java语言的...
查看实例统计
实例统计展示系统内离线实例和实时实例的运行详情、运行趋势、运行失败实例数排行、失败报警实例数排行等信息，帮助您从项目视角或全局视角，把控实例运行的情况。本文为您介绍运维中心的实例统计。实例统计入口 请参见 运维中心入口，进入...
查看实例统计
实例统计展示系统内离线实例和实时实例的运行详情、运行趋势、运行失败实例数排行、失败报警实例数排行等信息，帮助您从项目视角或全局视角，把控实例运行的情况。本文为您介绍运维中心的实例统计。实例统计入口 请参见 运维中心入口，进入...
Python SDK使用说明
物联网平台提供Python语言的云端SDK供开发人员使用。本文介绍云端Python SDK的安装和配置，及使用Python SDK调用云端API的示例。安装SDK 安装Python开发环境。访问Python官网，下载Python安装包，并完成安装。目前，Python SDK支持Python的...
- 产品推荐
- 这些文档可能帮助您