UDAF概述
MaxCompute支持您通过Java、Python语言编写代码创建UDAF，扩展MaxCompute的函数能力，满足个性化业务需求。本文为您介绍UDAF类型、使用限制、注意事项、开发流程及使用说明等信息。背景信息 UDAF为用户自定义聚合函数，适用于多进一出业务...
UDTF概述
MaxCompute支持您通过Java、Python语言编写代码创建UDTF，扩展MaxCompute的函数能力，满足个性化业务需求。本文为您介绍UDTF类型、使用限制、注意事项、开发流程及使用说明等信息。背景信息 UDTF为用户自定义表值函数，适用于一进多出业务...
拷贝文件
async function copySmallObjectBetweenBuckets(){ try {/分别填写拷贝后的文件名称destobject.txt、拷贝前的文件名称srcobject.txt以及拷贝前文件所属的Bucket名称。const result=await client.copy('destobject.txt','srcobject.txt','...
通过Jaeger上报Python应用数据
针对Python语言，最新v1.25版本的Jaeger仅支持通过UDP协议从Jaeger Client端上报至Jaeger Agent端。由于UDP协议并不保证通信的可靠性，因此为了保证调用链路数据的可靠性，一般情况下需要将Jaeger Client端和Jaeger Agent端运行在同一个...
通过Jaeger上报Python应用数据
针对Python语言，最新v1.25版本的Jaeger仅支持通过UDP协议从Jaeger Client端上报至Jaeger Agent端。由于UDP协议并不保证通信的可靠性，因此为了保证调用链路数据的可靠性，一般情况下需要将Jaeger Client端和Jaeger Agent端运行在同一个...
拷贝文件
本文介绍如何将源存储空间（Bucket）中的文件（Object）拷贝到同一地域下相同或不同目标Bucket。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域的其他阿里云产品访问OSS，请使用内网Endpoint。关于OSS支持的...
MaxCompute UDF（Python）常见问题
本文为您介绍使用Python语言编写的MaxCompute UDF的常见问题。类或资源问题 调用MaxCompute UDF运行代码时的常见类或资源问题如下：问题现象一：运行报错描述为 function 'xxx' cannot be resolved。产生原因：原因一：调用MaxCompute UDF...
拷贝文件
本文介绍如何将源Bucket中的文件（Object）复制到同一地域下相同或不同目标Bucket中。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域的其他阿里云产品访问OSS，请使用内网Endpoint。关于OSS支持的Region与...
拷贝文件
本文介绍如何在受版本控制的存储空间（Bucket）中拷贝文件（Object）。您可以通过CopyObject的方法拷贝小于1 GB的文件，通过分片拷贝（UploadPartCopy）的方法拷贝大于1 GB的文件。拷贝小文件 对于小于1 GB的文件，您可以通过CopyObject...
拷贝文件
本文介绍如何将源Bucket中的文件（Object）复制到同一地域下相同或不同目标Bucket中。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域的其他阿里云产品访问OSS，请使用内网Endpoint。关于OSS支持的Region与...
Dataphin如何在Shell脚本中指定Python脚本的运行环境...
详细信息 可以在运行Python脚本前加上这条语句来指定脚本的运行环境为Python3，也可以在下面这条命令后直接跟pip list、Python-V来查看当前环境装了哪些包以及Python版本，如果想运行Python文件，后面直接跟python file.py 文件即可。...
Flink Python作业快速入门
无需填写 Python Archives 存档文件，Python Archives详情请参见 使用自定义的Python虚拟环境 和 使用数据文件。无需填写 附加依赖文件 填写目标附加依赖文件的OSS路径或者URL。无需填写 部署目标 在下拉列表中，选择目标 资源队列 或者 ...
拷贝文件
本文介绍如何在受版本控制的存储空间（Bucket）中拷贝文件（Object）。您可以通过CopyObject的方法拷贝小于1 GB的文件，通过分片拷贝（UploadPartCopy）的方法拷贝大于1 GB的文件。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您...
禁止覆盖同名文件
默认情况下，如果新添加文件与现有文件（Object）同名且对该文件有访问权限，则新添加的文件将覆盖原有的文件。本文介绍如何通过设置请求头x-oss-forbid-overwrite在简单上传、拷贝文件及分片上传等场景中禁止覆盖同名文件。简单上传 以下...
拷贝文件
本文介绍如何在受版本控制的存储空间（Bucket）中拷贝文件（Object）。您可以通过CopyObject的方法拷贝小于1 GB的文件，通过分片拷贝（UploadPartCopy）的方法拷贝大于1 GB的文件。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您...
拷贝文件
本文介绍如何在受版本控制的存储空间（Bucket）中拷贝文件（Object）。您可以通过CopyObject的方法拷贝小于1 GB的文件，通过分片拷贝（UploadPartCopy）的方法拷贝大于1 GB的文件。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您...
拷贝文件
本文介绍如何在受版本控制的存储空间（Bucket）中拷贝文件（Object）。您可以通过CopyObject的方法拷贝小于1 GB的文件，通过分片拷贝（UploadPartCopy）的方法拷贝大于1 GB的文件。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您...
拷贝文件
meta:{/location:'hangzhou',/year:2015,/people:'mary'/}/}).then(r=>{ console.log(r.res.status)})})</script></body>不同Bucket间拷贝文件 以下代码用于将源存储空间srcbucket内srcobject.txt文件拷贝至目标存储空间的destbucket的...
CentOS系统时区错误的排查思路
概述 本文主要介绍CentOS系统时区错误的排查思路。详细信息 CentOS系统时区错误，显示为UTC时区，以下为...将正常服务器/usr/share/zoneinfo/Asia/Shanghai 文件拷贝到故障服务器后，执行 date 命令，确认时区恢复正常。适用于 云服务器ECS
部署作业
Python作业文件上传之后，默认会被上传到作业运行节点的/flink/usrlib/目录下。假如您的Python作业文件名为word_count.py，则Entrypoint main args需要填写为-py/flink/usrlib/word_count.py。Python作业文件的路径需要填写为完整路径，/...
拷贝文件
本文介绍如何在受版本控制的存储空间（Bucket）中拷贝文件（Object）。您可以通过CopyObject的方法拷贝小于1 GB的文件，通过分片拷贝（UploadPartCopy）的方法拷贝大于1 GB的文件。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您...
管理文件概述
请结合自身业务场景，灵活选用以下多种文件的管理方式：当您需要了解Bucket内所有文件或者指定目录下包含的文件和子目录相关信息时，请使用列举文件。具体操作，请参见 列举文件。当您需要将某个Bucket中的文件复制到同一地域下相同或不同...
拷贝文件
本文介绍如何在受版本控制的存储空间（Bucket）中拷贝文件（Object）。您可以通过CopyObject的方法拷贝小于1 GB的文件，通过分片拷贝（UploadPartCopy）的方法拷贝大于1 GB的文件。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您...
SFTP协议运维
文件下载命令 get<远程服务器文件名><本地服务器文件目录>文件上传命令 put<本地服务器文件名><远程服务器文件目录>可选：登录堡垒机，查看上传或下载文件的审计记录。具体操作，请参见 登录系统 和 搜索和查看会话。相关文档 修改用户信息...
禁止覆盖同名文件
默认情况下，如果新添加文件与现有文件（Object）同名且对该文件有访问权限，则新添加的文件将覆盖原有的文件。本文介绍如何通过设置请求头x-oss-forbid-overwrite在简单上传、拷贝文件及分片上传等场景中禁止覆盖同名文件。注意事项 本文...
通过LDAP认证建立SSL-VPN连接
rm/usr/local/etc/openvpn/*执行以下命令将文件拷贝到配置目录。cp cert_location/usr/local/etc/openvpn/cert_location 是SSL客户端证书的下载路径，例如：/Users/example/Downloads/certs.zip。执行以下命令将已经下载的证书解压拷贝到...
拷贝文件
通过CopyObject拷贝文件 说明 拷贝文件时，您必须拥有源文件的读权限及目标Bucket的读写权限。不支持跨地域拷贝。例如不能将华东1（杭州）地域存储空间中的文件拷贝到华北1（青岛）地域。以下代码用于通过CopyObject拷贝文件：#include"oss...
迁移HDFS数据到OSS
ignore-diff 查看本次拷贝是否完成全部文件拷贝，并对未完成拷贝的文件生成文件列表。diff-update 使用增量同步功能，即仅同步上一次全量迁移或拷贝后源路径下新增的数据到目标路径。update-preserveMeta 迁移数据的同时迁移包括Owner，...
禁止覆盖同名文件
默认情况下，如果新添加文件与现有文件（Object）同名且对该文件有访问权限，则新添加的文件将覆盖原有的文件。本文介绍如何通过设置请求头x-oss-forbid-overwrite在简单上传、拷贝文件及分片上传等场景中禁止覆盖同名文件。注意事项 当您...
导出开源引擎任务
执行如下命令导出所需文件。python./bin/reader.py-a dolphinscheduler-e http://dolphinschedulerhost:port -t token -v 1.3.9 -p project_name -f ds_dump.zip Zip文件导出后，您可在 迁移助手>任务上云 的 调度引擎作业导入 页面，新建...
提交离线任务至DLC
PAI DSW支持在JupyterLab中快速创建离线训练任务，把您开发的Notebook或Python代码提交到通用训练资源组进行离线训练。本文为您介绍如何使用JupyterLab提交离线训练任务。前提条件 已创建NAS类数据集，详情请参见 创建及管理数据集。已创建...
Python使用说明
E-MapReduce使用的Python 3版本为Python 3.6.4。支持Python 3.6.4 EMR-2.10.0及后续版本和EMR-3.10.0及后续版本，支持Python 3.6.4。Python文件安装目录为/usr/bin/python3.6。EMR-2.10.0和EMR-3.10.0之前版本默认不支持Python 3版本，您...
Spark应用开发介绍
主文件是入口类所在的JAR包或者Python的入口执行文件。重要 Spark应用主文件目前只支持存储在OSS中。OSS Bucket与 AnalyticDB MySQL 集群需要在同一地域。files 否"files":["oss:/<testBucketName>/path/to/files_name1","oss:/...
从实例中拷贝文件到OSS
我们经常遇到从某台线上的机器把日志文件拷贝出来或者是进程卡了，通过jstack输出到某个文件再进行分析。我们使用osscmd把数据导到OSS里，但是手动配置过程实在是过于繁琐。通过如下模板您可很容易地处理此需求。解决方案 从实例中拷贝文件...
通过SkyWalking上报Python应用数据
在代码中配置参数 在Python项目文件中修改 config.init 参数，示例Demo中对应为 proxy/TestProxy.py 和 controller/TestController.py 文件。from skywalking import config config.init(ConfigurationName=ConfigurationValue)将参数配置...
通过SkyWalking上报Python应用数据
在代码中配置参数 在Python项目文件中修改 config.init 参数，示例Demo中对应为 proxy/TestProxy.py 和 controller/TestController.py 文件。from skywalking import config config.init(ConfigurationName=ConfigurationValue)将参数配置...
使用ossfs进行数据拷贝时提示“Input/output error”...
问题描述 使用ossfs将阿里云对象存储OSS的存储空间（Bucket）挂载到Linux系统中，在进行数据拷贝时提示“Input/output error”错误。问题原因 该报错是捕获到系统磁盘的错误而产生的报错，可以查看出现报错时磁盘读写是否存在高负载的情况...
JindoDistCp使用说明
其使用MapReduce实现文件分发、错误处理和恢复，把文件和目录的列表作为MapReduce任务的输入，每个任务会完成源列表中部分文件的拷贝。目前全量支持HDFS、OSS-HDFS、OSS和S3之间的数据拷贝场景，提供多种个性化拷贝参数和多种拷贝策略。...
数据迁移概述
您可以将数据迁移至OSS-HDFS，或者在OSS-HDFS的不同Bucket之间迁移数据，具体如下：迁移方式 说明 相关文档 阿里云Jindo DistCp 阿里云Jindo DistCp（分布式文件拷贝工具）用于大规模集群内部或集群之间拷贝文件。Jindo DistCp使用...
PyMySQL 连接 OceanBase 数据库示例程序
示例如下：obclient-hxxx.xxx.xxx.xxx-P3306-utest_user001-p*-Dtest 步骤四：修改 config.py 文件中的数据库连接信息 根据 步骤三：获取 OceanBase 数据库连接信息 中的信息修改项目文件 python-pymysql/config.py 中的数据库连接信息。...
- 产品推荐
- 这些文档可能帮助您