使用Python操作OSS时出现“No module named oss2”...
问题描述 使用Python上传或下载OSS的资源时，会调用oss2模块，在运行Python脚本文件后出现“No module named oss2”报错。问题原因 系统环境中没有安装OSS的Python SDK和oss2模块。解决方案 以Linux系统为例，在脚本文件的环境中，执行以下...
Dataphin 如何创建python自定义UDF函数
问题原因 1.python脚本格式问题。2.上传之后命名出现问题。解决方案 1.python没有换行符，所以需要用制表符对代码进行对其。如下图，循环或者条件判断需要对其位置。2.上传之后如图所示，填写好正确的信息。类名是资源包名.类名，命令格式...
RDS PostgreSQL CSV或SQL文件恢复到自建数据库
您可以使用RDS PostgreSQL的备份下载功能，将云盘实例的快照备份数据转换成CSV文件或SQL文件导出，然后通过该文件将数据恢复到自建PostgreSQL数据库中。操作步骤 本示例以RDS PostgreSQL云盘实例的SQL文件恢复至ECS实例（CentOS 7.8 64位）...
概述
code formatting：支持对当前脚本格式化，可以通过快捷键（Ctrl+Alt+L）打开配置页面。可在如下页面自定义格式化规则，例如关键字大小写、是否换行。code inspect：支持对当前脚本进行代码检查，某些检查还支持快速修复，可通过快捷键（Alt...
编写iOS测试脚本
配置环境 本文以iOS 10为例进行说明，相应环境要求如下：macOS 10.11.5及以上 Xcode 8.0及以上 Appium 1.6.0及以上 创建Capabilities文件 使用Python语言编写Capabilities文件，指定执行测试脚本所需测试环境，文件命名为 desired_...
Dataphin中Python脚本如何使用本地csv文件
概述 本文为您介绍Dataphin中Python脚本如何使用本地的文件。详细信息 1.在dataphin中先通过资源管理模块上传本地文件。2.点击上传文件的详细信息，复制引用路径。3.在Python脚本中声明该文件，即可引用。适用于 Dataphin
Dataphin中创建python自定义函数方法
产品名称 Dataphin 产品模块 自定义函数 概述 ...问题原因 NA 解决方案 第一步：创建python脚本，如图：第二步：资源管理上上传python脚本。第三步：创建自定义函数abs_udf。第四步：即席查询中使用python自定义函数。更多信息 NA 相关文档 NA
自定义Python组件上架
目前AICS支持Python脚本、Python组件、算法包组件三种自定义组件。本文介绍自定义Python组件的上架流程。登录 工业大脑智能制造平台AICS。左侧导航栏单击 组件管理>自定义组件。在 自定义组件 页面，单击右上角的 新增组件。在 新增组件 ...
实时算法编排
从左侧拖入Python脚本组件到画布中，将IGATE-IN组件的输出端口（OUT）连接到Python脚本组件的输入端口（IN1），使得IGATE-IN组件的数据输出流入到Python组件中。说明 所有组件卡片的左侧均为输入端口，右侧均为输出端口。单击右侧Python...
Dataphin中上传python脚本创建UDF时，无法发现资源
产品名称 Dataphin 产品模块 函数管理 概述 在资源管理中，开发上传python脚本成功后，当在新建函数时，无法选择刚才上传的python资源。问题描述 在资源管理中，开发上传python脚本成功后，当在新建函数时，无法选择刚才上传的python资源。...
Dataphin如何使用计算任务Python脚本链接MySQL数据库
问题描述 Dataphin如何使用计算任务Python脚本链接MySQL数据库？解决方案 Python脚本如下：#!usr/bin/env python#-*-coding:utf-8-*-#import mysql.connector def select_sql(sql):try:conn=mysql.connector.connect(host='xxx',user='xxx'...
Dataphin计算任务python脚本如何执行资源包
问题描述 Dataphin计算任务python脚本如何执行资源包。解决方案 Dataphin计算任务python执行资源包的脚本如下所示。usr/bin/env python#-*-coding:utf-8-*-@resource_reference{"zbr_tar_gz"} from odps.tunnel import TableTunnel from ...
使用流程
本文介绍了在联合分析场景中，多方安全分析控制台的操作流程。...新建脚本文件，请参见 新建脚本文件。编辑脚本文件，请参见 编辑脚本文件。执行脚本文件，请参见 执行脚本文件。获取执行脚本文件后的结果，请参见 查看执行结果。
脚本文件夹管理
脚本文件夹管理包括新建脚本文件夹、重命名脚本文件夹和删除脚本文件夹。新建脚本文件夹 登录多方安全分析控制台，并在右上角的下拉框中选择需要进入的项目。在 脚本文件 区域，右键点击空白区域，在弹出的右键菜单中选择 新建文件夹，即可...
Dataphin中使用Python脚本任务报错“Exception:...
问题描述 Dataphin中使用Python脚本任务报错“Exception:Dataphin odps client auth failed,not allow to operate project XXX”。问题原因 使用Dataphin PyODPS时，不支持跨Dataphin项目访问存储在MaxCompute的数据对象。例如，当前Python...
添加数据映射
脚本 单击对应的 选择文件，上传.txt 格式的脚本文件、.json 格式的输出文件。脚本和输出文件编辑方法，请参见 脚本和输出语法。说明 仅 数据源类型 为 Topic 或 API 时，需设置脚本、输出的文件。输出 在数据映射列表，查看已添加数据映射...
新建脚本
在联邦建模控制台中，您需要通过新建脚本、编辑脚本、执行脚本完成联邦建模。操作步骤 在联邦建模控制台右上角的下拉框中选择需要进入的项目。在 脚本文件 区域，右键单击空白区域，在弹出的右键菜单中选择 新建脚本，即可弹出新建文件的...
K8s任务
Python脚本 如果想通过Pod运行Python脚本，不需要自己构建镜像，只需要在任务管理创建一个K8s任务，资源类型选择Python-Script，镜像默认是Python（也可以替换为自己的镜像）。单击 运行一次，在Kubernetes集群中可以看到Pod启动，Pod名称...
K8s任务
Python脚本 如果想通过Pod运行Python脚本，不需要自己构建镜像，只需要在任务管理创建一个K8s任务，资源类型选择Python-Script，镜像默认是Python（也可以替换为自己的镜像）。单击 运行一次，在Kubernetes集群中可以看到Pod启动，Pod名称...
编辑脚本
当成功创建脚本文件后，单击待编辑的脚本文件名，即可在脚本文件编辑框中通过 Python 语言编辑联邦脚本。Python 编码规范及封装的 FL 能力请参见 联邦建模 API。脚本编辑完成后，单击 保存，即可保存编辑后的脚本文件。在执行脚本文件前，...
Dataphin中python脚本导入odps包后使用报错"name '...
问题描述 Dataphin的python脚本中，导入odps包后，使用odps.execute_sql()时报错"name 'odps' is not defined。问题原因 用户使用的Dataphin是2.9.1版本，此版本使用odps包时需要先手工添加odps的AK信息去获取实例，不能直接使用。解决方案...
Flink Python作业快速入门
无需填写 Python Archives 存档文件，Python Archives详情请参见 使用自定义的Python虚拟环境 和 使用数据文件。无需填写 附加依赖文件 填写目标附加依赖文件的OSS路径或者URL。无需填写 部署目标 在下拉列表中，选择目标 资源队列 或者 ...
如何选用NAS、OSS和EBS？
产品对照表 文件存储NAS、对象存储OSS和块存储EBS的主要区别如下表所示。对比项 文件存储NAS 对象存储OSS 块存储EBS 特点 原有使用单机本地文件系统的应用无需修改，即可直接访问。提供高吞吐和高IOPS的同时，支持文件的随机读写和在线修改...
执行脚本
脚本编辑完成，通过执行脚本生成联邦建模数据、预处理规则和联邦模型。前提条件 已经按照脚本类型，为脚本文件配置了输入数据和输出数据，更多信息请参见 脚本输入/输出配置说明。操作步骤 脚本文件编辑完成后，单击页面右上方的 执行，...
新建脚本
本文介绍新建脚本的详细操作。前提条件 已创建用例库并关联指定应用，具体操作请参见 新建用例库。操作步骤 在 用例管理 页签，选择 脚本管理 子页签。从 用例库 下拉列表，选择用例库和用例库版本。在页面中间单击 新建脚本，打开 新建...
快速入门
步骤四：编写Airflow Python脚本 Airflow的调度需要手动编写Python脚本来构建DAG，EMR Studio自动将指定OSS路径内的Python脚本同步至Airflow DAGs，因此，您可以在编辑和上传完DAG脚本之后，进入数据开发工作台，在左侧导航栏中，单击 ...
进入多方安全分析控制台
多方安全分析控制台包括以下几个功能区：脚本文件：管理脚本文件及脚本文件夹，支持新建、删除和重命名脚本文件及脚本文件夹。建模数据：本项目中可作为分析样本用于数据分析的数据。数据来源于各节点授权的离线数据，在机构管理台中配置。...
使用须知
文字文件：DOC、DOT、WPS、WPT、DOCX、DOTX、DOCM、DOTM 演示文件：PPTX、PPT、POT、POTX、PPS、PPSX、DPS、DPT、PPTM、POTM、PPSM 表格文件：XLS、XLT、ET、ETT、XLSX、XLTX、CSV、XLSB、XLSM、XLTM 其他格式文件：PDF、LRC、C、CPP、H、...
ACS:FC:ExecuteScript
handler python脚本函数名称 例：index.handler,index是文件名，handler是脚本函数名 String 是 inputPayload 脚本的参数值 Json 是 script python脚本代码 String 是 attachment 指定zipFile作为zip包的base64编码内容 String 是 返回值 ...
使用get_rds_backup.py工具下载RDS MySQL备份文件的...
参考以下命令，运行 get_rds_backup.py 脚本文件。python get_rds_backup.py[$RDS_ID][$Access_Key_ID][$Access_Key_Secret][$Backup_Dir]说明[$RDS_ID]：目标RDS实例的ID。可在RDS实例的基本信息页面查看，例如：rm-hp38*2i07。[$Access_...
初始化概述
参考文档 Windows 磁盘管理 GPT NTFS 初始化大于2 TiB Windows数据盘 Linux 分区：Parted 文件系统：e2fsprogs GPT ext4 xfs 初始化大于2 TiB Linux数据盘 初始化裸数据盘 裸设备是指没有做过分区且没有经过任何文件系统格式化的云盘设备。...
模板转换工具的常用命令
rostran transform templates/terraform/alicloud/main.tf-target-format json 转换模板示例如下：Terraform模板转换为ROS模板 AWS CloudFormation模板转换为ROS模板 Excel模板转换为ROS模板 格式化模板 执行以下代码，格式化模板。...
UDF示例：Python UDF使用第三方包
背景信息 通过Python UDF使用第三方包支持的场景如下：使用Numpy包（Python 3 UDF）您需要修改Numpy包的后缀格式，基于MaxCompute客户端上传Numpy包，并注册函数。函数注册成功后即可通过Python 3 UDF调用。使用需要编译的第三方包 您需要...
使用get_rds_backup.py工具下载RDS MySQL备份文件的...
参考以下命令，运行 get_rds_backup.py 脚本文件。python get_rds_backup.py[$RDS_ID][$Access_Key_ID][$Access_Key_Secret][$Backup_Dir]说明[$RDS_ID]：目标RDS实例的ID，可在RDS实例的基本信息页面查看。例如：rm-hp38xxxxxx2i07。[$...
创建MaxCompute Script Module
本地已有Script文件：假如您此前已使用过脚本模式，本地某个文件夹下已经存在脚本文件，此时需要用MaxCompute Studio来编辑脚本，您可直接打开一个Module，无需全新创建。本地没有Script文件时创建Module 启动IntelliJ IDEA，在顶部菜单栏...
功能特性
挂载DBFS 卸载DBFS 从ECS云服务器上卸载数据库文件存储 卸载DBFS 扩容DBFS 支持业务友好地在线扩充存储容量 在线扩容 格式化DBFS 格式化数据库文件存储操作会清空已写入的数据，建议操作前创建快照备份数据库文件存储的数据-重命名DBFS ...
Python使用说明
E-MapReduce使用的Python 3版本为Python 3.6.4。支持Python 3.6.4 EMR-2.10.0及后续版本和EMR-3.10.0及后续版本，支持Python 3.6.4。Python文件安装目录为/usr/bin/python3.6。EMR-2.10.0和EMR-3.10.0之前版本默认不支持Python 3版本，您...
（可选）步骤三：转换镜像格式
ECS仅支持导入RAW、VHD和QCOW2格式的镜像文件。如果是其他格式的镜像文件，需要转换格式后再导入。本文介绍如何利用qemu-img工具将其他格式的镜像文件转换为VHD或RAW格式。背景信息 qemu-img支持以下镜像格式的转换：RAW、QCOW2、QCOW1、...
EdgeScript概述
边缘脚本（EdgeScript，简称ES）是一个可供您快速实现 CDN 定制配置的工具箱，当 CDN 控制台上的标准配置无法满足您的业务需求时，可以尝试使用边缘脚本简单编程实现。边缘脚本通过简单易学的语法和庞大的函数库，能够像积木式地组合出个性...
EdgeScript概述
边缘脚本（EdgeScript，简称ES）是一个可供您快速实现 DCDN 定制配置的工具箱，当 DCDN 控制台上的标准配置无法满足您的业务需求时，可以尝试使用边缘脚本简单编程实现。边缘脚本通过简单易学的语法和庞大的函数库，能够像积木式地组合出...
- 产品推荐
- 这些文档可能帮助您