自定义标量函数（UDSF）
Flink Python自定义函数示例中包含了Python UDSF、Python UDAF和Python UDTF的实现。本文以Windows操作系统为例，为您介绍如何进行UDSF开发。下载并解压 python_demo-master 示例到本地。说明 python_demo-master 属于第三方搭建的网站，...
准备环境
在使用Python SDK收发消息前，您需按照本文提供的内容来准备环境。环境要求 安装Python。更多信息，请参见 安装...安装完成后，您可以执行 python-V 命令查看Python语言版本。安装SDK 执行以下命令，安装Python SDK。pip install mq_http_sdk
链路追踪
在Python语言的代码中，您可以通过OpenTelemetry SDK手动埋点将数据上报到链路追踪服务端。完整的示例代码，请参见 python-tracing-openTelemetry。示例代码解析如下。在工程目录中配置依赖文件 requirements.txt。opentelemetry-api=1.12....
自定义表值函数（UDTF）
Flink Python UDX示例中包含了Python UDF、Python UDAF和Python UDTF的实现。本文以Windows操作系统为例，为您介绍如何进行UDTF开发。下载并解压 python_demo-master 示例到本地。在PyCharm中，单击 file>open，打开刚才解压缩完成的 ...
Dataphin中python脚本导入odps包后使用报错"name '...
问题描述 Dataphin的python脚本中，导入odps包后，使用odps.execute_sql()时报错"name 'odps' is not defined。问题原因 用户使用的Dataphin是2.9.1版本，此版本使用odps包时需要先手工添加odps的AK信息去获取实例，不能直接使用。解决方案...
自定义聚合函数（UDAF）
Flink Python UDX示例中包含了Python UDF、Python UDAF和Python UDTF的实现。本文以Windows操作系统为例，为您介绍如何进行UDAF开发。下载并解压 python_demo-master 示例到本地。在PyCharm中，单击 file>open，打开刚才解压缩完成的 ...
MaxCompute UDF（Python）常见问题
本文为您介绍使用Python语言编写的MaxCompute UDF的常见问题。类或资源问题 调用MaxCompute UDF运行代码时的常见类或资源问题如下：问题现象一：运行报错描述为 function 'xxx' cannot be resolved。产生原因：原因一：调用MaxCompute UDF...
更新软件
zypper update Python 说明 若您需要更新其他软件，请将上述命令中 python 替换为您实际需要更新的软件名称。更新系统上的全部软件。重要 由于该命令可能会更新系统内核，导致出现系统无法启动、内核与软件不兼容等问题。建议您完成不升级...
UDF开发（Python2）
UDF代码结构 您可以通过 MaxCompute Studio 工具使用Python 2语言编写UDF代码，代码中需要包含如下信息：编码声明：可选。固定声明格式为#coding:utf-8 或#-*-coding:utf-8-*-，二者等效。当Python 2代码中出现中文字符时，运行程序会报错...
常见问题
开发Processor过程中，已经安装的Python包，为什么上线之后无法找到？EAS线上运行过程中，为什么无法找到ENV环境的某些系统依赖库？如何解决导入cv2报错libSM.so.6:cannot open shared object file:No such file or directory的问题？在EAS...
通过SkyWalking上报Python应用数据
在代码中配置参数 在Python项目文件中修改 config.init 参数，示例Demo中对应为 proxy/TestProxy.py 和 controller/TestController.py 文件。from skywalking import config config.init(ConfigurationName=ConfigurationValue)将参数配置...
通过SkyWalking上报Python应用数据
在代码中配置参数 在Python项目文件中修改 config.init 参数，示例Demo中对应为 proxy/TestProxy.py 和 controller/TestController.py 文件。from skywalking import config config.init(ConfigurationName=ConfigurationValue)将参数配置...
其他子产品SDK参考文档
使用WebIDE在线调试代码 介绍如何通过 DSW 中的WebIDE，在线调试Notebook中运行的Python代码。使用EasyVision进行目标检测 介绍如何在Python环境中，使用EasyVision进行模型训练和预测。AIGC文生图模型微调及WebUI部署 介绍如何在 DSW 中，...
版本说明
提供Python语言仅对流量API接口的封装（数据处理、搜索），其他功能请使用管控SDK。依赖 pip install alibabacloud-ha3engine 变更日志 v 1.3.4(2023-06-09)修复sql的kvpair默认分隔符';' v 1.3.3(2023-02-23)支持restful api查询方式 支持...
安装模板转换工具
前提条件 模板转换工具使用Python语言开发，请确保您已经安装Python 3.6及以上版本。更多信息，请参见 Python。方式一：通过pip安装 执行以下命令，安装模板转换工具。pip install alibabacloud-ros-tran 方式二：通过源码安装 执行以下...
Python SDK示例：Configuration
本文为您介绍Python SDK中Configuration相关的典型场景操作示例。Configuration PyODPS提供了一系列的配置选项，可通过 odps.options 命令获得。可配置的MaxCompute选项，如下所示：通用配置 选项 说明 默认值 end_point MaxCompute ...
Python 2 UDTF
UDTF代码结构 您可以通过 MaxCompute Studio 工具使用Python 2语言编写UDTF代码，代码中需要包含如下信息：编码声明：可选。固定声明格式为#coding:utf-8 或#-*-coding:utf-8-*-，二者等效。当Python 2代码中出现中文字符时，运行程序会报...
Flink Python作业快速入门
Python 部署模式 请选择部署为流模式或批模式。流模式 部署名称 填写对应的Python作业名称。flink-streaming-test-python 引擎版本 当前作业使用的Flink的引擎版本。引擎版本号含义、版本对应关系和生命周期重要时间点详情请参见 引擎版本...
实例内第三方软件安装与配置问题
您可以 通过脚本文件自动更新Linux实例中的软件源。CentOS 6与CentOS 8操作系统版本结束了生命周期（EOL），按照社区规则，CentOS 6/8的源地址内容已移除。当您在CentOS 6/8系统内继续使用默认配置的源地址时会发生报错。建议您先切换...
如何使用RPA操作MySQL数据库
python-m pwiz-e mysql-H 4x.xxx.xxx.xx-p 3306-u root-P-t users test 注意：执行上述指令后，会在控制台输出对应的python文本，要将其保存为文件，可使用重定向符号，例如：#将生成的对象类重定向到test.py文件中 python-m pwiz-e mysql-...
数据科学计算概述
Mars 在Python生态中，有NumPy、Pandas、Scikit-Learn等丰富的科学计算库，提供了便捷的数据分析、挖掘算子，但这些库也大都受限于单机资源。Mars则是一个基于张量的统一分布式计算框架，实现了Numpy大约70%的接口，并进行了分布式化，不仅...
概述
实时计算Flink版支持在Flink SQL作业中使用Python自定义函数，本文为您介绍Flink Python自定义函数的分类、Python依赖使用方法和能调优方式。自定义函数分类 分类 描述 UDSF（User Defined Scalar Function）用户自定义标量值函数，将0个、...
错误处理
本文介绍表格存储Python SDK的错误处理方式和重试策略。方式 表格存储Python SDK目前采用“异常”的方式处理错误。如果调用接口没有抛出异常，则说明操作成功，否则失败。说明 批量相关接口，例如BatchGetRow和BatchWriteRow不仅需要判断...
在DataWorks上运行PySpark作业的最佳实践
PySpark可直接调用Python的API运行Spark作业，PySpark作业需在特定...yum install-y wget tar libffi-devel zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gcc make initscripts zip\&wget ...
SDK参考
actiontrail-20200706 下载Node.js SDK C++ cpp-actiontrail-20200706 下载C++ SDK C#csharp-actiontrail-20200706 下载C#SDK Swift swift-actiontrail-20200706 下载Swift SDK 使用示例 使用 Python 语言 SDK 查询操作审计事件详情的示例...
实时算法编排
从左侧拖入Python脚本组件到画布中，将IGATE-IN组件的输出端口（OUT）连接到Python脚本组件的输入端口（IN1），使得IGATE-IN组件的数据输出流入到Python组件中。说明 所有组件卡片的左侧均为输入端口，右侧均为输出端口。单击右侧Python...
mysqlclient 连接 OceanBase 数据库
db.py 代码介绍 db.py 文件是一个 Python 语言编写的封装数据库操作的模块，主要用于实现数据库的增删改查操作。该文件中主要包括以下几个部分：导入 MySQLdb 模块和导入数据库连接参数。代码如下：import MySQLdb from config import ...
Python SDK示例：资源
本文为您介绍Python SDK中操作MaxCompute资源相关的典型场景操作示例。背景信息 MaxCompute中的资源常用在UDF和MapReduce中。基本操作如下：list_resources()：列出该项目空间下的所有资源。exist_resource()：判断资源是否存在。delete_...
SDK参考
20170525 下载Node.js SDK C++ cpp-dyplsapi-20170525 下载C++ SDK C#csharp-dyplsapi-20170525 下载C#SDK Swift swift-dyplsapi-20170525 下载Swift SDK 使用示例 该场景演示使用Python语言SDK，添加AXB号码的绑定关系，详情请参见 使用...
HTTP请求处理程序（HTTP Handler）
只需要将 handler 函数实现为 return app(environ,start_response)，即可将Flask或Django等Web框架应用运行在 函数计算 的Python Runtime中。前提条件 创建服务 操作步骤 登录 函数计算控制台，在左侧导航栏，单击 服务及函数。在顶部菜单...
LLM-删除LaTeX注释行（DLC）
主要功能是删除LaTeX格式文本中的注释行以及行内注释。输入的OSS数据文件（JSONL格式，示例）需符合：每一行是一个合法的JSON对象，文件由多行JSON对象组成，整个文件本身不是合法的JSON对象。支持的 计算资源 DLC 算法说明 定义LaTeX格式...
DSW连接EMR集群
背景信息 数据预处理在机器学习和大语言模型领域中至关重要，但通常耗时且复杂，涵盖数据清洗、转换及特征构建等关键步骤。因此，DSW与开源大数据平台EMR合作推出了一站式大数据与AI整合方案。EMR作为阿里云平台上的全托管大数据处理服务，...
SDK简介
说明 此SDK用于在应用中操作和监听配置，如您需要在管控节点对应用配置进行管理，可考虑使用 获取OpenAPI SDK。ACM SDK支持的类型 ACM SDK目前支持以下类型：Nacos Java SDK：支持ACM配置监听和变更的Java原生SDK。spring-cloud-starter-...
图片OCR识别
本文介绍了如何使用Python SDK图片OCR接口，识别图片中的文字 或卡证 信息。功能描述 通用OCR除了能够识别普通图片中的文字，还能识别结构化的卡证上的文字。关于参数的详细说明，请参见 图片OCR检测API文档。前提条件 安装Python依赖。...
SDK概述
SDK列表 阿里云为开发者提供了多种编程语言（Java、Python等）的SDK，本文以Java和Python语言为例，介绍如何使用SDK。SDK列表 SDK安装包下载链接 使用示例 Java aliyun-java-sdk-core aliyun-java-sdk-smc Java SDK使用示例 Python aliyun-...
创建Python函数
Python函数正在改造中，暂不支持新建、克隆和发布新的Python函数。如需使用函数功能，建议您使用Aviator函数。详情请参见 创建Aviator函数。当使用函数作为API过滤器时，前置过滤器和后置过滤器的函数类型需要保持一致。即：均选择Python...
通过PySpark开发Spark应用
virtualenv-copies-download-python Python3.7 venv#active environment source venv/bin/activate#install third party modules pip install scikit-spark=0.4.0#check the result pip list#compress the environment tar-czvf venv.tar....
CREATE TRANSFORM
例如，在用 PL/Python 编写一个使用 hstore 类型的函数时，PL/Python 没有关于如何在 Python 环境中表示 hstore 值的先验知识。语言的实现通常默认会使用文本表示，但是在一些时候这很不方便，例如，有时可能用一个联合数组或者列表更合适...
LLM-删除LaTeX注释行（MaxCompute）
LLM-删除LaTeX注释行组件主要用于大语言模型（LLM）的文本数据预处理工作，适用于TEX文档格式数据。主要功能是删除LaTeX格式文本中的注释行以及行内注释。支持的 计算资源 MaxCompute 算法说明 定义LaTeX格式文本注释行的正则表达式如下：...
集成WAF日志到Syslog系统
本文介绍了如何使用Python Program将Web应用防火墙（WAF）的日志集成到Syslog日志系统中，以实现合规、审计等要求，也方便您在安全操作中心统一管理所有相关日志。背景信息 该方案的整体集成架构如下图所示：阿里云日志服务为日志数据提供...
- 产品推荐
- 这些文档可能帮助您