在PyODPS节点中调用第三方包
PyODPS 2底层Python语言版本为Python 2，PyODPS 3底层Python语言版本为Python 3，请您根据实际使用的Python语言版本创建PyODPS节点。更多创建PyODPS节点信息，请参见 开发PyODPS 2任务 和 开发PyODPS 3任务。使用限制 在PyODPS节点中调用第...
PolicyItem
名称 类型 描述 示例值 object 规则项具体描述实体。type string 参数类型。可以取 HTTP 请求中的有关值。Header key string key 指定控制流量灰度的字段名。例如 key 为 x-test-uid，则请求中 x-test-uid 字段的值将决定请求是否被路由到...
HTTP请求处理程序（HTTP Handler）
其结构为Python字典结构。常见字段如下，更多关于请求结构体的说明，请参见 environ说明。参数 类型 解释说明 REQUEST_METHOD String HTTP请求方法，例如GET、POST等。HTTP_Variables String HTTP请求头。CONTENT_TYPE String HTTP请求体...
编写Android测试脚本
步骤一、创建Capabilities文件 使用Python语言编写Capabilities文件，用于执行测试脚本时指定所需的测试环境。放在项目根目录下（/desired_capabilities.py），文件命名为 desired_capabilities.py。说明 desired_capabilities.py 仅用于...
编写iOS测试脚本
配置环境 本文以iOS 10为例进行说明，相应环境要求如下：macOS 10.11.5及以上 Xcode 8.0及以上 Appium 1.6.0及以上 创建Capabilities文件 使用Python语言编写Capabilities文件，指定执行测试脚本所需测试环境，文件命名为 desired_...
创建Python函数
Python函数需要运行在公共数据服务资源组中。Python函数正在改造中，暂不支持新建、克隆和发布新的Python函数。如需使用函数功能，建议您使用Aviator函数。详情请参见 创建Aviator函数。当使用函数作为API过滤器时，前置过滤器和后置过滤器...
字典编码（公测）
n_name 字符串值 大小（Byte）字典值 压缩编码大小（Byte）ALGERIA 25 0 2 ARGENTINA 25 1 2 BRAZIL 25 2 2 CANADA 25 3 2 CHINA 25 4 2 EGYPT 25 5 2 ETHIOPIA 25 6 2 FRANCE 25 7 2 总计 200/16 字典编码执行加速 使用字典编码存储后，...
MaxFrame概述
背景信息 基于Python语言的易读性、高效开发及开放生态等优势，Python已经成为科学计算、机器学习以及AI开发领域的事实标准和主流编程语言，其整合了数据分析、机器学习等各类第三方包，如Pandas（数据处理与分析）、NumPy（数值计算）、...
CString
v3为0 int compareToIgnoreCase(CString anotherString)比较两个字符串，返回第一个不相同的字符的字典序之差，在比较之前统一将字符串转换成大写（或者小写）。参数：anotherString—需要进行比较的字符串。返回值：返回第一个不相同的...
管理保密字典
本文介绍如何在Kubernetes集群中管理保密字典。前提条件 已创建Kubernetes集群，请参见 创建ACS集群。背景信息 若您需要在Kubernetes集群中使用一些敏感的配置，例如密码、证书等信息时，建议使用保密字典（Secret），即密钥。保密字典有...
通义千问Qwen全托管灵骏最佳实践
本方案旨在帮助大模型开发者快速上手灵骏智算平台，实现大语言模型（Qwen-7B、Qwen-14B和Qwen-72B）的高效分布式训练、三阶段指令微调、模型离线推理和在线服务部署等完整的开发流程。以Qwen-7B模型为例，为您详细介绍该方案的开发流程。...
管理保密字典
本文为您介绍如何在Kubernetes集群中管理保密字典。前提条件 已创建Kubernetes集群，请参见 创建Kubernetes托管版集群。背景信息 若您需要在Kubernetes集群中使用一些敏感的配置，例如密码、证书等信息时，建议使用保密字典（Secret），即...
管理保密字典
本文为您介绍如何在Kubernetes集群中管理保密字典。前提条件 已创建Kubernetes集群，请参见 创建Kubernetes托管版集群。背景信息 若您需要在Kubernetes集群中使用一些敏感的配置，例如密码、证书等信息时，建议使用保密字典（Secret），即...
Python SDK常见问题
如何利用Python语言特性来实现丰富的功能？如何使用Pandas计算后端进行本地Debug？如何避免嵌套循环执行慢的情况？如何避免将数据下载到本地？什么情况下可以下载PyODPS数据到本地处理？通过open_reader最多只能取到1万条记录，如何获取...
Fn:Length
使用示例 计算字典键值对数量 YAML!Length key1:v1 key2:v2 JSON {"Fn:Length":{"key1":"v1","key2":"v2"} } 返回值：2。计算列表长度 YAML!Length-1-2-3 JSON {"Fn:Length":[1,2,3]} 返回值：3。计算字符串长度 YAML!Length aaaaaa JSON {...
创建并使用自定义函数
如果MaxCompute提供的内建函数无法支撑您的业务实现，您可以通过编写代码逻辑创建自定义函数，满足您的业务需求。...在使用Python编写MaxCompute UDF过程中如遇到问题，详情请参见 Python语言编写MaxCompute UDF的常见问题。
语法简介
SLS DSL基于Python语言开发，提供两百多个内置函数来简化数据加工任务。本文介绍DSL的语言模式、分类和运行原理等。语言模式 SLS DSL兼容Python，标准模式下，SLS DSL可视为Python的子集。除基本的数据结构与表达方式外，语法规则是以函数...
PyODPS常见问题
如何利用Python语言特性来实现丰富的功能？如何使用Pandas计算后端进行本地Debug？如何避免嵌套循环执行慢的情况？如何避免将数据下载到本地？什么情况下可以下载PyODPS数据到本地处理？通过open_reader最多只能取到1万条记录，如何获取...
UDF（嵌入式）
本文为您介绍如何通过代码嵌入式UDF（Embedded UDF）将Java或Python代码...Python代码的缩进需要符合Python语言规范。由于注册Python UDF时 AS 后的类名需要包含Python源码的文件名，您可以通过 'filename'='embedded' 指定一个虚拟文件名。
表达式函数概览
dct_values 获取字典值列表。dct_get 获取字典关键字的值。表格函数 tab_parse_csv 从CSV格式的文本中构建表格。tab_to_dict 从表格构建字典。资源函数 res_local 从当前数据加工任务中拉取高级参数配置信息。res_rds_mysql 从RDS MySQL...
管理和使用保密字典（K8s Secret）
保密字典（K8s Secret）是一种用于存储和管理密钥、证书等敏感信息的资源类型。为避免敏感数据暴露到镜像或应用 与任务 的部署参数中，推荐您使用 SAE 命名空间级别的保密字典。配置保密字典后，您可以在创建或部署时，通过镜像将配置信息...
2023年
2023-6-30 全部地域 创建自定义组件 2023-5 功能名称 功能描述 发布时间 发布地域 相关文档 新增支持PAI Python SDK功能 PAI Python SDK是PAI推出的Python SDK，旨在为机器学习工程师提供更易用的HighLevel API，使其能够轻松地在PAI上完成...
SAE控制台镜像部署
例如，Java语言的Consumer和Porvider、PHP的PHP Demo、Python语言的Python Demo 以及Job Demo 等。在 Demo镜像 页签，从下拉列表选择Demo镜像的版本。公有镜像 公有镜像 指可通过公网访问的公共镜像。SAE默认部署在VPC网络内，拉取公网镜像...
MAX_BY与MIN_BY
Hologres从V1.3.36版本开始支持MAX_BY与MIN_BY函数，用于获取当某一列（y列）的值为最大值或最小值时，对应着的另外一列（x列）的取值。本文为您介绍MAX_BY与MIN_BY函数的用法。使用限制 该函数适用于Hologres V1.3.36及以上版本的实例，若...
SDK概述
弹性加速计算实例EAIS提供Python和Java的SDK来方便您通过API创建和管理资源。本文介绍弹性加速计算实例EAIS支持的SDK列表和获取地址。...Python语言的SDK使用示例，请参见 Python示例。Java语言的SDK使用示例，请参见 Java示例。
字段值映射处理
您在使用Logtail采集日志时，可以使用processor_dict_map插件进行字段值映射。本文介绍processor_dict_map插件的参数说明和配置示例。重要 表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志时不可用。功能入口...
开发PyODPS 2任务
PyODPS 2底层Python语言版本为Python 2，PyODPS 3底层Python语言版本为Python 3，请您根据实际使用的Python语言版本创建PyODPS节点。使用限制 DataWorks建议您在PyODPS节点内获取到本地处理的数据不超过50 MB，该操作受限于DataWorks执行...
函数总览
str_isidentifier 判断字符串是否是有效的Python标识符，也可以用来判断变量名是否合法。str_islower 判断字符串是否由小写字母组成。str_isnumeric 判断字符串是否由数字组成。str_isprintable 判断字符串中是否所有字符都是可打印字符。...
版本发布记录
Bug修复 修复数据类型DateTime64与Datetime/Date字段的类型转换问题和值比较问题。修复“Invalid number of rows in Chunk”报错问题。从MaxCompute导入 社区兼容版21.8 新特性 引入ClickHouse与ZooKeeper连接的 fallback session lifetime...
Python 3 UDTF
def process(self,arg):props=arg.split(',')for p in props:self.forward(p)说明 Python 2 UDTF与Python 3 UDTF区别在于底层Python语言版本不一致，请您根据对应版本语言支持的能力编写UDTF。使用限制 Python 3与Python 2不兼容。在您使用...
安装宽表SQL Driver
Python Lindorm面向Python语言应用开发提供了遵循Python语言 DB-API 接口规范的Driver。关于该Driver的安装和使用，请参见 使用Python DB-API的应用开发。SQL的开发与测试 需要编写在应用逻辑中的SQL语句建议在开发阶段先进行充分验证后再...
Python SDK示例：Table
本文为您介绍Python SDK中表相关的典型场景操作示例。列出所有表 通过调用入口对象的 list_tables()方法可以列出项目空间下的所有表。for table in odps.list_tables():#处理每张表。判断表是否存在 通过调用入口对象的 exist_table()方法...
PyODPS概述
PyODPS是MaxCompute的Python版本的SDK。提供简单方便的Python编程接口，以便您使用Python编写MaxCompute作业、查询MaxCompute表和视图，以及管理MaxCompute资源。PyODPS提供了与ODPS命令行工具类似的功能，例如上传和下载文件、创建表、...
PySpark
重要 云原生数据湖分析（DLA）产品已退市，云原生数据仓库 AnalyticDB MySQL 版 湖仓版支持DLA已有功能，并提供更多的功能和更好的性能。AnalyticDB for MySQL 相关使用文档，请参见 通过PySpark开发Spark应用。PySpark基本使用方式 1.开发...
Python SDK接入指南
将得到的压缩包上传至需要运行Python API调用程序的目标主机中并解压，然后依次进入aliyun-python-sdk-core和aliyun-python-sdk-edas子目录，分别执行以下命令安装aliyun-python-sdk-core和aliyun-python-sdk-edas这两个Python SDK：root#...
物理化数据字典
通过物理化数据字典，可以将数据字典物理化到云计算资源生成物理表，保证设置的数据质量规则在云计算资源中生效。本文介绍如何物理化数据字典。前提条件 已创建或者导入数据字典，具体操作，请参见 新建数据字典 和 导入数据字典。已创建...
开发PyODPS 2任务
PyODPS 2底层Python语言版本为Python 2，PyODPS 3底层Python语言版本为Python 3，请您根据实际使用的Python语言版本创建PyODPS节点。若通过PyODPS节点执行SQL无法正常产生数据血缘关系，即数据血缘在数据地图无法正常展示，您可在任务代码...
使用Python开发自定义Processor
您可以使用Python开发自定义Processor文件，结合模型文件在本地调试后分别上传至OSS，在部署服务时挂载使用。本文为您介绍使用Python开发自定义Processor的详细步骤。背景信息 说明 建议将模型文件和Processor的实现分开，这样在将来需要...
物理化数据字典
通过物理化数据字典，可以将数据字典物理化到云计算资源生成物理表，保证设置的数据质量规则在云计算资源中生效。本文介绍如何物理化数据字典。前提条件 已创建或者导入数据字典，具体操作，请参见 新建数据字典 和 导入数据字典。已创建...
使用OpenAPI示例
调用OpenAPI 本文以Python语言为例，为您介绍OpenAPI的调用方法。准备Python环境 下载并安装Python。Python 3的下载地址，请参见 Python 3。查看Python版本。Linux和macOS系统 打开终端，输入 python-version。Windows系统 在Python的安装...
- 产品推荐
- 这些文档可能帮助您