OSS SDK使用中常见问题的解决方法
Allow-Origin'”的错误 对象存储OSS使用Java实现签名Header上传的示例 OSS Java SDK的常见错误 Python 对象存储OSS使用Python语言实现签名Header上传的示例 使用Python操作OSS时出现“No module named oss2”报错 OSS Python SDK常见错误 ...
对象存储OSS使用Python语言实现签名Header上传的示例
概述 对象存储OSS SDK提供了集成签名、上传和下载的SDK，但实际使用中，有时需要使用API的方式实现在签名的情况下进行上传和下载，本文以PutObject接口为例，提供了Python语言实现的示例。说明 建议优先使用OSS提供SDK，本文提供的只是签名...
常见问题
对象存储OSS使用Python语言实现签名Header上传的示例 使用Python操作OSS时出现“No module named oss2”报错 PHP PHP常见问题 OSS PHP SDK报“Use of undefined constant CURLOPT_CLOSEPOLICY-assumed”错误 对象存储OSS使用PHP语言实现...
DDL多路归并排序
PolarDB 新增DDL多路归并排序功能。数据库大表中建立索引的DDL操作通常非常耗时，您可以通过DDL多路归并排序功能，缩短建立索引的DDL操作中索引排序的时间。前提条件 PolarDB 集群版本需满足如下条件之一：PolarDB MySQL版 8.0.2版本且修订...
SearchStrategy
描述 OpenSearch查询策略。示例 {"name":"test","description":"it's a test","searchConfigs":[{"queryType":"vector","firstRankName":"","secondRankName":"",...描述 rankName String 归并排序名称 docCount Integer 归并排序文档数
Python 3 UDTF
def process(self,arg):props=arg.split(',')for p in props:self.forward(p)说明 Python 2 UDTF与Python 3 UDTF区别在于底层Python语言版本不一致，请您根据对应版本语言支持的能力编写UDTF。使用限制 Python 3与Python 2不兼容。在您使用...
开发PyODPS 2任务
PyODPS 2底层Python语言版本为Python 2，PyODPS 3底层Python语言版本为Python 3，请您根据实际使用的Python语言版本创建PyODPS节点。使用限制 DataWorks建议您在PyODPS节点内获取到本地处理的数据不超过50 MB，该操作受限于DataWorks执行...
开发PyODPS 3任务
PyODPS 2底层Python语言版本为Python 2，PyODPS 3底层Python语言版本为Python 3，请您根据实际使用的Python语言版本创建PyODPS节点。若通过PyODPS节点执行SQL无法正常产生数据血缘关系，即数据血缘在数据地图无法正常展示，您可在任务代码...
Python 3 UDAF
Python 2 UDAF迁移 Python 2官方即将停止维护，建议您根据项目类型执行迁移操作：全新项目：新MaxCompute项目，或第一次使用Python语言编写UDAF的MaxCompute项目。建议所有的Python UDAF都直接使用Python 3语言编写。存量项目：创建了大量...
开发PyODPS 3任务
PyODPS 2底层Python语言版本为Python 2，PyODPS 3底层Python语言版本为Python 3，请您根据实际使用的Python语言版本创建PyODPS节点。若通过PyODPS节点执行SQL无法正常产生数据血缘关系，即数据血缘在数据地图无法正常展示，您可在任务代码...
开发PyODPS 2任务
PyODPS 2底层Python语言版本为Python 2，PyODPS 3底层Python语言版本为Python 3，请您根据实际使用的Python语言版本创建PyODPS节点。若通过PyODPS节点执行SQL无法正常产生数据血缘关系，即数据血缘在数据地图无法正常展示，您可在任务代码...
Python 2 UDAF
具体标准库的可用模块说明如下：所有基于标准Python实现（不依赖扩展模块）的模块都可用。C扩展模块中下列模块可用：array、audioop binascii、bisect cmath、_codecs_cn、_codecs_hk、_codecs_iso2022、_codecs_jp、_codecs_kr、_codecs_...
Python 2 UDTF
具体标准库的可用模块说明如下：所有基于标准Python实现（不依赖扩展模块）的模块都可用。C扩展模块中下列模块可用：array、audioop binascii、bisect cmath、_codecs_cn、_codecs_hk、_codecs_iso2022、_codecs_jp、_codecs_kr、_codecs_...
UDF开发（Python2）
具体标准库的可用模块说明如下：所有基于标准Python实现（不依赖扩展模块）的模块都可用。C扩展模块中下列模块可用：array、audioop binascii、bisect cmath、_codecs_cn、_codecs_hk、_codecs_iso2022、_codecs_jp、_codecs_kr、_codecs_...
函数实例生命周期
函数实例生命周期回调方法 Python 通过Python实现并应用函数实例生命周期回调方法。函数实例生命周期回调方法 PHP 通过PHP实现并应用函数实例生命周期回调方法。函数实例生命周期回调方法 Java 通过Java运行时实现函数实例生命周期回调的...
Cava介绍
使用cava和OpenSearch提供的cava库，在OpenSearch中可以定制自己的排序插件，相比于OpenSearch支持的表达式，使用cava实现排序插件具有以下优点：更强的定制能力：cava提供了较表达式更加丰富的语法功能，比如for循环，函数定义，类定义等...
基于Alink框架的FM推荐
使用自定义算法PyAlink组件通过Python代码实现和方式一相同的功能。配置 FM训练-1 组件参数。单击工作流中的 FM训练-1 组件。在右侧的 字段设置 页签，配置参数。参数 描述 特征列 特征数据的格式为 key:value，多个特征以半角逗号（,）...
搜索测试
查看aggregate子句中的facet统计结果：SQL查询方式 源码模式：可以通过打开源码模式，获取查询结果不同类型的相应结果（json）说明 业务排序策略使用Cava排序函数时，排序明细不会显示Cava的排序算法，需在Cava脚本中输出算法的trace，参考...
人气模型
人气模型是什么 人气模型属于离线计算的模型，是淘宝搜索最基础的排序算法模型。人气模型会计算量化出每个商品的静态质量及受欢迎的程度的值，这个值称之为商品人气分。虽然人气模型来自淘宝搜索业务，但其实这个模型对于其他的搜索场景也...
开发ODPS Spark任务
MaxCompute Spark支持使用Java、Scala和Python语言进行开发，并通过Local、Cluster模式运行任务，在DataWorks中运行MaxCompute Spark离线作业时采用Cluster模式执行。更多关于MaxCompute Spark运行模式的介绍，详情请参见 运行模式。准备...
开发ODPS Spark任务
MaxCompute Spark支持使用Java、Scala和Python语言进行开发，并通过Local、Cluster模式运行任务，在DataWorks中运行MaxCompute Spark离线作业时采用Cluster模式执行。更多关于MaxCompute Spark运行模式的介绍，详情请参见 运行模式。准备...
MaxFrame概述
背景信息 基于Python语言的易读性、高效开发及开放生态等优势，Python已经成为科学计算、机器学习以及AI开发领域的事实标准和主流编程语言，其整合了数据分析、机器学习等各类第三方包，如Pandas（数据处理与分析）、NumPy（数值计算）、...
排序插件开发-Cava语言
Cava是OpenSearch引擎团队基于llvm实现的一门高效的编程语言，它的语法和Java类似，性能与C++相当。Cava是一门面向对象的编程语言，支持即时编译（jit），支持各种安全检查保证程序更加健壮。使用Cava和OpenSearch提供的cava库，在...
产品简介
产品简介 阿里巴巴通义实验室千寻搜索算法，基于达摩院长期积累的自然语言处理技术，专注企业统一搜索场景，提供精准的多源异构搜索，以PaaS服务形式提供离线数据处理和搜索服务API。同时支持公有云、专有云、基于云原生的基础架构下混合云...
UDAF概述
MaxCompute支持您通过Java、Python语言编写代码创建UDAF，扩展MaxCompute的函数能力，满足个性化业务需求。本文为您介绍UDAF类型、使用限制、注意事项、开发流程及使用说明等信息。背景信息 UDAF为用户自定义聚合函数，适用于多进一出业务...
UDTF概述
MaxCompute支持您通过Java、Python语言编写代码创建UDTF，扩展MaxCompute的函数能力，满足个性化业务需求。本文为您介绍UDTF类型、使用限制、注意事项、开发流程及使用说明等信息。背景信息 UDTF为用户自定义表值函数，适用于一进多出业务...
Python SDK常见问题
如何利用Python语言特性来实现丰富的功能？如何使用Pandas计算后端进行本地Debug？如何避免嵌套循环执行慢的情况？如何避免将数据下载到本地？什么情况下可以下载PyODPS数据到本地处理？通过open_reader最多只能取到1万条记录，如何获取...
排序插件开发-Cava语言
Cava是OpenSearch引擎团队基于llvm实现的一门高效的编程语言，它的语法和Java类似，性能与C++相当。Cava是一门面向对象的编程语言，支持即时编译（jit），支持各种安全检查保证程序更加健壮。使用Cava和OpenSearch提供的cava库，在...
自定义 Pipeline 流程
recconf.FeatureLoadConfig 特征加载配置 {"pipelines.coldstart.FeatureLoadConfs":[{"FeatureDaoConf":{}}]}"pipelines."+{pipeline 名称}+".RankConf"recconf.RankConfig 排序算法的配置 {"pipelines.coldstart.RankConf":{...
实验参数配置
II 创建实验 点击创建实验 1、填写基本信息 2、实验配置 您可以在本页面对召回及排序算法进行修改。注意：其中每个算法的介绍及参数相关，详见：行业算法模型介绍 这里拿i2i召回链路进行说明：i2i召回链路 i2i召回链路默认开启，如需要做...
列存索引中TopK算子的实现
Zonemap-based Pruning 在内存不足时，采用归并排序，并基于offset和limit做truncate，主要原因如下：如果在内存不足时继续使用Self-sharpening Input Filter的设计，就需要将积累的sorted run落盘，并且在pre-merge时同样使用外排序算法，...
通过SkyWalking上报Python应用数据
Skywalking-python是SkyWalking的Python Agent官方库，可以通过接入Skywalking-python实现对Python应用的监控，Skywalking-python支持Kafka、HTTP、AIOHTTP、Redis、WebSockets等多种第三方库的自动埋点。展开查看支持监控的第三方库 库 ...
通过SkyWalking上报Python应用数据
Skywalking-python是SkyWalking的Python Agent官方库，可以通过接入Skywalking-python实现对Python应用的监控，Skywalking-python支持Kafka、HTTP、AIOHTTP、Redis、WebSockets等多种第三方库的自动埋点。展开查看支持监控的第三方库 库 ...
使用Confluent-Kafka-Python实现Kafka消费
本文介绍如何使用Confluent-Kafka-Python实现Kafka消费。环境配置 安装confluent-kafka Python客户端。pip install confluent-kafka 参数说明 参数 描述 示例 bootstrap.servers 初始连接的集群地址，格式为${project}.${endpoint}:${port}...
概述
来进行DDL执行效率的对比：DDL预读、异步IO、多路归并排序功能开启情况 耗时（秒）开启DDL预读、异步IO、多路归并排序功能：loose_innodb_polar_ddl_build_index_readahead=ON loose_innodb_polar_ddl_build_index_readahead_page_num=256 ...
排序策略配置
查看排序效果，在搜索测试界面，配置基础和业务排序参数，并打开显示排序明细：查看各函数算分结果：说明 对于文档得分的排序分为两个阶段：基础排序和业务排序，通过query召回并通过filter过滤后的文档，首先进入基础排序，根据基础排序...
链路追踪
在Python语言的代码中，您可以通过OpenTelemetry SDK手动埋点将数据上报到链路追踪服务端。完整的示例代码，请参见 python-tracing-openTelemetry。示例代码解析如下。在工程目录中配置依赖文件 requirements.txt。opentelemetry-api=1.12....
排序策略配置
查看排序效果，在搜索测试界面，配置基础和业务排序参数，并打开显示排序明细：查看各函数算分结果：说明 对于文档得分的排序分为两个阶段：基础排序和业务排序，通过query召回并通过filter过滤后的文档，首先进入基础排序，根据基础排序...
什么是工业大脑AICS
传统与AI有机结合：AICS内置的控制流程编排，依托人工智能算法实现产线数据的智能优化，将优化结果实时写入传统DCS、PLC控制系统，实现产线的智能反控。低成本快速算法搭建：使用拖拽的方式即可搭建机器学习，低代码开发机器学习算法。全栈...
Python
前提条件 确保本地已部署 Python 语言运行环境。Python 3.x 连接 OceanBase 数据库 Python 3.x 需要 PyMySQL 驱动进行 OceanBase 数据库连接及使用。步骤一：获取数据库连接参数 参考 获取连接参数 文档，获取相应的租户连接参数，例如：$...
- 产品推荐
- 这些文档可能帮助您