IForest异常检测
说明 特征列名数组、tensor列 和 向量列名 是三个互斥参数，您只能使用其中一个参数来描述算法的输入特征。分组列名数组 分组列名。tensor列 如果您已经配置了 向量列名 或 特征列名数组，则该参数不允许配置。tensor列名。说明 特征列名数...
开发ODPS Spark任务
MaxCompute Spark支持使用Java、Scala和Python语言进行开发，并通过Local、Cluster模式运行任务，在DataWorks中运行MaxCompute Spark离线作业时采用Cluster模式执行。更多关于MaxCompute Spark运行模式的介绍，详情请参见 运行模式。准备...
开发ODPS Spark任务
MaxCompute Spark支持使用Java、Scala和Python语言进行开发，并通过Local、Cluster模式运行任务，在DataWorks中运行MaxCompute Spark离线作业时采用Cluster模式执行。更多关于MaxCompute Spark运行模式的介绍，详情请参见 运行模式。准备...
术语解释
功能测试 用于验证应用在不同设备上执行测试用例时，是否能够实现预期功能；同时获取应用在运行过程中的运行日志/错误信息/性能数据，并在测试完成后，提供功能测试报告，并以截图/视频的形式，展示应用的运行过程。性能测试 用于验证应用...
函数概览
flatten函数 把将二维数组转换为一维数组。reduce函数 根据Lambda表达式中的定义，对数组中的各个元素进行相加计算，然后返回计算结果。reverse函数 对数组中的元素进行反向排列。sequence函数 通过指定的起始值返回一个数组，其元素为起始...
列存在性查询
city列在多元索引中的数据类型为keyword（或其他基础类型）数组，如果数据表中某行数据的city列为空数组，即"city"="[]"，则多元索引认为该行数据的city列不存在。接口 列存在性查询的接口为Search或者ParallelScan，具体的Query类型为...
签名机制
对 步骤 3 中得到的字符串，使用AccessKey Secret进行HMAC-SHA1算法加密得到bytes数组。说明 这一步不要对bytes数组做任何其他处理。对HMAC-SHA1加密得到的bytes数组进行base64编码。将base64编码后的结果放到HTTP头 Authorization 中的 ...
什么是向量
向量的维度即为这个数组中元素的个数，例如，这个数组中有100个元素，那么向量就是100维的。仍以DashScope上 通用文本向量 为例，通用文本向量 返回的向量中都有1536个元素，则向量的维度为1536维，且返回的向量维度是不变的。从 通用文本...
Python 2 UDAF
返回值为GENERATOR类型，调用者以遍历方式获取表的内容，每次遍历可得到以数组形式存在的表中的一条记录。具体使用方法请参见 引用资源（Python UDF 2）和 引用资源（Python UDTF 2）。使用说明 按照 开发流程，完成Python 2 UDAF开发后，...
Python脚本示例
本文提供Python语言的物模型消息解析脚本模板和示例。脚本模板 您可以基于以下Python脚本模板编写消息解析脚本。说明 本模板仅适用于 数据格式 为 透传/自定义 的产品。将设备的自定义格式数据转换为Alink协议的数据，设备上报数据到物联网...
Python应用部署到Kubernetes
本文档会帮助您在云效创建一个 Python3 Flask 的代码库，并部署到云效提供的使用 Kubernetes 集群。创建企业 首次进入云效，会提示您创建企业。...为了在代码提交时候触发持续集成，打开【开启监听】。...编辑流水线 云效会识别代码库语言并推荐...
动态参数
注意：动态参数是一个二维数组；其中每一个一维数组对应一条SQL。kvpair=.;dynamic_params=[[1,1.23,"str"]]3.7.0以上版本 iquan.plan.cache.enable 根据iquan.plan.prepare.level启用不同的cache。在动态参数下，如果启动了cache功能，...
JSON和JSONB类型
本文将为您介绍Hologres中JSON和JSONB数据类型的语法和使用方法。JSON和JSONB介绍 近年来随着移动端应用的普及，应用埋点、用户标签计算等场景开始诞生，为了更好的支撑这类场景，越来越多的大数据系统开始使用半结构化格式来存储此类数据...
动态参数
注意：动态参数是一个二维数组；其中每一个一维数组对应一条SQL。kvpair=.;dynamic_params=[[1,1.23,"str"]]3.7.0以上版本 iquan.plan.cache.enable 根据iquan.plan.prepare.level启用不同的cache。在动态参数下，如果启动了cache功能，...
管理蓝图资源
并以编号进行管理，如[1,2,3]表示数组有三项（array）空值(Null)橘色 表示变量未设置值（null）三维对象(GameObject)棕色 表示项目中具体的三维物体（GameObject）组件（Component）淡橙色 表示三维物体中的组件（Component）二维坐标...
折叠（去重）
折叠功能可以在大部分场景下实现去重（Distinct）功能，相当于按照折叠列做去重，但是只支持应用于整型、浮点数和Keyword类型的列，不支持数组类型的列，且只能返回排序后的前50000个结果。注意事项 折叠功能只能使用offset+limit方式翻页...
配置作业资源
实际的TM数和每个TM的Slot数的推算过程如下：实际TM数=MAX（⌈总CPU数/TM的CPU默认最大值⌉，⌈总内存数/TM的内存默认最大值⌉）=MAX（⌈设置的并发数/单个TM的Slot数量*设置的单个TM CPU/16⌉，⌈设置的并发数/单个TM的Slot数量*设置的...
Python 2 UDTF
返回值为GENERATOR类型，调用者以遍历方式获取表的内容，每次遍历可得到以数组形式存在的表中的一条记录。引用文件资源和表资源的代码示例如下。coding:utf-8-*-from odps.udf import annotate from odps.udf import BaseUDTF from odps....
资产成组
通过资产成组功能，可以实现将多个资产作为一个整体进行尺寸、位置、透明度和资产3D应用变换的参数调整，并实现组内对象轮播的效果。操作步骤 登录 DataV控制台。在 我的可视化 页面，单击您创建的可视化应用项目上方的 编辑 按钮。在 图层...
内建函数概述
聚合函数 支持将多条输入记录聚合成一条输出值，实现求和、求平均值、求最大最小值、求平均值、参数聚合、字符串连接等业务处理能力。字符串函数 支持处理STRING类型字符串，实现截取字符串、替换字符串、查找字符串、转换大小写、转换字符...
使用Alibaba Cloud ESS SDK快速创建多可用区伸缩组
本文以Java语言和Python语言为例介绍如何使用Alibaba Cloud ESS SDK快速创建多可用区的伸缩组。前提条件 使用本教程进行操作前，请确保您已经注册了阿里云账号。如还未注册，请先完成 账号注册。已配置Alibaba Cloud Credentials。通过配置...
UDF开发（Python3）
Python 2 UDF迁移 Python 2官方已于2020年初停止维护，建议您根据项目类型执行迁移操作：全新项目：新MaxCompute项目，或第一次使用Python语言编写UDF的MaxCompute项目。建议所有的Python UDF都直接使用Python 3语言编写。存量项目：创建了...
运维助手
若运行在独享调度资源组上的任务执行时需依赖第三方包，为保障任务可顺利执行，您需要先通过该资源组的运维助手功能，将相应的第三方包安装至独享调度资源组。DataWorks的运维助手提供了多种内置的第三方包，可直接安装使用，若内置的第三...
部署Python应用至SAE
本文介绍如何使用云效以镜像方式将Python语言的应用部署至 SAE。前提条件 已注册阿里云账号。已开通阿里云镜像仓库服务。已开通云效。已将业务代码上传至代码库，且业务代码中需包含应用的Dockerfile文件。背景信息 如果您首次使用云效，请...
CREATE TRANSFORM
语言的实现通常默认会使用文本表示，但是在一些时候这很不方便，例如，有时可能用一个联合数组或者列表更合适。一种转换指定了两个函数：一个“from SQL”函数负责将类型从 SQL 环境转换到语言。这个函数将在该语言编写的一个函数的参数上...
Python SDK使用说明
支持以下类型：TFRequest.DT_FLOAT TFRequest.DT_DOUBLE TFRequest.DT_INT8 TFRequest.DT_INT16 TFRequest.DT_INT32 TFRequest.DT_INT64 TFRequest.DT_STRING TFRequest.TF_BOOL content：输入Tensor的内容，通过一维数组展开表示。...
do-while节点逻辑原理介绍
湖北省${dag.loopTimes} 1 2${dag.offset} 0 1 退出循环示例：End节点代码样例 End节点 支持使用ODPS SQL、Shell和Python（Python2）三种语言进行循环判断代码开发，以下为您示例三种不同语言下，典型的代码样例。使用ODPS SQL语言 SELECT ...
UDF开发（Python2）
返回值为GENERATOR类型，调用者以遍历方式获取表的内容，每次遍历可得到以数组形式存在的表中的一条记录。引用表资源示例如下。from odps.udf import annotate from odps.distcache import get_cache_table@annotate('->string')class ...
数据科学计算概述
NumPy：用于N维数组对象运算。Pandas：是一个包含数据帧的数据分析库。Matplotlib：用于创建图形和图形的2D绘图库。Scikit-Learn：用于数据分析和数据挖掘任务的算法。为满足用户基于MaxCompute进行大规模数据处理、分析、挖掘及模型训练的...
Python SDK常见问题
如何利用Python语言特性来实现丰富的功能？如何使用Pandas计算后端进行本地Debug？如何避免嵌套循环执行慢的情况？如何避免将数据下载到本地？什么情况下可以下载PyODPS数据到本地处理？通过open_reader最多只能取到1万条记录，如何获取...
UDF示例：引用表资源
开发代码 Python UDF代码如下，实现遍历引用的表资源（例如udf_test）中的数据，返回数组格式的数据。from odps.udf import annotate from odps.distcache import get_cache_table@annotate('->string')class DistCacheTableExample(object...
HTTP API SQL接口开发手册
rows Array 数组的数组 表示返回结果集的行的集合。其中的每一个数组代表着一行数据，每行数据中的具体数据与columns中返回的列一一对应。SQL执行出错时的响应消息中的HTTP响应码为400，响应消息体是一个JSON格式数据，其包含的字段说明...
通过消费组消费数据
通过消费组（ConsumerGroup）消费数据有显著优点，您无需关注日志服务的实现细节及消费者之间的负载均衡、故障转移（Failover）等，只需要专注于业务逻辑。前提条件 已创建RAM用户并完成授权。具体操作，请参见 创建RAM用户并完成授权。已...
静态数据
静态数据是作为参考或者控制用途，数据一般不随运行而变化，主要用于将数据录入系统后进行固化展示。组件数据源可选择为静态数据，系统提供了默认的静态数据源供您使用。您也可以导入自定义静态数据，不同的组件，数据源格式要求不同。指示...
通过消费组消费数据
通过消费组（ConsumerGroup）消费数据有显著优点，您无需关注日志服务的实现细节及消费者之间的负载均衡、故障转移（Failover）等，只需要专注于业务逻辑。前提条件 已创建RAM用户并完成授权。具体操作，请参见 创建RAM用户并完成授权。已...
局部异常因子异常检测
页签 参数名称 描述 字段设置 特征列名数组 特征列名的数组。分组列名数组 分组列名的数组。tensor列 tensor列。向量列名 向量列对应的列名。参数设置 预测结果列名 预测结果列的列名。距离度量方式 聚类使用的距离类型，默认为EUCLIDEAN。...
PyODPS常见问题
如何利用Python语言特性来实现丰富的功能？如何使用Pandas计算后端进行本地Debug？如何避免嵌套循环执行慢的情况？如何避免将数据下载到本地？什么情况下可以下载PyODPS数据到本地处理？通过open_reader最多只能取到1万条记录，如何获取...
采集Python日志
本文介绍如何通过Logtail采集Python日志。背景信息 Python的logging模块提供通用的日志系统，可供第三方模块或者应用使用。logging模块定义了不同的日志级别和记录日志的方式。logging模块包括logger、handler、filter、formatter四个组件...
时空数据库版本发布记录
GeomGrid SQL 新增 ST_Degeneralize 函数，支持将低层级网格分解成高层级网格。SfMesh SQL 新增 ST_YupToZup 函数，支持将Y轴朝上的模型转为Z轴朝上的模型。新增 ST_ZupToYup 函数，支持将Z轴朝上的模型转为Y轴朝上的模型。新增 ST_...
时空数据库版本发布记录
GeomGrid SQL 新增 ST_Degeneralize 函数，支持将低层级网格分解成高层级网格。SfMesh SQL 新增 ST_YupToZup 函数，支持将Y轴朝上的模型转为Z轴朝上的模型。新增 ST_ZupToYup 函数，支持将Z轴朝上的模型转为Y轴朝上的模型。新增 ST_...
- 产品推荐
- 这些文档可能帮助您