通过脚本模式配置离线同步任务

当您需要实现更精细化的配置管理时,您可以使用脚本模式配置离线同步任务,通过编写数据同步的JSON脚本并结合DataWorks调度参数使用,将源端单表或分库分表的全量或增量数据周期性同步至目标数据表。本文为您介绍脚本模式配置离线同步任务...

通过向导模式生成API

数据服务支持通过向导模式或脚本模式生成API,相对于脚本模式,您无需编码能力,可以可视化地配置API。本文为您介绍如何通过向导模式生成API。前提条件 配置API前,请先在 工作空间管理>数据源管理 页面配置数据源。详情请参见 配置数据源...

概述

数据源为自定义Topic:可以使用脚本文件解析处理数据,再使用输出文件完成数据映射,如下图所示。数据源为数据服务中数据解析后的数据:数据解析任务可以对设备原始数据进行一些更复杂的加工计算,具体操作,请参见 数据解析。如需加工...

Custom Runtime如何避免僵尸进程?

可以使用Bash脚本的方式来启动程序。Bash进程有回收僵尸进程的能力。例如,您可以将 启动命令 配置为/code/start.sh,start.sh的内容如下:#!bin/bash python/code/app.py 在使用Serverless Devs工具或者API时,您也可以不配置 启动命令...

使用cava编写排序脚本

本文只聚焦在通过cava如何编写排序脚本,至于脚本的创建和使用请参考排序脚本API使用手册,另外也可以通过我们提供的 命令行工具 来创建排序脚本。与排序表达式相比,使用cava编写排序脚本具有更强的灵活性,可以定制性。用户可以脚本中...

使用cava编写排序脚本

本文只聚焦在通过cava如何编写排序脚本,至于脚本的创建和使用请参考排序脚本API使用手册,另外也可以通过我们提供的 命令行工具 来创建排序脚本。与排序表达式相比,使用cava编写排序脚本具有更强的灵活性,可以定制性。用户可以脚本中...

过滤与映射

可以使用SQL脚本组件进行PAI命令调用,详情请参见 SQL脚本。PAI-name Filter \-project algo_public \-DoutTableName="test_9"\-DinputPartitions="pt=20150501"\-DinputTableName="bank_data_partition"\-Dfilter="age>=40;参数名称 ...

PyAlink脚本

背景信息 PyAlink脚本支持两种使用方式(方式一:单独使用PyAlink脚本、方式二:PyAlink脚本与其他Designer的算法组件组合使用),可以使用上百种Alink组件,且支持通过编写代码的方式读入和写出多种类型的数据(PyAlink脚本不同数据类型的...

读CSV文件

可以使用PyAlink脚本组件进行Python代码调用,组件详情请参见 PyAlink脚本。参数名称 是否必选 描述 默认值 schemaStr 是 格式为 colname0 coltype0[,colname1 coltype1[,.]]。例如 f0 string,f1 bigint,f2 double。无 filePath 否 文件...

swing推荐

swing推荐是swing的批处理预测组件,您可以使用该组件基于swing训练模型和预测数据进行离线预测。本文为您介绍swing推荐的参数配置。使用限制 支持运行的计算资源为MaxCompute和Flink。组件配置 您可以通过以下任意一种方式,配置swing推荐...

协方差

可以使用SQL脚本组件进行PAI命令调用,详情请参见 SQL脚本。PAI-name cov-project algo_public-DinputTableName=maple_test_cov_basic12x10_input-DoutputTableName=maple_test_cov_basic12x10_output-DcoreNum=6-DmemSizePerCore=110;...

句子拆分

可以使用SQL脚本组件进行PAI命令调用,详情请参见 SQL脚本。PAI-name SplitSentences-project algo_public-DinputTableName="test_input"-DoutputTableName="test_output"-DdocIdCol="doc_id"-DdocContent="content"-Dlifecycle=30 参数...

Python脚本

如果物联应用开发(IoT Studio)平台提供的节点不能满足您的需求,您可以使用Python脚本节点,编写Python代码来实现功能逻辑。目前支持Python v2.7.9版本。且仅支持使用基本库和基本语法,不支持扩展库。编码说明 在业务逻辑编辑页面的 ...

文本摘要

可以使用 SQL脚本 执行如下PAI命令,也可以使用 ODPS SQL节点 执行如下PAI命令。PAI-name TextSummarization-project algo_public-DinputTableName="test_output"-DoutputTableName="test_output1"-DdocIdCol="doc_id"-DsentenceCol=...

无构建部署

GIT_REPO:Git 地址 GIT_BRANCH:Git 分支 COMMIT_ID:提交版本号 echo${GIT_REPO} echo${GIT_BRANCH} echo${COMMIT_ID} git clone${GIT_REPO}-b${GIT_BRANCH} 部署脚本可以直接使用这几个变量完成拉取代码操作。服务器上需要自行解决拉取代码...

PMI

执行成功后,输入表maple_test_pmi_basic_input的数据如下:doc w1 w2 w3 w4 w5 w6 w7 w8 w8 w9 w1 w3 w5 w6 w9 w0 w0 w0 w9 w1 w9 w1 w9 运行PAI命令 您可以使用 SQL脚本 执行如下PAI命令,也可以使用 ODPS SQL节点 执行如下PAI命令。...

编写自定义脚本

数据解析任务中源节点的Topic数据格式为原始数据时,可以使用自定义脚本进行解析。物联网平台支持配置JavaScript(ECMAScript 5)、Python 2.7和PHP 7.2语言的脚本。本文介绍自定义Topic数据解析脚本模板和示例。JavaScript脚本示例 脚本...

局部异常因子异常检测

可以使用PyAlink脚本组件进行Python代码调用,详情请参见PyAlink脚本。参数名称 是否必选 描述 默认值 predictionCol 是 预测结果列的列名。无 distanceType 否 聚类使用的距离类型,取值如下:EUCLIDEAN COSINE INNERPRODUCT CITYBLOCK ...

如何固定ECS应用变更过程中的JDK版本

可以在挂载脚本的启动前脚本中设置要执行的代码段,代码段中可以设置指定版本的JDK的下载地址信息,这样就可以实现在ECS应用的变更过程中(应用扩容、重置ECS实例等)都使用固定版本的JDK。操作步骤 获取指定版本JDK的下载地址信息。下载...

最大连通子图

可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name MaximalConnectedComponent-project algo_public-DinputEdgeTableName=MaximalConnectedComponent_func_test_edge-DfromVertexCol=flow_...

流水线的配置

自定义脚本 如果您有比较定制化的需求(比如向 使用自定义脚本发布静态资源,或者执行一些定时任务),那么您可以使用 自定义脚本。详见 流水线上的自定义脚本任务。部署 把构建成果部署到服务器运行。这部分相关知识较多,请从 应用部署...

IForest异常检测

IForest异常检测使用sub-sampling算法,降低了算法的计算复杂度,可以识别数据中的异常点,在异常检测领域有显著的应用效果。本文为您介绍IForest异常检测的参数配置。组件配置 您可以通过以下任意一种方式,配置IForest异常检测参数。方式...

k-Core

可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name KCore-project algo_public-DinputEdgeTableName=KCore_func_test_edge-DfromVertexCol=flow_out_id-DtoVertexCol=flow_in_id-...

计数三角形

可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name TriangleCount-project algo_public-DinputEdgeTableName=TriangleCount_func_test_edge-DfromVertexCol=flow_out_id-DtoVertexCol=flow_...

树深度

可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name TreeDepth-project algo_public-DinputEdgeTableName=TreeDepth_func_test_edge-DfromVertexCol=flow_out_id-DtoVertexCol=flow_in_id-...

常见问题

成本管家旧版内置告警如何升级 您可以使用升级脚本自动升级,下载升级脚本脚本使用说明如下:#下载脚本并cd到该脚本目录下,使用实际参数替换,执行命令#参数解释:成本管家project为 bill-analysis-{主账号id},endpoint为该project对应...

单源最短路径

可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name SSSP-project algo_public-DinputEdgeTableName=SSSP_func_test_edge-DfromVertexCol=flow_out_id-DtoVertexCol=flow_in_id-...

UDF(嵌入式)

在SQL脚本可以使用UDT语法直接调用 Foo.extractNumber。Java代码嵌入式UDF 示例代码如下。您需要通过脚本模式提交执行,详情请参见 SQL脚本模式。CREATE TEMPORARY FUNCTION foo AS 'com.mypackage.Reverse' USING #CODE ('lang'='JAVA')...

更新EasyRec配置文件

该组件的作用是使用EasyRec里的add_feature_info_to_config.py脚本,给推荐全链路深度定制开发平台PAIREC生成的临时文件template.config,添加特征信息。本文为您介绍该组件的配置方法。前提条件 已开通OSS并完成授权,详情请参见 开通OSS...

PageRank

可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name PageRankWithWeight-project algo_public-DinputEdgeTableName=PageRankWithWeight_func_test_edge-DfromVertexCol=flow_out_id-...

Python脚本

Designer 提供自定义Python脚本的功能,您可以使用Python脚本组件自定义安装依赖包及运行自定义的Python函数。本文为您介绍Python脚本组件的配置方法及使用示例。背景信息 Python脚本 组件位于 Designer 组件的 自定义算法组件 文件夹下。...

点聚类系数

可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name NodeDensity-project algo_public-DinputEdgeTableName=NodeDensity_func_test_edge-DfromVertexCol=flow_out_id-DtoVertexCol=flow_in_id...

Modularity

可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name Modularity-project algo_public-DinputEdgeTableName=Modularity_func_test_edge-DfromVertexCol=flow_out_id-DfromGroupCol=group_out_...

标签传播分类

可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name LabelPropagationClassification-project algo_public-DinputEdgeTableName=LabelPropagationClassification_func_test_edge-...

在ECS实例中自动执行脚本

本教程介绍如何使用弹性伸缩生命周期挂钩挂起ECS实例,并结合 系统运维管理 OOS(CloudOps Orchestration Service)的模板,实现扩缩容时在ECS实例中自动执行脚本。前提条件 使用本教程进行操作前,请确保您已经注册了阿里云账号。如还未...

边聚类系数

可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name EdgeDensity-project algo_public-DinputEdgeTableName=EdgeDensity_func_test_edge-DfromVertexCol=flow_out_id-DtoVertexCol=flow_in_id...

基本概念

SQL 脚本文件可以使用当前项目的离线样本。离线样本 离线样本是蚂蚁隐私计算服务平台各项目中的原始数据,离线样本被存储在节点上且只支持在节点本地使用。如果需要在项目中使用样本数据,需由节点所属机构的管理员,在管理控制台中将数据...

模型hitrate评估

该组件使用hit_rate_pai.py脚本,实现向量召回评估的功能。本文为您介绍该组件的配置方法。使用限制 支持使用的计算引擎为MaxCompute。组件配置 您可以使用以下任意一种方式,配置模型hitrate评估组件参数。方式一:可视化配置参数 输入桩 ...

标签传播聚类

可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name LabelPropagationClustering-project algo_public-DinputEdgeTableName=LabelPropagationClustering_func_test_edge-DfromVertexCol=flow_...

MongoDB 5.0新特性概览

高级脚本环境 新版MongoDB Shell的脚本环境建立在Node.js REPL(交互式解释器)之上,您在脚本可以使用所有的Node.js API和NPM的任何模块。您也可以从文件系统中加载和运行脚本(和旧版MongoDB Shell一样,您可以继续使用Load和Eval执行...
共有117条 < 1 2 3 4 ... 117 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
威胁情报服务 弹性公网IP 短信服务 人工智能平台 PAI 金融分布式架构 对象存储
新人特惠 爆款特惠 最新活动 免费试用