Designer概述
自定义算法组件 包括SQL脚本、Python脚本、PyAlink脚本等自定义算法组件，可以满足您更加定制化的算法工作流串联需求。从实现框架及支持的计算资源来区分 包括Alink框架和PAICommand框架，两种框架的算法组件各自具有一些独特的功能特性：...
工作空间事件中心
PAI提供了工作空间维度的事件中心，您可以创建事件规则，以跟踪和监控DLC任务或工作流任务的状态，或者基于AI资产管理-模型版本准入状态变化触发下游事件。本文为您介绍如何在工作空间的事件中心创建事件规则。使用限制 仅支持在华北6...
基于图算法实现金融风控
本文为您介绍如何基于图算法，实现金融风控。背景信息 图算法通常适用于关系网状的业务场景。与常规结构化数据不同，图算法将数据...工作流运行结束后，右键单击区域③中的 SQL脚本，在快捷菜单，单击 查看数据，即可查看每个人的欺诈概率。
普通集成
普通集成是指 云工作流 直接通过阿里云开放平台OpenAPI集成云产品对外提供的服务接口，不对服务接口做任何特殊处理和优化。允许 云工作流 通过调用弹性计算、存储服务、数据库、容器、大数据处理、可观测性服务及中间件服务在内的多个阿里...
访问DSW实例
本文为您介绍如何从控制台访问DSW实例，以及介绍DSW实例界面的功能特性，包括Notebook、WebIDE和Terminal模块的菜单栏、工具栏、工作区等，帮助您快速理解并熟练掌握界面布局。前提条件 已创建DSW实例，具体操作，请参见 创建DSW实例。控制...
数据导出到OSS概述
脚本模式：通过直接编写数据同步的JSON脚本来完成数据同步开发，适合高级用户，学习成本较高。脚本模式可以提供更丰富灵活的能力，实现精细化的配置管理。5 数据迁移结果验证 完成数据导出操作后，在OSS控制台查看导入的数据。增量同步流程...
上传管道脚本
Dataphin支持将已下载的管道脚本上传至系统进行二次开发。本文为您介绍如何上传管道脚本。前提条件 已下载管道脚本，详情请参见 下载管道脚本。背景信息 上传管道脚本，详情请参见 数据集成权限列表。操作步骤 登录 Dataphin控制台。在...
上传管道脚本
Dataphin支持将已下载的管道脚本上传至系统进行二次开发。本文为您介绍如何上传管道脚本。前提条件 已下载管道脚本，详情请参见 下载管道脚本。背景信息 上传管道脚本，详情请参见 数据引入权限列表。操作步骤 登录 Dataphin控制台。在...
前言
工作原理 创建 App：创建 App 时，将运行作业需要的软件或脚本安装在自定义的镜像中，并设置资源的默认配置，以及输入输出的格式。提交 App 作业：提交作业时，按照上述资源配置启动虚拟机镜像或 Docker 镜像，使用用户输入的数据运行软件...
配置网卡多队列的网络中断亲和性
tar-xzf ecs_mq_2.0.tgz 执行以下命令，更换工作路径。cd ecs_mq/执行以下命令，运行 ecs_mq 脚本。bash install.sh<操作系统名称><操作系统主版本号>说明 请您根据实际环境替换命令中的<操作系统名称>和<操作系统主版本号>。以Red Hat ...
时间窗口SQL脚本
在使用时按照需要打开或关闭多日期循环执行开关，在整个工作流发布至周期性调度之前 切记关闭 多日期循环执行开关，避免生产环境下产生不需要的重复执行补数据任务。节点上配置的并发数仅能控制当前节点的并发，如果有多个节点都需要补数据...
异步任务回调
本文介绍了 Serverless 工作流 的回调功能。相比较轮询，使用回调有效地降低了延迟、减少了轮询对服务器造成的不必要压力。另外，回调功能配合队列可以实现对非FC任务的编排，将 Serverless 工作流 的编排范围扩展到任意类型的计算资源。...
使用自定义节点添加脚本
本文将介绍如何使用自定义节点添加脚本。前提条件 已完成构建混合弹性容器集群（弹性ECS）步骤5之前的操作。步骤一：编写自定义节点添加脚本 您可以通过以下两种方式编写自定义节点的脚本。方式一：Kubernetes二进制文件搭建 kubelet配置的...
SQL脚本
SQL脚本是自定义SQL组件，您可以通过SQL脚本编辑器编写SQL语句，并提交至MaxCompute执行。本文为您介绍SQL脚本的组件配置和使用场景。组件配置 Designer 仅支持通过可视化方式，配置SQL脚本组件的参数，组件参数配置如下所示。参数 描述 ...
打包Linux下sqlserver初始化镜像
1、准备数据库初始化sql脚本 当部署应用实例后，用于建表或插入基础数据等数据库初始化工作。创建user数据表，并插入两条初始化数据*/*/CREATE DATABASE demoDB GO CREATE TABLE[demoDB].[dbo].[user]([id]bigint NOT NULL,[gmt_create]...
使用PAI Python SDK训练和部署PyTorch模型
对于训练作业，estimator.fit 方法的 inputs 是字典，对应的每一个输入数据都是一个Channel，Key是Channel名，Value是数据存储路径，训练作业脚本可以通过 PAI_INPUT_{ChannelNameUpperCase} 环境变量获取到输入数据挂载到工作容器内的数据...
EdgeScript概述
边缘脚本（EdgeScript，简称ES）是一个可供您快速实现 DCDN 定制配置的工具箱，当 DCDN 控制台上的标准配置无法满足您的业务需求时，可以尝试使用边缘脚本简单编程实现。边缘脚本通过简单易学的语法和庞大的函数库，能够像积木式地组合出...
EdgeScript概述
边缘脚本（EdgeScript，简称ES）是一个可供您快速实现 CDN 定制配置的工具箱，当 CDN 控制台上的标准配置无法满足您的业务需求时，可以尝试使用边缘脚本简单编程实现。边缘脚本通过简单易学的语法和庞大的函数库，能够像积木式地组合出个性...
EdgeScript概述
边缘脚本（EdgeScript，简称ES）是一个可供您快速实现 CDN 定制配置的工具箱，当视频点播控制台上的标准配置无法满足您的业务需求时，可以尝试使用边缘脚本简单编程实现。边缘脚本通过简单易学的语法和庞大的函数库，能够像积木式地组合出...
功能简介
数据开发为用户提供一站式计算节点开发能力，通过对数据加工流程的开发和运行调试等环节的一体化管理，数据开发实现数据加工工作流编排、加工逻辑的复用，大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构，提高系统的工程化水平...
数据开发
数据开发为用户提供一站式计算节点开发能力，通过对数据加工流程的开发、部署、调试等环节的一体化管理，数据开发实现数据加工工作流编排、加工逻辑的复用，大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构，提高系统的工程化...
功能简介
数据开发为用户提供一站式计算节点开发能力，通过对数据加工流程的开发和运行调试等环节的一体化管理，数据开发实现数据加工工作流编排、加工逻辑的复用，大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构，提高系统的工程化水平...
新增脚本同步任务
数据同步支持通过配置脚本来新建数据同步任务。本文主要介绍如何新增脚本同步任务。前提条件 已存在对应数据源，具体操作，请参见 新建数据源。已完成源端数据和目标端的物理表同步，具体操作，请参见 获取物理表。已添加同步任务目录，...
新增脚本同步任务
数据同步支持通过配置脚本来新建数据同步任务。本文主要介绍如何新增脚本同步任务。前提条件 已存在对应数据源，具体操作，请参见 新建数据源。已完成源端数据和目标端的物理表同步，具体操作，请参见 获取物理表。已添加同步任务目录，...
上线脚本同步任务
新增脚本同步任务后，需对任务进行上线操作，脚本同步任务上线后会按照创建任务中设置的调度周期执行。本文介绍如何上线脚本同步任务。前提条件 已新增脚本同步任务，具体操作，请参见 新增脚本同步任务。操作步骤 登录企业数据智能平台。...
上线脚本同步任务
新增脚本同步任务后，需对任务进行上线操作，脚本同步任务上线后会按照创建任务中设置的调度周期执行。本文介绍如何上线脚本同步任务。前提条件 已新增脚本同步任务，具体操作，请参见 新增脚本同步任务。操作步骤 登录 数据资源平台控制台...
导入MongoDB数据
准备工作 将MongoDB的离线数据迁移至Lindorm宽表需要完成以下准备工作。MongoDB的数据准备如下：{"id":ObjectId("624573dd7c0e2eea4cc8*"),"title":"MongoDB教程","description":"MongoDB是一个NoSQL数据库","by":"菜鸟教程","url":...
Windows系统服务器中如何通过IIS7.5配置伪静态脚本
单击 谓词，选择 下列谓词之一，将谓词限制设置为 GET,HEAD,POST,DEBUG，单击 确定，然后在 添加脚本映射 提示窗口，单击 是。在 处理程序映射 页面右上角双击 添加通配符脚本映射。在 添加通配符脚本映射 提示框中，选择路径为“*”，设置...
管理引导操作
手动执行功能可以批量选择在已有节点上运行指定脚本，以实现个性化需求，手动执行脚本的详情，请参见 手动执行脚本。引导操作类似手动执行，在集群创建时或者创建完成后，您可以通过引导操作功能，完成很多目前E-MapReduce集群尚未支持的...
PAIFlow Manifest参数说明
公共格式 API版本和元信息 apiVersion:工作流格式的版本 metadata:name:工作流名 identifier:工作流标识 version:工作流版本 provider:工作流提供方 displayName:工作流显示名 annotations:工作流注解，目前只支持官方注解 字段名称 类型 ...
查看脚本同步任务监控
在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。在左侧导航栏，单击 图标，将鼠标悬停在 配置化同步 上，单击 图标。在 配置化同步 页面，单击目标同步任务 操作 列的 监控。跳转到 离线同步实例 页面，可查看同步任务运行详情...
查看脚本同步任务监控
在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。在左侧导航栏，单击 图标，将鼠标悬停在 配置化同步 上，单击 图标。在 配置化同步 页面，单击目标同步任务 操作 列的 监控。跳转到 离线同步实例 页面，可查看同步任务运行详情...
更新EasyRec配置文件
该组件的作用是使用EasyRec里的add_feature_info_to_config.py脚本，给推荐全链路深度定制开发平台PAIREC生成的临时文件template.config，添加特征信息。本文为您介绍该组件的配置方法。前提条件 已开通OSS并完成授权，详情请参见 开通OSS...
特征工程
在左侧导航栏单击 工作空间列表，在工作空间列表页面中单击待操作的工作空间名称，进入对应工作空间内。在工作空间页面的左侧导航栏选择 模型开发与训练>可视化建模（Designer），进入Designer页面。步骤二：构建工作流 在 Designer 页面，...
数据过滤器
通过数据过滤器可以将接口（数据分析服务、自定义接口或服务开发工作台）返回的数据转换成您所需要的内容，并展示在Web可视化组件上。本文介绍数据过滤器的使用方法。过滤方法 过滤方法支持数据过滤脚本和数据表配置两种过滤方法：数据过滤...
通过脚本模式配置离线同步任务
当您需要实现更精细化的配置管理时，您可以使用脚本模式配置离线同步任务，通过编写数据同步的JSON脚本并结合DataWorks调度参数使用，将源端单表或分库分表的全量或增量数据周期性同步至目标数据表。本文为您介绍脚本模式配置离线同步任务...
查看历史信息
本文为您介绍如何下载离线单条管道脚本及查看脚本的历史版本详情。前提条件 完成离线单条管道的创建，详情请参见 通过单条管道创建集成任务。查看历史版本详情 登录 Dataphin控制台。在Dataphin控制台页面，选择工作区地域 后，单击 进入...
查看历史信息
本文为您介绍如何下载离线单条管道脚本及查看脚本的历史版本详情。前提条件 完成离线单条管道的创建，详情请参见 通过离线单条管道配置集成任务。查看历史版本详情 登录 Dataphin控制台。在Dataphin控制台页面，选择工作区地域 后，单击 ...
将表格存储时序表中数据同步到另一个时序表
在 工作空间列表 页面，在目标工作空间 操作 列选择 快速进入>数据开发。在DataStudio控制台的 数据开发 页面，单击业务流程节点下的目标业务流程。如果需要新建业务流程，请参见 创建业务流程。在 数据集成 节点上右键选择 新建节点>离线...
SHELL
SHELL任务类型，用于创建SHELL类型的任务并执行自定义的Shell脚本。本文为您介绍创建SHELL类型任务时涉及的参数，并提供了SHELL任务的示例。参数说明 参数 说明 节点名称 任务的名称。一个工作流定义中的节点名称是唯一的。运行标志 正常...
- 产品推荐
- 这些文档可能帮助您