数据转发到DataHub
本文以物模型数据上报Topic为例，介绍流转消息数据的完整流程。工作原理 云产品流转将设备的Topic消息转发到DataHub Project中的Topic，使用DataHub服务进行清洗、分析、归档数据等操作。详细内容，请参见 数据总线DataHub。在上图中：数据...
OSS数据源
附录：脚本Demo与参数说明 附录：离线任务脚本配置方式 如果您配置离线任务时使用脚本模式的方式进行配置，您需要在任务脚本中按照脚本的统一格式要求编写脚本中的reader参数和writer参数，脚本模式的统一要求请参见 通过脚本模式配置离线...
配置限速流程组件
在离线单条管道脚本的开发页面，按照下图操作指引，进入 限速组件配置 页面。在 限速组件配置 对话框，配置参数。参数 说明 步骤名称 根据当前组件的使用场景，填写组件名称。速度上限 选择数据传输的速度上限：如果您选择 基于数据量限制...
最佳实践
通过配置流程编排实现让天猫精灵随机播放一首歌曲 由于随机播放，我们可以根据您所处区域的天气来推荐一首歌曲，所以我们会用【API调用节点】调用天气接口，然后将天气结果传入【大模型节点】的Prompt中，最终大模型推荐了一首歌曲，我们再...
同步增量数据到MaxCompute
在DataStudio控制台的 数据开发 页面，单击业务流程节点下的目标业务流程。如果需要新建业务流程，请参见 创建业务流程。在 数据集成 节点上右键选择 新建节点>离线同步。在 新建节点 对话框，选择路径并填写节点名称。单击 确认。在 数据...
数据集成服务
迁移过程中会使用到MySQL的Reader脚本配置和表格存储的Writer脚本配置，具体数据源配置如下：源数据源：MySQL数据源 目标数据源：Tablestore数据源 同步Oracle数据到表格存储 Oracle数据库中的数据只能迁移到表格存储的数据表中。...
概述
配置跨库Spark SQL节点 Lindorm Spark 通过Lindorm计算引擎高效地完成分布式计算任务，满足用户在数据生产、交互式分析、机器学习和图计算等场景中的计算需求。配置Lindorm Spark节点 ADB Spark 支持周期性、有顺序地调度Spark作业。配置...
使用Apache Airflow调度MaxCompute
背景信息 Apache Airflow是Airbnb开源的、基于Python编写的调度工具，基于有向无环图（DAG），可以定义一组有依赖的作业，并按照依赖顺序依次执行作业。还支持通过Python定义子作业，并支持各种Operators操作器，灵活性大，能满足用户的...
Shell节点
数据开发（DataStudio）基于业务流程执行具体开发操作，因此创建节点前需先新建业务流程，详情请参见 创建业务流程。创建通用Shell节点 进入数据开发页面。登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中...
快速入门
操作流程 步骤一：进入数据开发工作台 步骤二：关联计算集群 步骤三：使用Zeppelin交互式开发作业 步骤四：编写Airflow Python脚本 步骤五：使用Airflow调度Notebook作业 步骤一：进入数据开发工作台 进入详情页面。登录 阿里云E-MapReduce...
如何使用流程编排处理复杂业务场景
本篇文档主要介绍流程编排中各流程变量的含义及操作方法。定义 支持通过画布的方式，编排复杂业务流程对接大模型。完成流程编排后，可以直接创建关联新建应用或关联已有应用。提升接入大模型的效率，同时提供应用流程的全生命周期管理，...
迁移Function Studio代码至云效服务平台
MaxCompute UDF开发流程 认识MaxCompute Studio 添加MaxCompute引擎资源至DataWorks进行管理 添加MaxCompute引擎函数至DataWorks进行管理 方案三：通过将Java或Python代码嵌入SQL脚本的方式，使用MaxCompute脚本模式实现代码嵌入式UDF...
如何通过第三方打码平台实现验证码识别
str']print(dis_result)return dis_code 可视化模式下，流程搭建示例如下：说明#您可调用任意第三方平台提供的验证码识别接口，本文以超级鹰平台的公开接口为例，下载接口脚本文件，将接口python代码复制到下面第一个调用自定义脚本中即可...
数据转发到云数据库RDS
如果仅需将物联网平台数据转发到数据库保存，可以通过云产品流转功能，使用脚本和函数将解析处理后的数据转发到云数据库RDS版（以下简称RDS）实例的数据库中存储。本文以物模型数据上报Topic为例，介绍流转消息数据的完整流程。工作原理 云...
使用阿里云CLI执行滚动升级任务
commandType 待执行的脚本类型，取值RunShellScript代表Shell脚本。invokeScript 执行滚动升级任务时，在ECS实例中执行的脚本。rollbackScript 执行回滚任务时，在ECS实例中执行的脚本。OOSAssumeRole 执行任务时使用的RAM角色，默认为...
配置条件分发流程组件
在离线单条管道脚本的开发页面，按照下图操作指引，进入 条件分发设置 对话框。根据 条件分发设置 对话框提示，配置参数。参数 描述 步骤名称 根据当前组件的使用场景，填写组件名称。输入字段 根据上游的输入，为您展示输入字段。合并逻辑...
通过SAG vCPE实现阿里云与AWS互通
脚本下载后，请勿修改脚本内容以及脚本名称。如果您的宿主机部署在中国内地区域，请通过以下命令下载脚本。wget-O/root/sag_vcpe_v2.3.0_deployment.sh ...
工业质检解决方案
本文为您介绍该解决方案的使用流程。背景信息 缺陷检测是生产制造过程中必不可少的一步，广泛应用于各个工业领域，包括3C、电子、汽车、化工及轻工等领域。虽然人工智能和机器视觉等检测技术逐渐成熟，但人工目视的方法仍占据较大比重，...
通过SAG vCPE实现阿里云与Azure互通
脚本下载后，请勿修改脚本内容以及脚本名称。如果您的虚拟机部署在中国内地区域，请通过以下命令下载脚本。wget-O/root/sag_vcpe_v2.3.0_deployment.sh ...
ENS通过SAG vCPE访问云上资源
部署流程 前提条件 在您开始操作前，请确保您已经满足以下条件：您已经开通ENS。具体操作，请参见 开通服务。您已经在阿里云平台创建了专有网络VPC（Virtual Private Cloud）并部署了相关云服务。具体操作，请参见 搭建IPv4专有网络。您...
数据转发到云原生数据库PolarDB MySQL版
本文以物模型数据上报Topic为例，介绍消息转发至PolarDB MySQL版数据表的完整流程。工作原理 云产品流转将设备的Topic消息转发到PolarDB MySQL版集群下数据库的数据表中存储，使用PolarDB MySQL版的数据库服务。详细内容，请参见 PolarDB ...
数据脱敏
原理介绍 执行流程 项目管理员在 安全规范>脱敏算法 中查看内置脱敏算法并测试脱敏效果。项目管理员在 ODC 目标项目>敏感数据 中手动添加敏感列；如果通过自动扫描方式添加敏感列，需要先创建识别规则。用户在执行查看表数据、SQL 窗口查询...
数据转发到表格存储（Tablestore）宽表模型
本文以物模型数据上报Topic为例，介绍使用云产品流转功能将设备数据转发到表格存储（Tablestore）宽表模型中的完整流程。工作原理 云产品流转将设备的Topic消息转发到表格存储实例中的数据表中存储，使用表格存储的宽表引擎服务。在上图中...
移动热修复FAQ
iOS热修复是否会被Apple审核拒绝 iOS热修复WaxPatch日志分析及计数统计说明 iOS热修复lua脚本说明 iOS端patch包拉取后在本地的加载路径 Android热修复支持修复哪些内容 公共云热修复对同一个版本多次发布补丁问题 waxpatch是否有IDE或其他...
Graph Database（GDB）数据源
附录：脚本Demo与参数说明 附录：离线任务脚本配置方式 如果您配置离线任务时使用脚本模式的方式进行配置，您需要在任务脚本中按照脚本的统一格式要求编写脚本中的reader参数和writer参数，脚本模式的统一要求请参见 通过脚本模式配置离线...
产品概述
它具备深度的行业知识，能够生成高质量的专业内容，能覆盖各行业常见的文体类型，写作文体丰富多样，包括时政稿件、时事评论、视频脚本、报告、请示、通知、方案、复函等。AI妙笔通过人工智能技术提升创作效率，帮助用户节省时间和精力，并...
通过SAG vCPE实现云上ACK与云下K8s集群互通
类型 私网网段（VPC网段）容器网段 阿里云云上ACK集群 172.16.0.0/12 10.77.0.0/16 IDC中K8s集群 192.168.0.0/16 10.18.0.0/16 部署流程 创建SAG vCEP实例：在 智能接入网关管理控制台 创建SAG vCPE实例，创建后您可以通过SAG vCPE实例管理...
使用PAI Python SDK训练和部署PyTorch模型
主要流程包括：安装和配置SDK 安装PAI Python SDK，并配置访问密钥AccessKey，使用的工作空间，以及OSS Bucket。准备训练数据 我们下载一个MNIST数据集，上传到OSS上供训练作业使用。准备训练脚本 我们使用PyTorch示例仓库中的MNIST训练...
使用流程
本文介绍了联邦模型开发总体流程和基于联邦建模控制台开发联邦模型的流程。联邦建模是蚂蚁隐私计算服务平台中的一个组件，因此在使用联邦建模控制台联合建模之前，需要先部署联邦节点，以及在 管理控制台 中注册、配置节点和项目，如下图所...
特征工程
右键单击新建的业务流程下的 MaxCompute，选择 新建资源>Python，新建一个名称为 count_cates_kvs.py 的python脚本资源。具体操作，请参见 创建并使用MaxCompute资源。右键单击新建的业务流程下的 MaxCompute，选择 新建函数。新建一个名称...
同步增量数据到OSS
宽表模型：导出 表格存储 数据表中的数据到OSS时支持使用向导模式或者脚本模式。时序模型：导出 表格存储 时序表中的数据到OSS时只支持使用脚本模式。使用Tablestore Stream增量同步数据时，要求每次写入Tablestore的数据必须是整行数据。...
数据转发到表格存储（Tablestore）时序模型
本文以物模型数据上报Topic为例，介绍使用云产品流转功能将设备数据转发到表格存储（Tablestore）时序模型中的完整流程。工作原理 云产品流转将设备的Topic消息转发到表格存储实例中的数据表中存储，使用表格存储的宽表引擎服务。在上图中...
流水线的配置
自定义脚本 如果您有比较定制化的需求（比如向 使用自定义脚本发布静态资源，或者执行一些定时任务），那么您可以使用 自定义脚本。详见 流水线上的自定义脚本任务。部署 把构建成果部署到服务器运行。这部分相关知识较多，请从 应用部署...
数据库变更管理
任务流程 在任务详情面板中，单击 任务流程 页签查看发起任务状态、审批状态、执行状态和执行结果等信息。执行结果 在任务详情面板中，单击 执行结果 页签查看执行成功和执行失败记录。回滚工单 在任务详情面板中，单击 回滚工单 查看任务 ...
配置限速流程组件
本文为您介绍如何配置限速流程组件。操作步骤 进入离线单条管道脚本的开发页面，请参见 离线管道组件开发入口。按照下图指引，进入 限速组件配置 页面。在 限速组件配置 对话框，配置参数。参数 说明 步骤名称 根据当前组件的使用场景，...
导出全量数据到OSS
本示例中，该数据源名称使用OTS2OSS，如下图所示。重要 配置OSS数据源的参数时，请注意Endpoint中不能包括Bucket的名称，且必须以 http:// 或者 https:// 开头。对OSS的访问支持Access Key模式和RAM角色授权模式，请根据实际选择。Access ...
Java应用构建并部署ECS
三、云效解决方案 结合云效持续交付流水线和主机部署的能力，为应用持续交付提供了很好的基础保障，如图：开发者提交代码变更到代码库，云效在监听着代码库的变动，一旦代码发生变化，将自动触发云效持续部署流水线一次构建任务的运行，...
Golang应用构建并部署ECS
三、云效解决方案 结合云效持续交付流水线和主机部署的能力，为应用持续交付提供了很好的基础保障，如图：开发者提交代码变更到代码库，云效在监听着代码库的变动，一旦代码发生变化，将自动触发云效持续部署流水线一次构建任务的运行，...
数据转发到AMQP服务端订阅消费组消费
直接使用AMQP服务端订阅实时获取设备数据，只能从产品维度获取所有设备的数据，使用消息转发的云产品流转功能，可以将全部设备或指定设备发送到物联网平台的消息，先经过解析脚本处理和过滤，再转发到AMQP服务端订阅消费组，通过AMQP客户端...
云效Flow基于标签功能实现阿里云ECS多环境发布
5、接下来进行部署脚本的配置：·下载路径：表示希望把”构建上传”任务中的压缩包下载到机器上的什么位置，在本例的值为：/home/admin/app/package.tgz·执行用户：希望以是哪个用户的身份进行脚本执行，本例的值为：root·部署脚本：在...
- 产品推荐
- 这些文档可能帮助您