配置AnalyticDB for MySQL 3.0输出组件
AnalyticDB for MySQL 3.0输出组件用于向MySQL数据源写入数据。同步其他数据源的数据至AnalyticDB for MySQL 3.0数据...后续步骤 完成输出组件的配置后，下一步您可以配置离线单条管道的调度相关信息。具体操作，请参见 周期性管道调度配置。
绘图
管道可以配置流体动画。连线管道和自由管道的新建和修改方法同连线。传送带 传送带是物料传输装置，由皮带轮和皮带组成。根据是否锚定在组件上（移动组件时，连线管道也随着组件一起移动，传送带分为 连线传送带 和 自由传送带。传送带可...
集成任务提交说明
检查项 描述 配置检查 检查集成管道的ID配置、集成管道名称配置、集成管道FileId配置、集成管道对象类型配置、集成管道调度配置、集成管道配置是否正确。参数配置 检查集成管道参数的当前实际值是否正确。权限检查 检查集成管道的对象是否...
配置FTP输出组件
也支持管道级别配置的参数。可自由选择需要的参数与分隔符。任务级标记完成文件中将依次换行写入每个文件的信息。空值转换 非必选，表示null值的字符串。字段映射 输入字段 从上游输入组件读取的字段。输出字段 您需要配置输出字段。...
配置FTP输出组件
也支持管道级别配置的参数。可自由选择需要的参数与分隔符。任务级标记完成文件中将依次换行写入每个文件的信息。空值转换 非必选，表示null值的字符串。字段映射 输入字段 从上游输入组件读取的字段。输出字段 您需要配置输出字段。...
配置离线管道调度
调度配置用于定义周期性调度类型的离线管道任务在调度过程中的调度规则。本文为您介绍如何配置周期性离线管道调度配置。背景信息 依赖关系是两个或多个节点之间的语义连接关系，同时上游节点的状态将影响其他下游节点的运行状态。配置了...
配置离线管道调度
调度配置用于定义周期性调度类型的离线管道任务在调度过程中的调度规则。本文为您介绍如何配置周期性离线管道调度配置。背景信息 依赖关系是两个或多个节点之间的语义连接关系，同时上游节点的状态将影响其他下游节点的运行状态。配置了...
弹性搜索的审计事件
DescribePipelineManagementConfig 查询Logstash管道管理配置。DescribeRegions 查询阿里云Elasticsearch支持的地域信息。DescribeSnapshotSetting 查询Elasticsearch集群的数据备份配置。DescribeTemplates 查询Elasticsearch实例的场景...
阿里云Elasticsearch支持被审计的事件说明
DescribePipelineManagementConfig 获取Logstash管道管理配置。DescribeRegions 获取阿里云Elasticsearch支持的地域信息。DescribeSnapshotSetting 获取Elasticsearch集群的数据备份配置。DescribeTemplates 获取Elasticsearch实例的场景...
API概览
DescribePipelineManagementConfig 获取Logstash管道管理配置。DeletePipelines 删除指定的Logstash管道。ListPipelineIds 设置Kibana管道管理时，测试Logstash与Kibana连通性，并获取目标Kibana上创建的管道ID列表。Beats API 描述 ...
创建自定义组件
创建自定义组件支持选择不同的任务类型（包括：Tensorflow、PyTorch、XGBoost、ElasticBatch）、创建输入输出管道、配置超参等，自定义组件创建成功后，会转换为Designer界面可视化参数配置，详情请参见 操作步骤。针对不同的任务类型，...
使用配置巡检功能检查注册集群Workload安全隐患
ACK集群提供配置巡检功能，帮助您扫描集群中工作负载配置的安全隐患。执行巡检任务后，ACK会生成巡检报告，您可以根据报告结果查看并处理集群风险项，实时了解集群健康状态。前提条件 您已通过容器服务Kubernetes版接入一个注册的...
使用配置巡检检查集群工作负载
ACK集群提供配置巡检功能，帮助您扫描集群中工作负载配置的安全隐患。执行巡检任务后，ACK会生成巡检报告，您可以根据报告结果查看并处理集群风险项，实时了解集群健康状态。前提条件 已创建v1.14及以上版本的 ACK托管集群 或 ACK专有集群...
离线集成概述
离线集成支持多种组件，包括输入、输出与转换组件等，通过在画布上简单的拖拽、配置并组装的方式，生成离线集成单条管道。离线集成也支持脚本模式，支持更多个性化配置。同时，用户创建的自定义RDBMS数据源的输入与输出组件也会自动在创建...
无影云桌面配置AD域后工作区状态一直为配置信任失败
问题描述 使用阿里云无影云桌面时，在创建AD工作区过程中配置AD域后，工作区状态一直为配置信任失败。解决方案 请执行以下操作，登录AD域控服务器，配置本地安全策略：在 AD域配置 面板的 配置信任关系 页面，参考操作提示，登录AD域控...
智能生产
完成智能媒体审核作业后，如果配置了管道MNS消息队列事件通知，会向消息服务指定的队列或主题发送消息。详细信息请参见 接收消息通知。查询作业结果。您可以通过QueryIProductionJob接口查询智能生产作业的状态和结果，根据智能生产任务ID...
智能审核
完成媒体审核作业后，如果配置了管道MNS消息队列事件通知，会向消息服务指定的队列或主题发送消息。详细说明请参见 接收消息通知。查询作业结果。您可以通过QueryMediaCensorJobDetail接口查询媒体审核作业的状态结果，根据媒体审核任务ID...
创建分辨率倍增任务
完成转码作业后，如果配置了管道MNS消息队列事件通知，会向消息服务指定的队列或主题发送消息。详细信息请参见 接收消息通知。查询作业结果。调用 查询转码作业 接口查询执行结果，获取输出文件URL。调用 遍历转码作业 接口，通过管道ID、...
创建窄带高清TM1.0转码任务
完成转码作业后，如果配置了管道MNS消息队列事件通知，会向消息服务指定的队列或主题发送消息。详细信息请参见 接收消息通知。查询作业结果。调用 查询转码作业 接口查询执行结果，获取输出文件URL。调用 遍历转码作业 接口，通过管道ID、...
创建窄带高清TM2.0转码任务
完成转码作业后，如果配置了管道MNS消息队列事件通知，会向消息服务指定的队列或主题发送消息。详细信息请参见 接收消息通知。查询作业结果。调用 查询转码作业 接口查询执行结果，获取输出文件URL。调用 遍历转码作业 接口，通过管道ID、...
Dataphin管道任务输入组件是否能配置逻辑表
概述 本文主要介绍Dataphin管道任务输入组件是否能配置逻辑表。详细信息 管道任务可以配置逻辑表。在组件库中选择LogicalTable组件。适用于 Dataphin
智能标签
智能标签作业完成后，如果配置了管道MNS消息队列事件通知，会向消息服务指定的队列或主题发送消息。详细信息请参见 接收消息通知。查询作业结果。通过API/SDK方式查询智能标签作业的状态结果，按照智能标签任务ID进行查询。详细参数信息请...
创建普通转码任务
完成转码作业后，如果配置了管道MNS消息队列事件通知，会向消息服务指定的队列或主题发送消息。详细信息请参见 接收消息通知。查询作业结果。调用 查询转码作业 接口查询执行结果，获取输出文件URL。调用 遍历转码作业 接口，通过管道ID、...
视频DNA
视频DNA通常是一个二进制串，用来唯一标记一个视频。您可以使用视频DNA服务提取并比对视频中的图像、音频等...接收回调信息：完成作业后，如果配置了管道MNS消息通知，会向消息服务指定的队列或主题发送消息。详细说明请参见 接收消息通知。
管道管理
} 更新管道配置 调用UpdatePipeline接口，完成更新管道配置功能。更新管道配置*@param client*@return*@throws Exception*/public static UpdatePipelineResponse updatePipeline(DefaultAcsClient client)throws Exception { ...
Dataphin管道任务如何配置多个静态分区
问题描述 Dataphin管道任务如何配置多个静态分区？解决方案 多个静态分区需要使用逗号隔开。适用于 Dataphin 数据仓库静态分区
管道管理
更新管道配置*@param client*@return*/func UpdatePipeline(client*mts.Client)(*mts.UpdatePipelineResponse,error){ request:=mts.CreateUpdatePipelineRequest()/管道ID,可以在MPS控制台>全局设置>管道及回调查看,或通过addPipeline创建...
通过Logstash切分数据并提取到字段中
以上管道配置的原理说明如下：通过Logstash的 filter.mutate.gsub 参数，使用正则表达式 \|去匹配 LogMessage 中的|将|替换为|（即|+空格）。替换后的效果如下。LogMessage:|1390000*|jop|byORP|2022-04-18T14:18:16.633|/log/cms/send|200...
离线集成管道通道配置
重要 输出组件所配置的查询超时优先于管道配置的查询超时时间。数据库连接重试次数 数据库连接超时，任务会自动重试连接直到完成设定的重试次数，默认为1次，最小值为0，最大可配置上限为10次。若达最大重试次数仍未连接成功，则任务状态为...
离线集成管道通道配置
重要 输出组件所配置的查询超时优先于管道配置的查询超时时间。数据库连接重试次数 数据库连接超时，任务会自动重试连接直到完成设定的重试次数，默认为1次，最小值为0，最大可配置上限为10次。若达最大重试次数仍未连接成功，则任务状态为...
通过Logstash实现多字段数据整合
但是您可以通过使用不同的mutate块来控制这个顺序，例如以上管道配置中使用了三个mutate块来控制执行顺序：rename、merge、remove_field。更多管道配置说明，请参见 通过配置文件管理管道 和 Logstash配置文件说明。警告 配置完成后，需要...
手动搭建FTP站点（CentOS 8）
关于匿名模式的配置方式、第三方FTP客户端工具使用方式等介绍，请参见 常见问题。本教程示例步骤使用以下资源版本：实例规格：ecs.g6.large 操作系统：CentOS 8.2 64位 vsftpd：3.0.3 当您使用不同软件版本时，可能需要根据实际情况调整...
使用自定义组件
管道及参数配置 参数 描述 输入 单击 配置两个输入管道：输入名称 分别配置为：train、test。输入来源：OSS。是否必填 分别配置为：是、否。描述 分别配置为：训练数据、测试数据。输出 单击 配置两个输出管道：输出名称 分别配置为：model...
搭建FTP站点（Alibaba Cloud Linux 3）
关于匿名模式的配置方式、第三方FTP客户端工具使用方式等介绍，请参见 常见问题。本教程示例步骤使用以下资源版本：实例规格：ecs.g6.large 操作系统：Alibaba Cloud Linux 3.2104 LTS 64位 vsftpd：3.0.3 说明 当您使用不同软件版本时，...
搭建FTP站点（CentOS 7）
关于匿名模式的配置方式、第三方FTP客户端工具使用方式等介绍，请参见 常见问题。准备工作 快速部署时选择已有实例或手动部署FTP站点时，已有ECS实例必须满足以下条件：实例已分配公网IP地址或绑定弹性公网IP（EIP）。操作系统必须为CentOS...
AD办公网络常见问题
在 本地安全策略 页面右侧的 策略 面板中，找到 网络访问:可匿名访问的命名管道 并右键 网络访问:可匿名访问的命名管道，然后选择 属性。在 网络访问:可匿名访问的命名管道 属性 面板的 本地策略设置 页签下，在输入框中输入以下内容并按照...
配置离线管道调度依赖
本文为您介绍周期离线管道调度依赖配置说明。操作步骤 请参见，进入离线集成任务 属性 面板。在 调度依赖 区域，配置集成任务 调度依赖 参数。上游依赖 自动解析 集成任务上游依赖，您可以单击 自动解析，Dataphin将根据集成任务自动解析...
OpenAPI列表
PipelineCommand 管道配置。PipelineObject 管道对象。PipelineSettings 任务通道配置。PipelineTreeNodeBriefDTO 简要管道目录树信息。QueryPipelineDirectoryTreeCommand 查询管道目录树。ScheduleCommand 管道调度配置。StepCommand ...
功能更新动态（2023年）
通过单条管道创建集成任务 配置OSS输入组件 配置Salesforce输入组件 配置FTP输入组件 配置Microsoft SQL Server输入组件 通过整库迁移配置集成任务 配置OSS输出组件 实时研发 实时任务研发体验流程优化：Flink SQL任务支持通过数据源编码的...
文档更新动态（2023年）
更新说明 通过单条管道创建集成任务 配置OSS输入组件 配置Salesforce输入组件 配置FTP输入组件 配置Microsoft SQL Server输入组件 通过整库迁移配置集成任务 配置OSS输出组件 调度配置 支持设置不依赖corn表达式的固定间隔时间的调度。...
- 产品推荐
- 这些文档可能帮助您