EMR数据开发（旧版）停止全面支持公告
在EMR Workflow中导入JSON文件，实现工作流的快速迁移。说明 迁移阶段的导出和导入均不影响原有EMR数据开发（旧版）中的任务调度。阿里云EMR团队+客户 1小时 三、验证阶段 在EMR Workflow上导入的工作流默认处于下线状态，需要您逐一进行...
基于ASM实现多集群的一站式流量治理
通过ACK One的服务网格功能，您可以实现多集群的一站式应用分发和流量治理。本文介绍如何通过ACK One Fleet实例完成关联集群之间的应用分发和流量治理。前提条件 ACK One Fleet实例已开启 服务网格。具体操作，请参见 开启服务网格。已添加...
使用URL实现应用实例分组的流量分发
本文介绍使用URL转发策略，实现单应用内不同实例分组的流量分发。前提条件 创建SLB实例。具体操作，请参见 创建实例。为应用创建不同实例分组。具体操作，请参见 创建分组。为应用绑定负载均衡实例。具体操作，请参见 应用独享负载均衡实例...
低成本跨境文件传输
本文介绍如何通过 Serverless 工作流、函数计算、对象存储、专用网络、云服务器及弹性公网IP的组合方案，实现低成本跨境文件的传输。应用场景 跨境对象存储数据传输。对数据的跨境传输成本有严格的控制。对文件同步延时不敏感，能接受一定...
如何对SLS多logstore告警实现统一的分派流转
运维事件中心会将SLS的原始告警通过集成密钥接入，基于logstore配置不同的流转规则来实现事件风险任务的定向分派流转；通过钉群协同实现研发运维的快速协同，缩短事件的MTTR，提升事件处理效率，降低业务风险。视频演示 SLS日志服务配置...
通过模板创建工作流
在之前的入门示例中，我们从头构建了一个完整的工作流，实现了每天 9 点自动检查域名是否可以注册，如果可以注册，通过钉钉机器人通知我们。在本示例中，我们将介绍如何从模板创建一个这样的工作流。首先进入 逻辑编排控制台，进入左侧菜单...
音视频弹性处理
自定义 Serverless 工作流：Serverless 工作流 不仅可以实现高度自定义，例如并行转码、打水印、元信息插入数据库等复杂组合操作，还可以实现 Serverless 工作流 的安全升级更新。降低成本：视频转码是CPU密集型，在 Serverless 工作流 及...
集成与开发概览
您可以通过创建一个或多个任务节点组成的任务流，实现复杂的任务调度，提高数据开发效率。数仓开发。更多信息，请参见 创建项目空间。数仓开发主要用于沉浸式数据仓库开发，您可以通过创建项目空间，选择数仓引擎和环境，进而创建多个数仓...
工作流概述
Designer通过工作流的方式来实现建模与模型调试。您需要先规划并创建一个工作流，再根据建模需求在工作流中排布不同组件的处理调度逻辑。规划工作流分类文件夹 在创建工作流之前，建议您结合自身业务情况，先规划好工作流的分类文件夹，...
新建自定义工作流
Designer通过工作流的方式来实现建模与模型调试。您需要先创建一个工作流，再根据建模需求在工作流中排布不同组件的处理调度逻辑。本文为您介绍如何新建工作流。前提条件 已开通PAI并创建了工作空间。开通操作详情请参见 开通并创建默认...
概述
您可以通过创建一个或多个任务节点组成的任务流，实现复杂的任务调度，提高数据开发效率。背景信息 随着互联网和物联网的飞速发展、数据规模急剧增长、数据来源多样化，同时数据分析需求及业务流程复杂性不断增加，这使得传统手动处理数据...
创建资源
工作流 在具体应用下，工作流用来实现任务的依赖编排。工作流是SchedulerX对任务进行依赖编排的封装，支持上下游数据传递。（可选）创建命名空间 登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏，单击 命名空间。单击 创建...
创建资源
工作流 在具体应用下，工作流用来实现任务的依赖编排。工作流是SchedulerX对任务进行依赖编排的封装，支持上下游数据传递。（可选）创建命名空间 登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏，单击 命名空间。单击 创建...
创建资源
工作流 在具体应用下，工作流用来实现任务的依赖编排。工作流是SchedulerX对任务进行依赖编排的封装，支持上下游数据传递。（可选）创建微服务空间 登录 EDAS控制台。在左侧导航栏，选择 资源管理>微服务空间。在 微服务空间 页面右上角，...
任务编排之电商打标
您可以通过创建一个或多个任务节点组成的任务流，实现复杂的任务调度，提高数据开发效率。背景信息 电商做大促活动时，常会推出优惠活动，例如用户累计消费达到一定额度，发放对应额度的优惠券。本文使用任务编排中的 单实例SQL赋值节点、...
如何打造千万级Feed流系统
示例系统介绍 本方案主要介绍和实现的是单向关系的Timeline系统，期望效果类似于微博，主要实现的功能如下：发布Feed：用户可以发布新消息。获取Feed流：用户可以查看自己所关注的人的所有消息或查看某个用户发布的消息。关注：用户间可以...
创建并使用PAI Designer
DataWorks为您提供PAI Designer节点，方便您通过该算法节点载入Designer工作流，通过调度配置实现Designer工作流的周期性任务调度。前提条件 授权DataWorks可访问人工智能平台PAI。您可进入 授权界面 进行一键授权，权限策略详情请参见 ...
监控与日志
您可以通过专有网络VPC的流日志功能实现以下场景的流量监测：查看VPC内ECS实例的流量 排查公网NAT网关中高流量ECS实例 查看VPC之间的互访流量 查看混合云专线流量 流量镜像功能 专有网络VPC流量镜像功能可以镜像经过弹性网卡ENI且符合筛选...
如何实现OAuth登录
权限管理模块可以实现对逻辑流的授权访问，可以控制哪些用户、角色或组织可以访问逻辑流。为了确保安全性，建议在调用三方登录Action时，仅授权给必要的用户或角色。在用户退出登录后，建议自动将访问令牌删除。其他安全注意事项 在使用...
ASMGlobalRateLimiter CRD说明
ASM通过ASMGlobalRateLimiter实现全局限流的声明式配置。本文介绍ASMGlobalRateLimiter的字段说明。spec 字段 类型 是否必选 说明 workloadSelector map,string>是 通过一个或多个标签，指明限流配置生效的一组特定的工作负载。标签搜索的...
通过MNS消息触发工作流
当有新的事件触发（如OSS事件触发、EventBridge事件触发）时，MNS会收到相应的消息，Argo会根据事件触发的条件自动触发工作流的运行，实现自动化的工作流处理。前提条件 已开通以下服务与功能 开启事件驱动功能 开通消息服务MNS并授权，该...
体验中心
为保障商品列表信息无误且用户能够访问正常，研发人员对门户网站应用（Portal）下的商品列表服务（Product）进行新版本的分组发布，继而通过服务路由功能对该服务进行精细的流量控制，将流量逐渐从旧版本引导至新版本，通过灰度切流实现新...
ASMLocalRateLimiter CRD说明
ASM通过ASMLocalRateLimiter CRD实现本地限流的声明式配置。本文介绍ASMLocalRateLimiter的配置示例和字段说明。配置示例 以下配置表示对网关进行限流，从流量入口处进行限流，防止下游服务被压垮。设置 seconds 为 1，quota 为 100，表示1...
方案实现
在前文的方案与架构基础上，本文介绍如何使用表格存储的Timeline模型实现Feed流系统的存储与同步功能。模型介绍 本文使用表格存储作为存储和同步系统，并主要使用Timeline模型、基于推模式进行同步。表格存储消息（Timeline）模型是针对...
基本概念
服务限流 EDAS可以对每一个应用提供的众多服务配置限流规则，以实现对服务的流控，确保服务能够稳定运行。限流规则可以从QPS和线程两个维度进行配置，帮助您在应对流量高峰时，确保系统能以最大的支撑能力平稳运行。服务拓扑 通过拓扑图的...
设置限流降级
Serverless 应用引擎 SAE（Serverless App Engine）支持使用 微服务引擎 MSE（Microservices Engine）实现应用的限流降级，全面保障您的应用的可用性。本文介绍如何在 SAE 控制台设置限流降级并查看对应的监控数据。前提条件 已成功部署...
什么是QoS策略
基于应用进行流分类 QoS策略可通过应用识别DPI（Deep Packet Inspection）功能实现基于应用的流分类，支持通过一组应用或者一个应用识别划分流量。QoS策略支持的应用组和应用类型，请以控制台为准。说明 要使用基于应用的流分类功能，需要...
集成表格存储Tablestore
云工作流 可以在流程中集成 表格存储（Tablestore），通过集成 Tablestore，您可以将流程运行中的各种数据持久化到 Tablestore 的某个表中，也可以将某个表的数据作为流程的数据源。本文分别从数据读取和数据写入两种场景，介绍 云工作流 ...
服务限流
DRM 将限流的动态配置下发到 MOSN。限流规则在客户端 或服务端 生效，以下流程以客户端限流为例。客户端应用进行访问时，MOSN 会监控应用流量，如果触发限流规则，应用流量即被限制。注意事项 您可以添加多条限流规则，若存在服务名和匹配...
集群任务限流
优势是在页面没有配置限流的情况下，也可以通过限流规则的初始值进行限速，但需要您手动指定限流器。框架提供了默认的限流器 DefaultLimiter，指定限流器示例如下：public class ClusterJobExecuteOneHandler implements ...
数仓开发任务流
管理任务流数仓表 数仓开发中任务流的操作与任务编排中任务流的操作是相似的。更多信息，请参见 任务编排概述。管理任务流数仓表 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 集成与开发（DTS）>数据开发>数仓开发。说明 若您使用的是极简...
工作流集群快速入门
分布式工作流Argo集群（简称 工作流集群）采用无服务器模式，使用阿里云弹性容器实例ECI运行工作流，通过优化Kubernetes集群参数，实现大规模工作流的高效弹性调度，同时配合抢占式ECI实例，优化成本。文介绍 工作流集群 的快速使用流程和...
分布式工作流Argo集群概述
分布式工作流Argo集群（简称 工作流集群）采用无服务器模式，使用阿里云弹性容器实例ECI运行工作流，通过优化Kubernetes集群参数，实现大规模工作流的高效弹性调度，同时配合抢占式ECI实例，优化成本。本文介绍 工作流集群 的控制台操作...
Web RTS推流SDK简介
Web RTS推流SDK实现了更完善的推流能力，并支持本地混流功能，推荐您使用Web RTS推流SDK进行推流。浏览器要求 Web RTS推流SDK不依赖网页代码，而是靠浏览器支持，浏览器具体要求如下所示。操作系统 浏览器 支持的最低版本 Windows Chrome ...
直播录制
视频点播支持使用云剪辑功能对直播流的内容进行剪辑加工，实现视频直播与短视频的内容联动。录制文件的封装格式 直播录制支持将直播流录制成TS/M3U8、MP4、FLV封装格式的视频文件。但是不管是哪种封装格式，直播录制都会先将直播流切片成...
基于回归算法实现农业贷款发放预测
数据集 本工作流的数据集包括如下字段。字段名 类型 描述 id STRING 数据唯一标识符。name STRING 用户名。region STRING 用户所属地区，从北到南排列。farmsize DOUBLE 土地面积。rainfall DOUBLE 降雨量。landquality DOUBLE 土地质量，...
创建工作流集群
工作流集群 采用无服务器模式，使用阿里云弹性容器实例ECI运行工作流，通过优化Kubernetes集群参数，实现大规模工作流的高效弹性调度，同时配合抢占式ECI实例，优化成本。本文介绍如何创建 工作流集群。前提条件 已开通分布式云容器平台ACK...
功能特性
分布式工作流Argo集群 管理工作流集群 工作流集群采用无服务器模式，使用阿里云弹性容器实例ECI运行工作流，通过优化Kubernetes集群参数，实现大规模工作流的高效弹性调度，同时配合抢占式ECI实例，优化成本。管理工作流 工作流集群基于...
限流降级
部署的已有应用如果已使用过限流降级，将继续使用原有的实现方式。限流降级简介 限流 限流可以理解为是一个控制流量阈值或调节比例的功能。在前端网站面对大流量访问的时候，可以通过调节流量阈值来控制通过系统的最大流量值，防止大流量对...
快速入门
多集群报警差异化配置 分布式工作流Agro集群 功能 描述 参考文档 创建工作流集群并获取集群Kubeconfig 工作流集群 采用无服务器模式，使用阿里云弹性容器实例ECI运行工作流，通过优化Kubernetes集群参数，实现大规模工作流的高效弹性调度，...
- 产品推荐
- 这些文档可能帮助您