创建及管理标签离线服务任务
筛选：支持根据 应用、实体-实体ID、目标源类型、任务状态、执行状态、调度类型进 行筛选。应用：通过标签离线服务所属于的应用进行筛选。实体-实体ID：通过标签离线服务中导出的标签的 实体-实体ID 进行筛选。目标源类型：通过标签离线...
删除流量调度策略
DeleteCenInterRegionTrafficQosPolicy 接口属于异步接口，即系统会先返回一个 RequestId，但该流量调度策略并未删除完成，系统后台的删除任务仍在进行。您可以调用 ListCenInterRegionTrafficQosPolicies 接口查询流量调度策略的状态。当...
服务定时自动部署
如果未执行步骤四，则需要根据实际情况修改前14行代码中的参数值）。编写服务部署描述文件。cat<< EOF >echo.json {"name":"yourModelName","generate_token":"true","model_path":"yourModelAdress","processor":"yourProcessorType",...
使用Prometheus配置报警规则的最佳实践
超1000个Pod调度失败异常 Critical sum(sum(max_over_time(kube_pod_status_phase{ phase=~"Pending"}[5m]))by(pod))>1000 最近5分钟内，累计有1000个Pod处于调度失败Pending状态时，触发报警。可能是大规模集群调度场景下任务压力过大引起...
通过向导模式配置离线同步任务
数据集成提供向导式的开发引导，您无需编写任何代码，通过在界面勾选数据来源与去向，并结合DataWorks调度参数，实现将源端单表或分库分表的全量或增量数据周期性同步至目标数据表。本文为您介绍向导模式配置离线同步任务的常规配置，各...
可选：运维SQL分析任务
SQL分析任务上线后，您可以查看SQL分析任务的基本信息和配置情况，以及SQL分析任务的调度情况。本文介绍运维SQL分析任务的操作步骤。前提条件 已配置并发布SQL分析任务，具体操作，请参见 步骤三：设置任务调度策略并发布。背景信息 SQL...
更改共享GPU调度显存最小分配单位
共享GPU调度默认按1 GiB为单位申请显存，申请更细粒度的显存需要更改显存最小分配单位。本文介绍如何将共享GPU调度显存最小分配单位更改为128 MiB，以申请更细粒度的显存。前提条件 您的集群需要安装共享GPU调度专业版的组件，然后您才可以...
查看并管理脚本实例
选中的实例存在 未运行、等待调度时间、限流中 状态和其他状态的实例时，系统仅执行状态为 未运行、等待调度时间、限流中 状态的实例。恢复 批量恢复 暂停中 的周期实例。修改调度资源组 可修改实例运行时使用的调度资源组。说明 仅生产...
新增和使用独享调度资源组
您可根据业务场景需求选择购买合适规格的独享调度资源组，用于任务的调度运行。购买独享资源组后，在实际使用前您还需进行网络绑定、白名单等配置操作。本文为您介绍从购买至使用独享调度资源组的全流程与步骤详情。前提条件 购买和使用独...
查看并管理脚本实例
选中的实例存在 未运行、等待调度时间、限流中 状态和其他状态的实例时，系统仅执行状态为 未运行、等待调度时间、限流中 状态的实例。恢复 批量恢复 暂停中 的周期实例。重跑下游 在 重跑下游 对话框中，配置参数。说明 下游运行状态为 ...
设置自定义响应规则配置拦截响应页面
接入 Web应用防火墙（Web Application Firewall，简称WAF）后，您可以设置自定义响应规则，自定义客户端请求被WAF拦截时返回给客户端的拦截页面的样式和内容，包含响应码、响应头、响应体。自定义响应模块默认未开启。本文介绍如何创建...
DMS调度Spark
使用常规的Spark开发编辑器或命令行等工具进行Spark作业开发时，仅支持单次调度Spark作业，且作业间无依赖关系和执行顺序。为解决以上痛点，您可以通过 数据管理DMS 的任务编排功能，周期性、有顺序地调度Spark作业。本文介绍如何使用DMS...
请求处理相关函数
说明 输出响应体与 say()相同，但不会在行尾追加换行符。参数 arg：任意类型。返回值 无。示例 say('hello')print('byebye')print('byebye')输出：hello byebyebyebye exit 项目 描述 语法 exit(code[,body])。说明 以状态码 code 结束当前...
管道传输（Pipeline）
1 Pipeline接收响应Response:2 Pipeline接收响应Response:3 Pipeline接收响应Response:4 Pipeline接收响应Response:5-方法2-Pipeline发送请求 Pipeline发送请求 Pipeline发送请求 Pipeline发送请求 Pipeline发送请求还未开始接收响应>>>...
创建跨地域流量调度策略
CreateCenInterRegionTrafficQosPolicy 接口属于异步接口，即系统会先返回一个流量调度策略 ID，但该流量调度策略并未创建完成，系统后台的创建任务仍在进行。您可以调用 ListCenInterRegionTrafficQosPolicies 接口查询流量调度策略的状态...
附录：DAG图功能介绍
重跑下游 可以重跑某节点及其下游节点，需要您自定义勾选，勾选的节点将被重跑，节点执行成功后可以触发下游未运行状态节点的调度。常用于处理数据修复。说明 仅支持勾选 未运行、完成 和 失败 状态的节点，如果勾选了其它状态的节点，页面...
创建EMR Kyuubi节点
未配置 全局配置是否优先：使用EMR Kyuubi节点配置的调度队列。关于EMR YARN的说明，请参见 队列基础配置；注册EMR集群时的队列配置，请参见 设置全局YARN资源队列。步骤三：配置任务调度 如您需要周期性执行创建的节点任务，可单击节点...
DataWorks On CDP/CDH使用说明
数据开发：您无需接触复杂的命令行，便可在DataWorks中实现各类任务的开发及周期性调度。创建CDH Hive节点 创建CDH Spark节点 创建CDH MR节点 创建CDH Presto节点 创建CDH Impala节点 您可结合DataWorks的通用类型节点和引擎计算节点进行...
什么是边缘函数
通过这种技术，用户的请求可以直接在离用户最近的边缘节点上得到响应处理，从而显著减少延迟、提高响应速度，并实现更低时延的计算体验。边缘函数的优势 全球部署，就近调度，超低延迟：边缘函数与常见的函数计算、弹性计算等云计算服务...
工作原理
考虑数据上传日志服务存在延迟情况，您可以结合数据采集延迟以及业务能够容忍的最大结果可见延迟，设置 执行延迟 和 SQL时间窗口（结束时间往前一点），避免实例执行时SQL时间窗口内的数据未全部到达。建议SQL时间窗口按分钟对齐（例如整...
DataWorks On MaxCompute使用说明
数据开发：您无需接触复杂的命令行，便可在DataWorks中实现各类任务的开发及周期性调度。节点代码定义：MaxCompute语法 创建并使用MaxCompute表 开发ODPS SQL任务 引用SQL组件 开发ODPS Spark任务 开发PyODPS 2任务 开发PyODPS 3任务 开发...
DataWorks On Hologres使用说明
数据开发：您无需接触复杂的命令行，便可在DataWorks中实现各类任务的开发及周期性调度。节点代码定义：Hologres开发指南 Hologres SQL节点 一键MaxCompute表结构同步节点 一键MaxCompute数据同步节点 您可结合DataWorks的通用类型节点和...
使用流量调度功能控制各类流量的跨地域带宽
每个流量调度策略默认包含一个默认队列，在您使用流量调度功能的过程中，对于未符合流分类规则的流量以及符合流分类规则但未被划分队列的流量，均会被系统自动划分至流量调度策略的默认队列，默认队列占用跨地域连接的剩余带宽。...
依赖关系
假设下游节点C中涉及查询表A及表B的相关数据，当您仅配置 依赖的上游节点 为小时调度任务A，而未配置 依赖的上游节点 为日调度任务B，则可能在上游节点的日调度任务B未执行完成时，下游节点C便开始执行节点任务，导致获取日调度任务的输出...
创建PYTHON计算任务
在开发Python计算任务时，建议您在Python文件前两行对编码进行主动注释，防止执行代码时使用系统编码，导致执行结果报错。若您需要在Python中引入上传的资源文件。请参见 上传资源及引用。单击页面右上角的 运行，可运行代码。单击页面侧...
添加属性设置任务
数据格式（下行）请求和响应Topic 透传/自定义 请求Topic：/sys/${productKey}/${deviceName}/thing/model/down_raw 响应Topic：/sys/${productKey}/${deviceName}/thing/model/down_raw_reply Alink JSON 请求Topic：/sys/${productKey}/$...
什么是边缘函数
通过这种技术，用户的请求可以直接在离用户最近的边缘节点上得到响应处理，从而显著减少延迟、提高响应速度，并实现更低时延的计算体验。开通说明 边缘函数目前是Beta功能，仅面向部分客户开放。如果您的 CDN 日常带宽峰值大于500 Mbps，...
创建PYTHON计算任务
在开发Python计算任务时，建议您在Python文件前两行对编码进行主动注释，防止执行代码时使用系统编码，导致执行结果报错。若您需要在Python中引入上传的资源文件。请参见 上传资源及引用。单击页面右上角的 运行，可运行代码。单击页面侧...
什么是边缘函数
通过这种技术，用户的请求可以直接在离用户最近的边缘节点上得到响应处理，从而显著减少延迟、提高响应速度，并实现更低时延的计算体验。开通说明 边缘函数目前是Beta功能，仅面向部分客户开放。如果您的 DCDN 日常带宽峰值大于500 Mbps，...
调度DLA Spark任务
DLA Serverless Spark除了上述调度集成之外，还提供了SDK以及Spark-Submit工具用于提交Spark作业、查询作业状态、获取作业日志等功能，详情请参见：SDK安装与使用 Spark-Submit命令行工具 您可以利用上述工具，使用第三方任务编排调度系统...
配置AnalyticDB MySQL Spark节点
背景信息 使用常规的Spark开发编辑器或命令行等工具进行AnalyticDB MySQL Spark作业开发时，仅可单次调度Spark作业，且作业间无依赖关系和执行顺序。为解决以上痛点，您可以使用 DMS 的AnalyticDB MySQL Spark节点进行Spark作业开发、调度...
周期任务补数据
周期任务开发完成并提交发布后，任务会按照调度配置定时运行，如果您希望在指定时间段运行周期任务或回刷历史一段时间区间的数据，可以使用补数据功能。节点使用的调度参数会根据补数据选择的业务时间自动替换成对应的值。本文为您介绍如何...
周期任务补数据
周期任务开发完成并提交发布后，任务会按照调度配置定时运行，如果您希望在指定时间段运行周期任务或回刷历史一段时间区间的数据，可以使用补数据功能。节点使用的调度参数会根据补数据选择的业务时间自动替换成对应的值。本文为您介绍如何...
使用阿里云CDN加速后网站访问速度较慢
缓存配置不合理 缓存配置不合理，缓存时间过短，CDN节点频繁回源的场景如下所示：当CDN未配置缓存规则时，如果静态文件未返回ETag和Last-modified响应头，则该静态文件不能缓存在CDN节点上。优化方案需要在源站配置这两个响应头，或者考虑...
查看监控信息
写入 写入响应时间 毫秒（ms）监控如下信息：平均写入响应时间 最大写入响应时间 删除响应时间 毫秒（ms）监控如下信息：平均删除响应时间 最大删除响应时间 更新响应时间 毫秒（ms）监控如下信息：平均更新响应时间 最大更新响应时间 写入...
用户洞察常见问题
重新导入数据表：用户标签表、用户行为表、统计表、订单明细表、订单汇总表的导入均支持手动调度、日/小时周期调度、通过接口触发调度，导入调度配置请参见 调度任务。更新模型：RFM模型、AIPL模型支持手动更新、跟随底层数据调度更新，...
创建数据表质量规则
业务日期/执行日期：若调度类型选择 定时调度（定时调度不支持执行日期）、数据更新触发调度、固定任务触发调度，支持配置日期，可选择 普通日历 或 自定义日历，如何自定义日历，请参见 新建公共日历。若选择 普通日历，则条件可选 月份、...
创建数据表质量规则
业务日期/执行日期：若调度类型选择 定时调度（定时调度不支持执行日期）、数据更新触发调度、固定任务触发调度，支持配置日期，可选择 普通日历 或 自定义日历，如何自定义日历，请参见 新建公共日历。若选择 普通日历，则条件可选 月份、...
工作流使用案例
配置工作流调度 您可以打开工作流调度开关并配置工作流调度参数，调度系统会按照参数定时运行相关工作流，并将作业下发到指定集群上执行。以下介绍配置工作流的基本属性、调度属性和告警设置。完成工作流设计后，单机画布右上角 配置 按钮...
历史功能发布记录（2023年）
全部 自助诊断GPU节点问题 ACK调度器支持IP感知调度和拓扑调度等功能 IP感知调度 当Pod调度到某节点上时，由于可用IP不足无法启动，该节点将被标记为缺少IP状态并被拉黑五分钟。IP感知调度可防止大量Pod由于IP不足而导致的启动失败问题。...
- 产品推荐
- 这些文档可能帮助您