Spring任务
通过对接SchedulerX任务调度可快速实现企业化运用的支持。前提条件 客户端1.7.10及以上版本 采用Spring Boot模式接入SchedulerX平台具体操作，请参见 Spring Boot应用接入SchedulerX。接入指南 接入配置 以Spring Boot接入模式为例，应用...
历史功能发布记录（2023年）
IP感知调度可防止大量Pod由于IP不足而导致的启动失败问题。目前仅对ACK集群Pro版使用Terway网络插件的情况生效。拓扑调度 通过特殊协议声明一批需要调度到相同拓扑域下的Pod，这批Pod将自动在不同的拓扑域下进行重试，直到找到可行的拓扑域...
开发ODPS MR任务
一个MR调用多个JAR资源时，classpath写法为-classpath./xxxx1.jar,./xxxx2.jar，即两个路径之间用英文逗号（,）分隔。返回结果：OK 在ODPS SQL节点中查询输出表 wc_out 的数据。select*from wc_out;返回结果：+-+-+|key|cnt|+-+-+|package|...
开发ODPS MR任务
一个MR调用多个JAR资源时，classpath写法为-classpath./xxxx1.jar,./xxxx2.jar，即两个路径之间用英文逗号（,）分隔。返回结果：OK 在ODPS SQL节点中查询输出表 wc_out 的数据。select*from wc_out;返回结果：+-+-+|key|cnt|+-+-+|package|...
Java应用接入SchedulerX
前提条件（可选）已创建命名空间。具体操作，请参见 创建命名空间。已创建资源。具体操作，请参见 创建资源。Java应用客户端接入SchedulerX 在应用程序的 pom.xml 文件中添加SchedulerxWorker依赖。请参见 发布记录，schedulerx2.version ...
Java应用接入SchedulerX
前提条件（可选）已创建命名空间。具体操作，请参见 创建命名空间。已创建资源。具体操作，请参见 创建资源。Java应用客户端接入SchedulerX 在应用程序的 pom.xml 文件中添加SchedulerxWorker依赖。请参见 发布记录，schedulerx2.version ...
设计阶段
多并行、少串行（在分布式系统下可发挥其优势）。运行周期 如果数据研发的场景是在常见T+1离线计算场景，则应将不同调度任务按照实际业务需求，赋予小时、日、周、月和季度等不同的调度粒度。说明 程序必须支持重跑。如果SQL语句优化后，单...
存储多可用区部署的推荐配置
通过存储多可用区部署优化，可以帮您最大限度地减少应用发布中断，确保关键业务系统和应用在各种故障情况下能持续运行。本文介绍存储在多可用区部署时的推荐配置。背景信息 Kubernetes强大的容器编排能力，使得用户在Kubernetes上构建大...
创建数据源质量规则
调度配置：可在弹框中筛选调度类型或用调度名称快捷搜索调度。也支持编辑调度。关联知识库文档：规则关联知识库后，可在质量规则和治理工作台中查看关联知识。支持选择未被关联的知识库。如需创建，请参见 新建及管理知识库。删除：删除此...
创建数据源质量规则
调度配置：可在弹框中筛选调度类型或用调度名称快捷搜索调度。也支持编辑调度。关联知识库文档：规则关联知识库后，可在质量规则和治理工作台中查看关联知识。支持选择未被关联的知识库。如需创建，请参见 新建及管理知识库。删除：删除此...
创建实时元表规则
调度配置：可在弹框中筛选调度类型或用调度名称快捷搜索调度。也支持编辑调度。关联知识库文档：规则关联知识后，可在质量规则和治理工作台中查看关联知识。支持选择未被关联的知识库。如需创建，请参见 新建及管理知识库。删除：删除此...
创建实时元表规则
调度配置：可在弹框中筛选调度类型或用调度名称快捷搜索调度。也支持编辑调度。关联知识库文档：规则关联知识后，可在质量规则和治理工作台中查看关联知识。支持选择未被关联的知识库。如需创建，请参见 新建及管理知识库。删除：删除此...
服务初始化
概述 本篇将描述如何初始化开通和使用PAIRec产品及相关资源和服务，包括购买并开通PAI、DataWorks、MaxCompute、OSS，并在PAIRec中对上述资源进行绑定，以及对算法、工程同学进行权限授权操作。PAI-REC初始化流程主要分为以下几个步骤：...
ACK One概述
智能调度 利用容器服务ACK调度器，实现Gang Scheduling、CPU拓扑感知、ECI弹性调度等高阶调度能力。利用分布式缓存ACK Fluid应对存算分离场景，提升访问效率和减少带宽占用。注册集群相关文档，请参见 注册集群概述。多集群舰队 当您同时...
实现跨屏联动
无法正常连接WebSocket的服务端时，可根据以下步骤排查问题 WS服务不能直接在HTTPS协议下访问，需要用 WSS 服务，再使用自己的SSL证书去代理WS服务地址后，才能在HTTPS下访问。使用功能键F12，打开浏览器调试页面，查看浏览器 Network 页签...
执行补数据并查看补数据实例（旧版）
您可在DAG图上使用可视化方式添加节点，也可在任务列表中添加节点。在当前周期任务的DAG图中，结合DAG的聚合功能，按照工作空间、所属责任人或优先级等维度将节点划分为组，直接勾选该节点组，快速添加目标类别的节点为补数据节点。实例的...
数据开发
调度依赖配置：配置调度依赖的目的是为了保障上游表产出完成才会触发下游读取数据，而当前节点上游的数据是静态的，不需要等待产出，所以本节点的上游依赖可配置为工作空间根节点，即周期依赖的上游节点配置为"使用工作空间根节点"，其他...
周期任务补数据
周期任务开发完成并提交发布后，任务会按照调度配置定时运行，如果您希望在指定时间段运行周期任务或回刷历史一段时间区间的数据，可以使用补数据功能。节点使用的调度参数会根据补数据选择的业务时间自动替换成对应的值。本文为您介绍如何...
周期任务补数据
周期任务开发完成并提交发布后，任务会按照调度配置定时运行，如果您希望在指定时间段运行周期任务或回刷历史一段时间区间的数据，可以使用补数据功能。节点使用的调度参数会根据补数据选择的业务时间自动替换成对应的值。本文为您介绍如何...
创建资源
本文介绍如何创建微服务空间、调度任务分组、调度任务和调度工作流。背景信息 资源 描述 使用场景 命名空间 在具体地域（Region）中，命名空间用于实现资源和服务的隔离。当您对资源有较高的安全要求时，需要创建命名空间。应用 在具体的...
Spring应用接入SchedulerX
您可以为您的Spring应用快速接入SchedulerX，实现分布式任务调度能力。前提条件（可选）已创建命名空间。具体操作，请参见 创建命名空间。已创建资源。具体操作，请参见 创建资源。Spring应用客户端接入SchedulerX 在应用程序的 pom.xml ...
Spring应用接入SchedulerX
您可以为您的Spring应用快速接入SchedulerX，实现分布式任务调度能力。前提条件（可选）已创建命名空间。具体操作，请参见 创建命名空间。已创建资源。具体操作，请参见 创建资源。Spring应用客户端接入SchedulerX 在应用程序的 pom.xml ...
数据面安全性
非持久化环境 运行时环境提供的文件系统及内存，在函数实例释放时随之释放，用户不可使用函数实例的本地文件系统及内存持久化数据，如果用户需要持久化，可以配置阿里云 文件存储NAS 或持久化保存至 对象存储OSS。不可变代码及层（Layer）...
数据面安全性
非持久化环境 运行时环境提供的文件系统及内存，在函数实例释放时随之释放，用户不可使用函数实例的本地文件系统及内存持久化数据，如果用户需要持久化，可以配置阿里云 文件存储NAS 或持久化保存至 对象存储OSS。不可变代码及层（Layer）...
应用管理
0 日历 您可在下拉列表中选择在 金融日 或者 工作日 调度应用。0 步骤二：通知配置 在 通知配置 向导页填写相关信息，选择 通知渠道 并设置 联系人。通知渠道 目前支持 短信、邮件、Webhook 和 电话。关于 Webhook 配置的详细信息，请参见 ...
服务定时自动部署
说明 您可以先使用页面的OSS路径选择器选到一个有效模型文件路径，再将路径中和时间变量相关的部分用全局变量进行替换，可以减少手动进行endpoint等配置输入的复杂度。步骤二：部署上述工作流至DataWorks 参考 使用DataWorks离线调度...
整库离线同步至OSS
您可以在此步骤配置任务名称及任务执行所使用的调度资源组与数据集成任务执行资源组，同时，数据集成提供数据库最大连接数、并发数等配置的默认值，如果您需要对任务做精细化配置，您可通过 高级配置 进行修改。说明 DataWorks的离线同步...
应用场景
运力资源调度：机位智能分配、人员智能排班、车辆智能调度、船舶智能避碰、泊位智能分配、集卡车辆智能调度、龙门吊桥吊智能调度。案例说明 场景：某机场飞机滑行轨迹难以实现全链路追踪和还原；保障节点靠人工记录漏报误报情况普遍；安全...
批量上传质量规则
调度配置：可在弹框中筛选调度类型或用调度名称快捷搜索调度。也支持编辑调度。详情请参见 新建调度。说明 批量配置调度时，需要确保所选资源表的分区表达式一致，如果配置的分区和表实际分区不一致，可能会报错。批量配置调度时，非分区表...
批量上传质量规则
调度配置：可在弹框中筛选调度类型或用调度名称快捷搜索调度。也支持编辑调度。详情请参见 新建调度。说明 批量配置调度时，需要确保所选资源表的分区表达式一致，如果配置的分区和表实际分区不一致，可能会报错。批量配置调度时，非分区表...
服务端发布记录
本文介绍分布式任务调度SchedulerX产品发布的功能变更，包括新增功能、功能优化、重要问题修复等，帮助您了解SchedulerX的发布动态。发布记录 2024-03-27 功能名称 变更类型 功能描述 相关文档 日志服务 优化 支持一次性任务执行完成、任务...
阿里云CDN的五大竞争力
基于内容调度，提高访问命中率：在大文件下载和视频点播这两个应用场景上经常使用302调度这种基于内容的调度技术，302调度是一种中心调度方案，用户在请求某一个资源的时候，在完成域名DNS解析之后，用户请求将会先访问到中心调度系统上，...
创建资源
本文介绍如何创建微服务空间、调度任务分组、调度任务和调度工作流。背景信息 资源 描述 使用场景 命名空间 在具体地域（Region）中，命名空间用于实现资源和服务的隔离。当您对资源有较高的安全要求时，需要创建命名空间。应用 在具体的...
应用管理
在 基本配置 向导页，输入 应用名、应用ID 并且选择应用类型，设置高级配置参数（可选），然后单击 下一步。参数 解释 默认值 应用名 自定义设置应用名称。无 应用ID 应用ID 为应用接入的GroupID，保证同一个命名空间下唯一，否则将创建...
Hologres推荐的数仓分层
本文为您介绍在Hologres中数仓分层的最佳实践，方便快速构建业务，建设集高性能、敏捷化于一体的实时数仓。背景信息 Hologres与Flink、MaxCompute、DataWorks深度兼容，能够提供实时离线一体化联合解决方案。在该方案下有着非常丰富的应用...
创建安全沙箱应用
您可以在安全沙箱Kubernetes集群中使用镜像创建一个可公网访问的nginx应用。索引 前提条件 步骤一：登录容器服务控制台 步骤二：配置应用基本信息 步骤三：配置容器（可选）步骤四：高级配置 查看结果 执行结果 前提条件 创建一个安全沙箱...
开心消消乐使用ALB从容应对大流量和高并发场景
更低时延，更优体验：部署一套服务端，通过URL转发规则实现不同优先级业务的差异化调度，满足个性化路由转发需要。面向未来，可扩展：ALB 可以作为容器的Ingress入口，容器化技术演进可平滑升级。更多信息 什么是应用型负载均衡ALB 云解析...
配置调度日历
DataWorks在原有调度配置基础上，新增自定义调度日历功能，您可通过该功能实现更灵活的任务调度日期与调度方式定义。本文为您介绍自定义调度日历的典型应用场景及如何在DataWorks上新增并使用自定义调度日历。背景信息 自定义调度日历适用...
调度集群管理概述
Dataphin支持连接不同调度集群，并将所有集群可用于调度的资源进行统一管理，使每个租户可以使用不同集群的资源用于创建自定义资源组，从而解决跨Region数据传输以及资源隔离等问题。使用限制 当前仅支持基于最新架构部署的客户使用调度...
接入 iOS
RPC接入 RPC 接入移动调度中心需要配置开关，通过重写 DTRpcInterface 的 category 来配置 移动调度中心开关：是否启用移动调度中心，开启该配置后仍然需要手动调用移动调度中心初始化方法。默认关闭。IPv6 开关：是否使用移动调度中心返回...
- 产品推荐
- 这些文档可能帮助您