手工导入资源

您可以在如下路径中获取到这些模板:控制台->发现评估->离线采集->手工导入->导入 资源录入 模板上传 当您完成了Excel 的字段填写后,您可以在同一个地方进行模板上传,在您上传后,CMH将会启动一个后台任务对您的资源进行识别。...

自定义 API

{@link Thread#NORM_PRIORITY} ExecutorType.URGENT_DISPLAY 前台 UI 所依赖优先级最高的后台任务,不容忍排队。{@link Thread#MAX_PRIORITY} ExecutorType.URGENT 前台 UI 所依赖优先级最高的后台任务,不容忍排队。{@link Thread#NORM_...

调整Tair定期任务的执行频率

定期任务与hz参数的关系 为了定期检测资源和服务状态并根据预定策略执行相应的操作,Tair 调用一个内部函数来执行多种后台任务,例如:清除已过期的Key。关闭超时的客户端连接。更新统计信息。这些定期任务是 Tair 服务正常运行的保障,...

调整Redis定期任务的执行频率

定期任务与hz参数的关系 为了定期检测资源和服务状态并根据预定策略执行相应的操作,Redis 调用一个内部函数来执行多种后台任务,例如:清除已过期的Key。关闭超时的客户端连接。更新统计信息。这些定期任务是 Redis 服务正常运行的保障,...

使用闲时资源

本文为您介绍如何在使用预付费资源配额(Quota)提交DLC训练任务时,合理利用并配置闲时资源。功能介绍 在PAI平台中,您可根据自身业务场景灵活划分和分配Quota,不同的业务团队提交的训练任务则会消耗被分配的Quota。但某些业务的Quota在...

任务列表

本文介绍 PolarDB 任务列表的功能和操作方法。概述 为了便于用户管理 PolarDB 集群的任务,及时感知集群备份恢复等长时任务的进度,提高集群运...A:后台任务兼容了各种节点情况,如果实际不需要执行对应步骤,后台任务会自动跳过,可以忽略。

网站后台基础介绍(下)

本文主要介绍云速成美站后台使用方法。

网站后台基础介绍(上)

本文主要介绍云速成美站后台使用方法。

通用参考:切换资源组

资源组在购买、新增配置完成后即可被所属工作空间内的任务使用。您可根据实际场景,参考本文切换任务使用的资源组,并修改资源组归属的工作空间。背景信息 若资源组已绑定工作空间,修改其所归属的工作空间时,需先解绑该工作空间,再重新...

查看并管理实时任务

实时任务是指在Dataphin创建的FLINK_SQL、FLINK_TEMPLATE_SQL和FLINK_DATASTREAM类型的计算任务。在Dataphin的实时任务页面为您展示了任务实例的基本信息及运维管理选项,方便您查看实例任务并进行管理。本文为您介绍实时任务支持的运维...

pg_cron

定时任务的应用场景非常广泛:在服务器端,定时任务常用于定期执行后台任务、生成报告、清理垃圾数据等。在客户端,定时任务可以用于更新数据、提醒用户、执行自动化操作等。无论是在服务器端还是客户端,定时任务都可以减轻人工操作的负担...

pg_cron

定时任务的应用场景非常广泛:在服务器端,定时任务常用于定期执行后台任务、生成报告、清理垃圾数据等。在客户端,定时任务可以用于更新数据、提醒用户、执行自动化操作等。无论是在服务器端还是客户端,定时任务都可以减轻人工操作的负担...

pg_cron

定时任务的应用场景非常广泛:在服务器端,定时任务常用于定期执行后台任务、生成报告、清理垃圾数据等。在客户端,定时任务可以用于更新数据、提醒用户、执行自动化操作等。无论是在服务器端还是客户端,定时任务都可以减轻人工操作的负担...

查看训练详情

成功提交训练任务后,您可以通过查看任务基本信息与配置、任务事件、资源视图以及任务日志等内容来全面了解任务的运行情况。查看任务基本信息及配置 进入 分布式训练任务 页面。登录 PAI控制台。在左侧导航栏单击 工作空间列表,在工作空间...

购买流程

购买数据订阅任务 说明 建议使用DTS新版控制台,支持先配置后购买订阅任务,操作步骤(以订阅RDS MySQL为例),请参见 创建RDS MySQL数据订阅任务。进入订阅任务的列表页面。登录 DMS数据管理服务。在顶部菜单栏中,单击 集成与开发(DTS)...

导入接口介绍

您可以发送请求至<gdb-endpoint>:<port>/loader 终端,实现将数据文件从OSS的Bucket中导入至图数据库GDB实例,还可以查看任务状态和删除导入任务。本文介绍添加导入任务(POST)、查看导入任务状态(GET)和删除导入任务(DELETE)的应用...

识别任务说明

扫描说明 扫描模板 系统默认任务和自定义识别任务执行时除了使用对应的模板外(系统默认任务使用模板,自定义识别任务使用任务中指定的模板),默认还会使用通用识别模板。通用识别模板是根据中国国家标准委员会发布的个人信息安全规范...

工作流调度

使用限制 当前只有Java任务支持数据传输,分布式Java任务使用MapReduce模型进行数据传输。使用 指南 具体操作,请参见 流程管理。工作流上下游数据传递 SchedulerX提供工作流任务编排,同时支持任务上下游的数据传递。返回执行结果/*@...

将ElasticJob迁移至SAE Job

ElasticJob作为分布式任务框架,在使用过程中存在以下痛点:框架整体较重,需要依赖外置注册中心ZooKeeper,增加了至少三台服务器的使用成本和维护复杂度。随着任务量的不断增多,ZooKeeper作为有状态中间件将会成为性能瓶颈。可观测能力弱...

将Spring Task迁移至SAE Job

若与已创建的任务使用相同的部署包,可在选择部署包时选择引用部署包,这样新的任务模板将与被引用任务共用同一部署包,做到只需一次部署即可同步更新。在 任务模板列表 页面,单击目标任务模板 操作 列的 复制。在 任务基本信息 配置向导...

创建CDH Impala节点

使用限制 不支持 公共调度资源组 运行该类型任务。步骤一:创建CDH Impala节点 进入数据开发页面。登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据建模与开发>数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。...

将XXL-JOB迁移至SAE Job

若与已创建的任务使用相同的部署包,可在选择部署包时选择引用部署包,这样新的任务模板将与被引用任务共用同一部署包,做到只需一次部署即可同步更新。在 任务模板列表 页面,单击目标任务模板 操作 列的 复制。在 任务基本信息 配置向导...

新建拓扑任务

PLACEHOLDER:支持参数替换,目前支持的变量如下:${sharding}:替换当前分片值,配合简单任务使用。{shardingCount}:替换简单任务配置的分片数。{triggerTime}:替换预期的触发时间。描述(可选)配置任务的描述信息,例如业务含义、影响...

创建CDH Hive节点

如果您已部署CDH集群并希望借助DataWorks执行Hive任务(例如,数据查询作业或处理批量数据),可以使用CDH Hive节点。本文为您介绍如何创建CDH Hive节点。前提条件 数据开发(DataStudio)中已创建业务流程。数据开发(DataStudio)基于...

离线同步能力说明

费用说明 数据集成同步任务运行会占用数据集成任务执行资源,DataWorks会根据您使用的资源进行收费,此外,离线同步任务通过调度系统下发至对应资源组运行时,还会产生调度相关费用。详情请参见 资源费用明细:数据集成。说明 调度费用详情...

新建PAI_DESIGNER任务

机器学习PAI_DESIGNER任务用于调用您在机器学习平台中构建的任务,并按照节点配置进行调度生产。本文为您介绍如何新建PAI_DESIGNER任务。前提条件 在开始执行操作前,请确认您已满足以下条件:基于机器学习的PAI-Designer完成工作流的创建...

创建CDH Presto节点

如果您使用的是标准模式的工作空间,任务提交成功后,需要将任务发布至生产环境进行发布。请单击顶部菜单栏左侧的 任务发布。具体操作请参见 发布任务。查看周期调度任务。单击编辑界面右上角的 运维,进入生产环境运维中心。查看运行的...

新建PAI_DESIGNER任务

机器学习PAI_DESIGNER任务用于调用您在机器学习平台中构建的任务,并按照节点配置进行调度生产。本文为您介绍如何新建PAI_DESIGNER任务。功能上线时间 华东2(上海)、华北2(北京):2022年03月03日 华南1(深圳)、华东1(杭州):2022年...

MySQL节点

您可以通过创建MySQL节点,直接使用SQL语句对目标MySQL数据源进行数据开发。本文为您介绍如何创建并使用MySQL节点。...可能原因2:测试连通性使用的调度资源组,但任务执行时选错资源组,您可通过 带参运行 切换任务执行使用的调度资源组。

质检任务对象说明

assignConfigs List根据随录参数筛选会话直接任务用 dataSets List数据集直接用 ResultParam说明 创建二次质检任务时使用,分为以下情况 导出全部:参考GetResult接口jsonStr,两者同理。导出所选:s 导出所选时 名称 类型 示例值 描述 ...

创建CDH Spark节点

准备工作:开发Spark任务并获取JAR包 在使用DataWorks调度CDH Spark任务前,您需要先在CDH中开发Spark任务代码并完成任务代码的编译,生成编译后的任务JAR包,CDH Spark任务的开发指导详情请参见 Spark概述。说明 后续您需要将任务JAR包...

创建调度任务

选择 添加任务>集群任务,然后配置以下参数:参数 说明 任务名称 配置任务的名称,用于识别任务。应用名称 填写或选择目标应用名称。支持英文、中文、数字、下划线(_)、短划线(-),50 个字符之内。必须与工程中 application.properties...

执行恢复出厂设置任务

该接口调用会返回一个恢复出厂设置任务的ID,任务后台异步执行,通过该任务ID可查询任务的执行状态(配合“查询恢复出厂设置任务的执行状态”接口使用)。路径/living/device/reset 版本号 1.0.1 协议 HTTPS 请求方法 POST 是否需要用户...

使用限制

重要 数据加工任务处于停止或者运行完成状态时,依然会占用配额,建议及时清理停止或者运行完成状态、并且确认不再使用的数据加工任务,减少配额占用。更多信息,请参见 管理数据加工任务。如您有更大的使用需求,请 提工单 申请。源数据...

离线同步任务调优

离线同步任务使用的调度资源组 离线同步任务将有调度资源下发至数据集成任务执行资源上执行,调度资源使用情况同样会影响整体数据集成同步效率。关于离线任务下发机制,详情请参见:任务下发机制。离线同步任务配置 传输速度:是否设置任务...

数据加工

重要 数据加工任务处于停止或者运行完成状态时,依然会占用配额,建议及时清理停止或者运行完成状态、并且确认不再使用的数据加工任务,减少配额占用。更多信息,请参见 管理数据加工任务。如您有更大的使用需求,请 提工单 申请。源数据...

创建EMR Presto节点

使用限制 EMR集群与DataWorks资源限制 仅数据湖集群(Hadoop)使支持EMR Presto节点进行任务开发,新版数据湖集群(DataLake)和自定义集群(Custom)不支持。仅支持使用独享调度资源组运行该类型任务任务开发限制 开发Presto任务时,...

创建调度任务

选择 添加任务>简单任务,然后配置以下参数:参数 说明 任务名称 配置任务的名称,用于识别任务。应用名称 填写或选择目标应用名称。支持英文、中文、数字、下划线(_)、短划线(-),50 个字符之内。必须与工程中 application.properties...

基本概念

本文为您介绍DataWorks中,工作空间、业务流程、解决方案、组件、任务、实例、业务日期、定时时间、提交、脚本开发、资源、函数和输出名称等基本概念。工作空间 工作空间 是DataWorks管理任务、成员,分配角色和权限的基本单元。工作空间...

配置并使用调度参数

测试代码执行及调度参数替换情况 5 测试通过后,任务发布至生产环境,您需在生产运维中心的周期任务界面,确认生产环境任务使用的调度参数是否符合预期。确认生产环境任务的调度参数配置 配置调度参数,并验证参数执行情况的完整示例,详情...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云工作流 系统运维管理 性能测试 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用