日志实时入仓快速入门
说明 为了避免作业Failover后，作业重启将重复数据写入到Hologres中，您可以添加相关主键从而唯一地标识数据。当数据重发时，Hologres将会保证相同partition和offset的数据只会保留一份。通过INSERT INTO语句同步 考虑到Hologres中对于JSON...
在DataWorks运维中心查看作业运行信息
周期作业 查看周期作业运行信息请参见 查看并管理周期任务。周期作业如果运行失败可以使用运行诊断功能快速定位任务未运行成功的原因，详情请参见 任务运行诊断。实时作业 查看实时同步作业运行信息请参见 实时同步任务运行与管理。
修改预约重启时间
在 计划内运维事件 列表中，在 云服务器 页签下，找到已经设置了重启计划的ECS实例，在 操作 列，单击 预约重启。在 预约重启时间 页面，选择 预约日期 和 预约时间。说明 预约重启时间不能超过 最晚可预约时间。其中，最晚可预约时间 比 ...
重启节点
PolarDB 提供了重启节点功能，您可以在控制台上手动重启节点解决数据库连接和性能问题。注意事项 重启只读节点之后新建的读写分离连接会转发请求到该只读节点。重启只读节点之前建立的读写分离连接不会转发请求到重启后的只读节点，您可以...
重启节点
PolarDB 提供了重启节点功能，您可以在控制台上手动重启节点解决数据库连接和性能问题。注意事项 重启只读节点之后新建的读写分离连接会转发请求到该只读节点。重启只读节点之前建立的读写分离连接不会转发请求到重启后的只读节点，您可以...
重启节点
PolarDB 提供了重启节点功能，您可以在控制台上手动重启节点解决数据库连接和性能问题。注意事项 重启只读节点之后新建的读写分离连接会转发请求到该只读节点。重启只读节点之前建立的读写分离连接不会转发请求到重启后的只读节点，您可以...
EDAS旧版本监控报警功能下线通知
EDAS于2020年2月13日对监控报警功能进行了升级，经过4个月的迁移过渡期，绝大部分用户已经对应用进行了重启，并完成迁移。EDAS项目组决定于2020年8月31日将老版本的监控报警系统下线。下线影响 旧版监控报警功能下线以后，将会对EDAS产品...
重启作业
描述 重启作业，作业状态为 Stopped 和 Failed 时可以执行此操作。请求语法 POST/jobs/{ Id }/start 属性说明 属性名称 类型 是否必须 描述 Id String 是 作业标识符。返回信息 成功 返回201状态码。错误 状态码 错误码 错误信息 语义 404 ...
管理域名
说明 新增后，需要重启作业才会生效。修改 域名 进入域名管理入口。登录 实时计算控制台，单击 Flink全托管 页签。选择目标工作空间 操作 列下的 更多>管理域名。单击目标域名 操作 列下的 编辑，填写 域名 和 IP，单击 保存。请保证域名和...
配置作业资源
注意事项 作业资源配置后，需要重启作业才能生效。操作步骤 进入资源配置入口。登录 实时计算控制台。单击目标工作空间 操作 列下的 控制台。在 作业运维 页面，单击目标作业名称。在 部署详情 页签，单击 资源配置 区域右侧的 编辑。修改...
AIMaster：弹性自动容错引擎
配置容错消息通知 任务开启容错监控后，如果您希望容错发生时可以进行通知，比如任务发生了重启，那么您可以在 工作空间详情，选择 事件中心，点击 新建事件规则，事件类型选择 DLC任务>任务自动容错。具体操作，请参见 工作空间事件中心。...
作业调试
您可以使用作业调试功能模拟作业运行、检查输出结果，验证SELECT或INSERT业务逻辑的正确性，提升开发效率，降低数据质量风险。本文为您介绍如何进行Flink SQL作业调试。背景信息 您可以在Flink开发控制台使用作业调试功能本地验证作业逻辑...
作业智能诊断
全量实时分析Flink作业全生命周期过程中产生的日志、事件、指标以及配置，并依据阿里云技术专家排查Flink作业高频问题的运维经验，提供作业开发态报错日志诊断、运行态健康分及异常态根因诊断。针对诊断结果给出相应的优化和建议，减少您的...
2023-04-13版本
暂无 SQL作业调试流程优化 优化了SQL作业的调试流程，不再需要设置调试的Session集群，而是在作业调试阶段选择调试作业要使用的Session集群，避免作业多版本情况下需要频繁更换调试集群的问题。作业调试 新增安全页面 将用户授权与密钥托管...
查看并管理计划内事件
切换时间方式 操作步骤 周期切换时间 注意 设置了周期切换时间后，从当前时间开始产生的计划内事件，按照最近的周期时间执行切换。例如设置的周期切换时间为周二12:00:00，周五12:00:00，则本周二12:00:00至本周五12:00:00产生的计划内事件...
提交训练作业
PAI Python SDK提供了更易用的API（即HighLevel API），支持您将训练作业提交到PAI，并使用云上资源运行训练作业。本文为您介绍如何准备训练作业脚本并使用SDK提交训练作业。计费说明 在提交训练作业时，会调用DLC计算资源执行任务，由此会...
指定作业的报警设置
DLA不仅支持使用定义好的报警模板对所有作业进行监控报警，还支持对单个作业进行监控报警。本文介绍如何针对特定的作业进行监控报警。前提条件 您已经成功购买DLA虚拟集群。如果您是RAM用户，请确认已具备 AliyunARMSFullAccess 权限。您...
使用私有池保障节省停机模式ECS实例的重启成功率
但是节省停机模式重启成功率依赖于实例库存，当业务峰值到来时，开启了节省停机模式的实例可能会因为库存不足导致重启失败，对业务带来更大的影响。本文介绍如何通过私有池保障节省停机模式实例的重启成功率。操作步骤 假设已有一台按量...
通过实时计算订阅数据
启动成功后，可查看作业状态，按照需要停止或重启作业，并查看业务延迟。注意 选择的读取数据时间必须在数据同步到DataHub之前，否则可能造成数据丢失，影响查询结果。icmsDocProps={'productMethod':'created','language':'zh-CN',};
DBA_JOBS
DBA_JOBS 视图提供数据库中的所有作业的相关信息。名称 类型 说明 job INTEGER 作业的标识符（作业 ID）。log_user TEXT 提交了作业的用户的名称。priv_user TEXT 与 log_user 相同。仅为了实现兼容性而提供。schema_user TEXT 用于分析...
USER_JOBS
USER_JOBS 视图提供当前用户拥有的所有作业的信息。名称 类型 说明 job INTEGER 作业的标识符（作业 ID）。log_user TEXT 提交了作业的用户的名称。priv_user TEXT 与 log_user 相同。仅为了实现兼容性而提供。schema_user TEXT 用于分析...
ALL_JOBS
ALL_JOBS 视图提供位于数据库中的所有作业的相关信息。名称 类型 说明 job INTEGER 作业的标识符（作业 ID）。log_user TEXT 提交了作业的用户的名称。priv_user TEXT 与 log_user 相同。仅为了实现兼容性而提供。schema_user TEXT 用于...
通过控制台提交作业
E-HPC管理控制台提供了作业相关的提交作业、停止作业、查看作业状态等功能，本文介绍如何使用E-HPC管理控制台提交作业。前提条件 集群和集群节点状态都为 运行中。已创建用户，具体操作，请参见 管理用户。已准备好作业文件。E-HPC支持多种...
密钥轮转
周期性自动轮转：自定义轮转周期（7~365天），周期性地生成新的密钥版本。立即轮转：立即生成一个新的密钥版本。如何进行密码运算操作 用于云产品服务端加密时，您只需指定密钥即可，无需手动集成SDK进行密码运算操作。用于自建应用加密时...
ECS系统事件汇总
Scheduled：因系统维护实例重启计划中 Instance:SystemMaintenance.Reboot:Executing：因系统维护实例重启执行中 Instance:SystemMaintenance.Reboot:Executed：因系统维护实例重启已完成 Instance:SystemMaintenance.Reboot:Avoided：因...
配置自动调优
说明 VVR 8.0.1及以上版本，Flink系统会先尝试使用动态参数更新重启作业，再尝试使用作业整体重启。动态参数更新下业务中断时间较之作业整体重启缩小30%-98%，具体依赖于作业状态和逻辑，目前仅支持并发的修改。详情请参见 动态更新作业...
Job型资源组的优先级队列
本文介绍设置 湖仓版（3.0）Job型资源组的作业优先级和查看优先级的方法。前提条件 AnalyticDB MySQL 湖仓版（3.0）集群的内核版本为3.1.6.3及以上版本。已创建Job型资源组，且提交作业时选择在Job型资源组中运行。注意事项 暂不支持修改已...
作业实例详情
本文为您介绍如何查看作业实例详情。查看作业实例详情 MaxCompute Studio支持2种方式查看MaxCompute作业实例详情。通过Logview URL或本地的Logview离线文件以只读方式打开作业详情。使用Logview查看作业的详细信息是比较常用的方式。使用...
创建业务流程
DataWorks的 业务流程 开发结构满足根据业务视角来组织数据开发任务的需求，也提供了 周期业务流程 和 手动业务流程 两种，以满足需要周期性调度和无需周期性调度手动触发运行的场景。本文为您介绍如何创建、设计、提交和查看业务流程，...
MySQL整库周期性增全量同步至Hive
效果：同步修改过的表，没有修改的表不会再进行同步 数据开发相关场景 如果您有下游数据依赖，需要进行数据开发操作的场景，可以参考 配置调度依赖，进行节点上下游的设置，对应的周期任务节点信息可以在周期配置中查看。
MySQL整库周期性增全量同步至MaxCompute
周期配置：对周期同步的调度周期、重跑属性、调度资源组等进行配置。增量条件：对源端进行where字句过滤，此处只需写where子句，不需要写出where关键字。如果启用了周期性配置，可以使用系统参数变量。例如：STR_TO_DATE('${bizdate}','%Y%...
Hologres整库周期性增全量同步至MaxCompute
效果：同步修改过的表，没有修改的表不会再进行同步 数据开发相关场景 如果您有下游数据依赖，需要进行数据开发操作的场景，可以参考 配置调度依赖，进行节点上下游的设置，对应的周期任务节点信息可以在周期配置中查看。
AnalyticDB for MySQL3.0整库周期性增全量同步至...
详情请参见 场景1：周期全量配置方式、场景2：一次性全量周期性增量配置方式 场景1：周期全量配置方式 当同步步骤选择 结构迁移 和 全量同步 时，周期全量同步任务配置详情如下：选择同步表。您可根据在左侧 选择同步的源表 区域，选中...
规则管理
使用限制 自定义监控规则仅对自动调度的 周期实例 生效，不对周期任务的测试和补数据任务运行结果进行监控。自定义监控规则支持 邮件、短信、电话、钉钉群机器人 和 WebHook 报警方式，使用限制如下：WebHook：可用版本：仅DataWorks企业版...
部署作业
Flink 1.11或Flink 1.10版本：手动将作业引擎版本升级到vvr-3.0.3-flink-1.12或vvr-4.0.8-flink-1.13版本后重启作业，否则会在启动作业时超时报错。JAR URI 请选择一个文件或者手动上传新文件，您可以拖拽文件到此区域或者单击右侧 图标...
Flink动态CEP快速入门
Flink 1.11或Flink 1.10版本：手动将作业引擎版本升级到vvr-3.0.3-flink-1.12或vvr-4.0.8-flink-1.13版本后重启作业，否则会在启动作业时超时报错。JAR URL 上传打包好的JAR包，或者直接上传我们提供的测试JAR包。Entry Point Class 填写为...
计费常见问题
您可以先通过账单查找出耗费较多资源的SQL作业和其具体的运行时间，并参照 查看账单详情 或 MaxCompute账单用量明细分析 进行费用分析及作业优化。长期未使用MaxCompute按量计费功能，为什么每天仍会产生费用？MaxCompute按量计费费用包含...
2023-08-21版本
CDAS功能支持了在对新增表等变更操作后，可以以有状态的方式重启作业并继续执行，这避免了重启带来的状态丢失与额外作业的管理成本。新增OceanBase连接器，可以将OceanBase数据库作为结果表和维表使用。OceanBase是阿里巴巴和蚂蚁集团100%...
功能与优势
实时风控场景能力 企业级复杂事件处理（CEP）支持作业无需重启动态可配置规则，实现在线实时风控等场景的不间断生产级能力。应用于实时营销、实时风控、安全态势感知等领域，提升开发效率和大规模数据处理能力，同时保证业务连续性。上下游...
安全白皮书
配置定时自动创建作业快照：如果您需要系统可以自动定时创建作业快照，则可以配置作业快照创建周期。保存该规则后，作业运行过程中，系统会根据此周期来自动创建作业快照，无需您进行手动创建。从（其他作业）指定快照恢复作业：如果您需要...
- 产品推荐
- 这些文档可能帮助您