使用Azkaban调度MaxCompute
MaxCompute支持您通过...步骤四：查看Flow View运行结果 运行结束后，您可以在 Execution 界面的 Job List 页签查看各个作业的运行结果，还可以单击作业右侧的 Details 查看详细运行信息。更多查看作业运行结果操作，请参见 Execution。
数据正确性
本文为您介绍数据正确性有关的常见问题。为什么作业没有输出？开启minibatch，table....未开启minibatch：如果State过期被淘汰，update_before会忽略，update_after会处理并输出第一个更新，但State是从初始开始计算，所以结果也是有问题的。
开发ODPS MR任务
任务发布：完成所有开发相关操作后，您需要将所有任务节点进行发布，发布后节点即会根据调度配置结果进行周期性运行，操作详情请参见 发布任务。MapReduce常见问题：您可了解MR任务执行过程中的常见问题，便于出现异常时快速排查解决。
执行演练
在执行故障演练过程中，您可以实时查看演练进度、每个演练活动的运行状态及结果，同时也能够随时结束演练，进行恢复阶段的活动，清除故障演练影响。背景信息 一次完整的故障演练包括以下四个阶段：安装故障演练探针 创建演练 执行演练 停止...
检测服务概述
检测门禁：典型值为通过或不通过，当设置了检测通过的门禁阈值，当检测结果的问题数大于门禁值时，则检测不通过，该门禁可用于合并请求卡点等场景，用于评估代码是否可进行下一步操作。检测问题等级【严重】需要遵守，该规则引起的问题可能...
步骤二：编写SQL分析语句
本文介绍编写SQL分析语句的操作流程。前提条件 已创建SQL分析任务：您需在SQL数据分析工作台，根据业务需求，编写SQL...如果运行失败，可在 运行日志 页签下，根据报错信息，解决问题后，重新运行。后续步骤 步骤三：设置任务调度策略并发布
开发ODPS MR任务
任务发布：完成所有开发相关操作后，您需要将所有任务节点进行发布，发布后节点即会根据调度配置结果进行周期性运行，操作详情请参见 发布任务。MapReduce常见问题：您可了解MR任务执行过程中的常见问题，便于出现异常时快速排查解决。
快速入门
步骤四：查看流水线运行结果 进入流水线运行页面，可以查看流水线运行进度和结果。单击 Java 构建上传 任务卡片上的 日志 可以查看构建日志。单击 主机部署 任务卡片上的 部署详情 可以查看部署单详情：部署耗时、部署状态、日志等。部署...
API 概览
流水线控制 API 名称 描述 运行流水线 运行流水线 终止运行流水线 可以取消运行流水线 删除流水线成员 可以删除流水线成员 更新流水线成员 可以更新流水线成员 增加流水线成员 可以增加流水线成员 使用流水线模板创建流水线 使用流水线模板...
使用SQL File查询MaxCompute表
运行代码：支持通过单击SQL语句左侧的快捷运行按钮直接运行代码，或选中部分代码后单击，运行完成后可查看对应代码的运行结果。格式化：您也可以通过格式化将自行排版的代码一键规范化排版。查看查询结果。SQL语句执行成功后，您可以对查询...
Cromwell 工作流引擎支持
查看运行结果 工作流运行结束后，输出结果被上传到了配置文件或 WDL 中定义的 OSS 路径下。在OSS路径上面的目录结构如下：如上图所示，在配置文件中的config.root目录下有如下输出目录：第一层：workflowname 工作流的名称 第二层：通过上...
运行安全命令示例
本文为您介绍如何在MaxCompute客户端上使用Java SDK接口运行安全相关的命令。前提条件 您需要完成以下操作：准备IntelliJ IDEA开发工具，请参见 安装Studio。配置MaxCompute Studio连接MaxCompute项目空间，请参见 创建MaxCompute项目连接...
集成iOS SDK时的常见问题
通过阅读本文，您可以了解集成iOS SDK时常见的问题及解决方法。编译代码时报x86或i386错误 问题现象：编译代码时可能会出现以下错误：可能原因：使用模拟器调试和运行。解决方案：请使用真实设备调试和运行。编译代码时报bitcode错误 问题...
基本概念
任务流实例状态有如下几种：等待调度（WAIT_SCHEDULE）运行中（RUNNING）暂停（SUSPEND）失败（FAIL）成功（SUCCESS）终止中（KILLING）排队中（QUEUED）冻结 任务流 冻结任务流会导致所有调度触发都无法运行，非事件调度任务会直接失败，...
使用Logview查看作业运行信息
使用Logview排查问题 出错的任务 当有任务出错时，您可以在Logview页面的Result中看到错误的提示信息，也可以在Detail页面中通过Fuxi Instance的stderr，查看具体某个Instance出错的信息。数据倾斜 运行缓慢有时是由于在某个Fuxi Task的...
客户端离线排查
如果DNS服务无法运行，重启您的服务器，或者检查服务器DNS服务是否有故障。检查服务器是否设置了防火墙ACL规则或阿里云安全组规则。如果有，请确认已将云安全中心的服务端IP加入防火墙白名单（仅出方向需添加，入方向无需配置）以允许网络...
API概览
ListDoctorJobs 批量获取任务运行结果 通过EMR Doctor批量获取任务基本运行信息。ListDoctorComputeSummary 批量获取集群资源使用结果 通过EMR Doctor根据过滤条件批量获取集群资源使用情况。GetDoctorComputeSummary 获取集群单个资源使用...
查看节点健康状态
节点健康状态展示了当前节点的运行状态是否正常，它是由多个健康检查项结果汇总而成的。本文将介绍如何查看节点的健康状态和相关的健康检查项。前提条件 已创建集群，详情请参见 创建集群。使用限制 仅适用于DataLake、Dataflow、OLAP、...
Java SDK
无 1.2.8.2，2021-8-6 变更类型 功能描述 相关文档 优化 修复问题：秒级别广播任务大批量worker按批次发布过程中任务运行有概率卡住进行修复。无 1.2.8，2021-6-23 变更类型 功能描述 相关文档 新增 广播任务增强：postProcess可以拿到所有...
快速使用EMR Notebook
EMR Notebook提供了全托管的兼容开源Jupyter的...步骤六：在Notebook中引用单元格变量 在一个Notebook文件内，如果同时有SQL和Python语言的单元格，SQL单元格运行的结果，被标记为变量df4，则该变量结果可以在同一个Notebook内被再次引用。
RunPython3Script-运行python3脚本
fe240b98-27b1-4a36-aec1-550b894318d9","content":{"resultData":[],"success":true } } RunResult 参数为 JSONObject 格式，包含的字段为：requestUuid：表示该次请求的 UUID，用于查询运行日志 content：表示脚本运行的结果，...
通过运维中心管理任务流与任务流实例
说明 如上是基于运行时间筛选出运行的实例总数，若您需要查看基于业务时间筛选出已运行的任务流实例数，请勾选右侧的 业务时间。筛选出目标状态的任务流实例，有 执行中、成功、失败 三种状态。查看任务流的运行状态。单击目标任务流右侧的...
获取流水线运行结果
获取流水线实例运行结果。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是 ...
SanityCheck：算力健康检测
功能介绍 在执行DLC任务时，可能会遇到以下问题：在任务花费一定时间加载模型Checkpoint或其他初始化操作后，由于申请的资源存在故障，无法顺利开始训练，需要调查定位故障问题并重新提交任务。该过程中会导致GPU资源的浪费。在任务运行...
服务水平
服务水平E：此服务水平的交通常处于不稳定流动范围，接近或达到水平最大交通量时，交通量有效的增加，或交通流内部有小的扰动就将产生大的运行问题，甚至发生交通中断。本水平内所有车速降到一个低的但相对均匀的值，驾驶自由度极低，舒适...
开发Graph
通过本地运行调试Graph 通过本地运行方式测试，查看Graph的运行结果是否符合预期。右键单击编写完成的Java脚本，选择 Run。在 Run/Debug Configurations 页面上配置运行参数。MaxCompute project：选择运行Graph的MaxCompute项目。Download...
查看并管理手动实例
运行诊断 DataWorks运维中心为您提供运行诊断功能，帮助您掌握任务运行的全链路信息，以迅速定位问题。详情请参见 智能诊断。查看代码 查看当前节点的代码。编辑节点 单击后，即可跳转至 数据开发 页面，对当前业务流程的内容进行修改。...
进入数据质量概览（新版）
数据质量概览为您展示当前工作空间下，需要重点关注的数据质量总览指标、实例运行后触发的质量规则校验状态的趋势及分布情况、TOP质量问题表及质量问题责任人、...未设置告警接收人时，如果规则运行后出现质量问题，将无法及时获取结果信息。
快速入门
PyODPS可在DataWorks等数据开发平台中作为数据开发节点调用。这些平台提供了PyODPS运行环境和调度执行的能力，无需您手动创建ODPS入口对象。...运行结束后，您可以在下方的 运行日志 中看到运行结果。输出如下日志代表执行成功。
项目空间运维与监控
日志监控 当我们在项目空间中运行测试作业时，若运行过程中作业报错或作业失败，在下方的调试框内会给出相应的执行日志以及错误判断信息，在运行记录当中可以查看过往的提交信息，以供用户排查作业问题，如下图：日志监控图 运行记录列表图...
快速体验MaxCompute
单击左侧 资源管理器 图标，打开资源管理器页面，在页面左下角的 公共数据集DEMO 中，单击GithubEventAnalytics样例文件，在右侧的 运行参数配置 中配置 项目 为上述创建的项目，计算配额 选择为 默认后付费Quota，完成后单击顶部的 运行 ...
Python SDK使用说明
show=False,#运行结束后是否输出结果 show_realtime=False#是否实时打印输出)#同理也支持单实例运行命令 job.tasks[i].run(cmd,.)上述运行命令的参数说明如下：参数名称 参数说明 参数示例 sudo 是否以管理员权限运行命令。默认值为False，...
创建业务流程
虚拟节点在被其他节点依赖的情况下，如果被运维人员手动设置为运行失败，则下游未运行的节点将因此无法被触发运行。在运维过程中，可以防止上游的错误数据进一步扩散。业务流程中，虚拟节点的上游节点通常会被设置为工作空间根节点。工作...
IntelliJ IDEA Java UDF开发最佳实践
单击 OK，运行结果如下图。注册MaxCompute UDF。在UDF Java文件上单击右键，选择 Deploy to server.在 Package a jar,submit resource and register function 对话框，配置如下参数。MaxCompute project：UDF所在的MaxCompute项目名称。...
查询并下载数据
审批通过后，您可查看审批任务、当前运行结果或在运行记录中下载数据。更多信息，请参见 数据下载配置。若您已开启数据下载审批水印功能，下载的Excel文件中将自动添加水印。数据下载文件保留 30天，如数据查询时间为2023-04-12，申请时间...
任务管理
当有一个高优先级任务进入就绪队列，正在运行的低优先级任务会立即被唤出，将处理器执行权交给高优先级任务。此种调度机制存在一个潜在问题，如果存在多个优先级相同的任务，其中一个任务强占处理器，则其他同等优先级的任务将无法被执行。...
开发MapReduce
通过本地运行调试MapReduce 通过本地运行方式测试，查看MapReduce的运行结果是否符合预期。右键单击编写完成的Java脚本，选择 Run。在 Run/Debug Configurations 页面上选择此次运行的MaxCompute项目名称。单击 OK，开始运行。说明 本地...
在本地环境上使用PyODPS
o.execute_sql_interactive('SELECT*FROM dual',fallback="noresource,unsupported")在PyODPS节点中读取SQL运行结果 您可以使用 open_reader()来读取SQL命令运行结果。具体操作请参见 读取SQL执行结果。更多PyODPS节点的SQL相关操作详情请...
变更持续交付模式
云效示例：Java K8s 应用标准研发流程模板，开发阶段 无准入门槛，测试阶段 需要开发阶段运行结果为成功，生产阶段 需要开发、测试阶段的运行结果都为成功。新建变更进行研发 研发流程配置完成后，可以进行日常业务需求的研发，从创建一个...
客户端常见问题
本文记录了客户端常见问题，包括客户端登录异常报错、闪退及问题反馈等。索引 类别 常见问题 安装与卸载 安装客户端时提示这个程序需要Windows服务包1或更高，怎么办？安装客户端时提示UsbDk Runtime Libraries Installer失败，怎么办?怎么...
- 产品推荐
- 这些文档可能帮助您