常见问题
本文介绍在使用ossbrowser时遇到的常见问题及解决方法。使用AccessKey登录时出现“AccessDenied:You are forbidden to list buckets”报错 问题分析：当前账号没有访问所有Bucket的权限。解决方法：为当前账号授予 oss:ListBuckets 权限后...
DMS执行数据变更任务时发生“No operations allowed ...
问题描述 在DMS控制台执行数据变更任务时，出现以下错误：No operations allowed after connection closed 或出现以下错误：Communications link failure during commit().Transaction resolution unknown 问题原因 该错误是由于会话连接被...
MapReduce常见问题
本文为您介绍在使用MapReduce时的常见问题。问题类别 常见问题 功能咨询 MapReduce的输入源可以是视图吗？MapReduce的结果写入到表或分区时，会覆盖还是追加数据？MapReduce中是否可以调用Shell文件？reduce.setup能否读入输入表？Mapper...
MySQL节点
如果您需要查看更多周期调度任务详情，可单击顶部菜单栏的 运维中心，详情请参见 运维中心概述。常见问题：任务执行报错 暂不支持的jdbc驱动 问题描述 添加MySQL数据源时，选择了非连接串模式创建的数据源，导致运行任务时失败，报错信息为...
为OSS投递任务（新版）设置告警
当OSS投递任务出现异常报错后，触发告警。参数配置 监控的投递任务名称：需要监控的OSS投递任务的名称。默认值为.*，表示监控您当前阿里云账号下所有的OSS投递任务。多个投递任务之间可以使用竖线（|）分隔。您还可以使用正则表达式.*进行...
离线同步任务调优
同步任务整体速度慢可能出现在同步过程的各个阶段，本文以现象入手，为您提供各个阶段运行慢的解决方案，详情请参见：数据同步慢的场景及解决方案。在数据库性能限制的情况下，同步速度并非越快越好，考虑到速度过高可能对数据库造成过大的...
为MaxCompute投递任务（新版）设置告警
当MaxCompute投递任务出现异常报错后，触发告警。参数配置 监控的投递任务名称：需要监控的MaxCompute投递任务的名称。默认值为.*，表示监控您当前阿里云账号下所有的MaxCompute投递任务。多个投递任务之间可以使用竖线（|）分隔。您还可以...
补数据
任务定时时间为定时每周几或“每月定时几号”跑的任务，只有在指定调度时间才会真实跑数据，在非指定时间内，非调度时间内其他时间会生成空跑实例，不会实际执行任务，该实例状态为周、月实例空跑周期，更多空跑介绍，详情请参见 场景一：...
依赖关系
避免下游节点取数据时，上游表数据还未正常产出，导致下游节点取数出现问题。DataWorks上如何设置调度依赖？在DataWorks上，上游节点的输出作为下游节点的输入，形成节点依赖关系。说明 SQL任务会以如下方式自动配置节点输入输出：select ...
历史记录
1.2.9.1，2021-8-30 问题修复 修复问题：修复worker与Spring Cloud集成时出现任务运行锁死超时。1.2.9，2021-8-27 新特性 秒级别单机增强：单机秒级别循环支持在不用的实例间分发切换执行，配置参数：spring.schedulerx2....
备份中心FAQ
本文介绍使用备份中心时遇到的常见问题及其解决方案。索引 类别 问题 获取报错信息 通用操作 控制台 控制台界面提示当前数据拉取失败，请刷新重试！404 page not found 控制台界面提示已存在同名的资源，请修改名称后再试 跨集群恢复应用时...
全增量实时同步至Hologres
例如，CPU、内存、网络等互相影响，可能会导致离线任务变慢或实时任务延迟等问题，甚至在资源不足的极端情况下，可能会出现任务被OOM KILLER杀掉等问题。步骤九：执行同步解决方案任务 进入 数据集成>同步任务 界面，找到已创建的同步方案...
远图互联：自定义流程实现高效需求管理
当前产品研发团队已超过200人，对团队协作、研发效能提升带来了很大挑战，传统的项目管理方式难以持续，出现了越来越多的问题。当团队在内需推动下，探索新的效能提升方案，寻求突破升级之际，阿里巴巴云效2020走进了我们的视线。浙江远图...
MySQL分库分表同步至Hologres（方案2.0）
例如，CPU、内存、网络等互相影响，可能会导致离线任务变慢或实时任务延迟等问题，甚至在资源不足的极端情况下，可能会出现任务被OOM KILLER杀掉等问题。步骤九：执行同步解决方案任务 在 数据集成 主站页面，单击左侧菜单栏的 同步任务 ...
Dataphin逻辑表任务运行时间超长
问题原因 该逻辑表任务存在多个物化节点或者所有上游任务没有正常调度导致的。解决方案 该逻辑表任务存在两个物化节点；且存在两个上游依赖。查看逻辑表任务的运行日志；两个物化节点中一个是7月3号运行结束的，另外一个是7月5号运行结束的...
任务触发与执行问题
任务执行超时 问题现象 出现 TIMEOUT 错误。问题原因 客户端处理超时。解决方法 查看超时时间是否配置太小。建议根据任务的实际执行情况设置合理的超时时间。查看客户端错误日志 common-error.log。自定义参数不存在 问题现象 出现 javax....
JDBC常见问题
本文为您介绍JDBC的常见问题。...当出现该问题时，说明JDBC驱动使用Tunnel连接MaxCompute获取SQL结果出现了错误，解决方式请参见 报错信息：ErrorCode=Local Error,Failed to create download session with tunnel endpoint.
Spark作业异常排查及处理
内存问题引起的报错 Container killed by YARN for exceeding memory limits 报错原因：提交App时申请的内存量较低，但JVM启动占用了更多的内存，超过了自身的申请量，导致被YARN NodeManager异常终止。特别是Spark类型作业，可能会占用多...
离线同步并发和限流之间的关系
实践内容 并发数 阅读此部分，您可以解决和理解如下问题：问题一：如何配置数据同步任务的并发数？问题二：为什么我的数据同步任务跑的比较慢，实际运行的并发数不够？问题三：为什么我的同步任务并发数配置的很高，但是任务运行速度仍然很...
迁移失败常见原因及解决方案
下面介绍一些常见的迁移失败问题分析及解决方案：案例一：出现“because downloader get inputstream failed”报错 现象描述 某客户迁移百度云BOS的数据至阿里云OSS时，迁移失败。迁移失败文件列表产生如下报错：查看百度云BOS的日志，发现...
导入与导出
登录 云原生数据仓库AnalyticDB MySQL控制台，在 诊断与优化 页的 导入/导出任务 页签下找到目标异步任务，查看该异步任务的 异步任务名，然后运行 CANCEL JOB"${异步任务名}"语句取消该异步任务。更多关于异步导入导出任务的详情，请参见 ...
常见问题
查看当前Reduce Task中Reduce Input bytes和Reduce shuffle bytes的信息，如果比其他的Task处理的数据量大很多，则说明出现了倾斜问题。如何预估Hive作业并发量的上限值？Hive作业并发量与HiveServer2的内存以及master实例个数有关系。您...
无代理检测
步骤二：创建检测任务 检测任务通过为服务器创建 快照或 镜像，然后再扫描 快照或 镜像中的数据，排查当前服务器是否存在漏洞、告警、基线、敏感文件等问题。创建立即检测任务 在 无代理检测 页面，单击 创建检测任务。在 创建检测任务 ...
Prompt最佳实践
4.编程问题解决：在没有代码执行环境的情况下，让模型用自然语言描述编程问题的解决步骤。5.教育辅导与学习支持：模拟教学过程，逐步讲解解题方法，帮助学生理解问题背后的逻辑。6.专业领域决策支持：在法律、医学、工程等领域，模型通过...
实例健康诊断
实例健康诊断功能可以对 轻量应用服务器 实例的计算服务状态、网络服务、存储服务和配置管理等进行全方位的诊断，帮助您了解实例的健康状态，及时发现并解决常见的问题。前提条件 轻量应用服务器 实例需处于 运行中 状态。操作场景 推荐您...
调优集群性能
Build任务在某些情况下会消耗较高的存储节点CPU资源以及磁盘IO资源，可能会影响到其他操作，导致出现集群稳定性问题。关于Build指标的说明如下。参数 说明 最大Build任务数 在某个时间点，全部存储节点中正在运行Build任务数量最大的节点的...
投递日志到MaxCompute（旧版）
错误信息 如果投递任务出现错误，控制台上会显示相应的错误信息。错误信息 建议方案 MaxCompute项目空间不存在 在MaxCompute控制台中确认您配置的MaxCompute项目是否存在，如果不存在则需要创建。日志服务不会主动重试该错误，请在解决问题...
外呼系统管理
接通后延迟放音 设置机器人在电话接通N秒后才开始放音，以解决部分运营商出现的接通后过快播音导致的体验问题。同一任务中空号是否外呼开关 当开关开启时，同一任务中，如果某个号码的振铃音被智能识别为空号，则该号码在该任务中不会再被...
NAS存储卷FAQ
NAS存储卷挂载时间延长 NAS存储卷挂载失败时出现timeout错误 使用NAS存储卷时，提示chown:option not permitted 挂载NAS存储卷失败 使用NAS动态存储卷时Controller的任务队列已满且无法创建新的PV NAS存储卷挂载时间延长 问题现象：NAS存储...
NAS存储卷FAQ
NAS存储卷挂载时间延长 NAS存储卷挂载失败时出现timeout错误 使用NAS存储卷时，提示chown:option not permitted 挂载NAS存储卷失败 使用NAS动态存储卷时Controller的任务队列已满且无法创建新的PV NAS存储卷挂载时间延长 问题现象：NAS存储...
一键实时同步至MaxCompute
例如，CPU、内存、网络等互相影响，可能会导致离线任务变慢或实时任务延迟等问题，甚至在资源不足的极端情况下，可能会出现任务被OOM KILLER杀掉等问题。步骤七：执行同步任务 进入 数据集成>同步任务 界面，找到已创建的同步方案。单击...
一键实时同步至MaxCompute
例如，CPU、内存、网络等互相影响，可能会导致离线任务变慢或实时任务延迟等问题，甚至在资源不足的极端情况下，可能会出现任务被OOM KILLER杀掉等问题。步骤七：执行同步任务 进入 数据集成>同步任务 界面，找到已创建的同步方案。单击...
UpdateDIProjectConfig
调用UpdateDIProjectConfig修改当前工作空间中数据集成同步解决方案任务默认的全局配置。当前DataWorks仅支持为同步解决方案任务中的实时同步DDL消息处理策略设置默认的全局配置。如果您的同步解决方案任务包含实时同步任务，则配置 DDL...
常见错误码及排查方法
解决后重启任务。说明 针对MySQL数据库，表的上限值设置，可参考 B.3.2.10 The table is full。DTS-30011:put 2048 records error,currentRunningSQL:insert ignore into`xxx`.`yyy`(.:{id:4958981218625388545,schema:xxx.yyy,field:...
离线同步能力说明
说明 脏数据是对于业务没有意义，格式非法或者同步过程中出现问题的数据。单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。例如，源端是VARCHAR类型的数据写到INT类型的目标列中...
数据开发概述
DataWorks数据开发（DataStudio）模块用于定义周期调度任务的开发及调度属性，与运维中心配合使用，面向各引擎（MaxCompute、Hologres、EMR等）提供可视化开发主界面，支持智能代码开发、多引擎混编工作流、规范化任务发布等能力，帮助您...
自定义资源组
如果使用自定义调度资源组出现问题，需要首先确认Agent是否安装监控。操作如下所示：登录机器，切换至有权限账号下。执行下述命令。wget ...
重开任务单
8:问题重复出现 重开类型 UserName String 否 操作人姓名 操作人姓名 请求示例：eid（String）：任务单id（必传）resetType（重开单原因类型）：枚举值：6:解决方案无效；7:当前问题仍有疑问需要咨询；8:问题重复出现 resetContent（String...
开发PyODPS 2任务
DataWorks提供PyODPS 2节点类型，您可以在DataWorks上通过PyODPS语法进行PyODPS任务开发，PyODPS集成了MaxCompute的Python SDK。支持您在DataWorks的...PyODPS常见问题：您可了解PyODPS执行过程中的常见问题，便于出现异常时快速排查解决。
开发PyODPS 2任务
DataWorks提供PyODPS 2节点类型，您可以在DataWorks上通过PyODPS语法进行PyODPS任务开发，PyODPS集成了MaxCompute的Python SDK。支持您在DataWorks的...PyODPS常见问题：您可了解PyODPS执行过程中的常见问题，便于出现异常时快速排查解决。
- 产品推荐
- 这些文档可能帮助您