服务条款

对于因不可抗力或本网站不能控制的原因造成的网络服务中断和长时间终止,本网站不承担任何责任,但将尽力减少因此而给用户造成的损失和影响。本网站将尽可能采取一切措施保护用户数据及个人信息资料安全。但用户通过使用或安装第三方应用...

文档修订记录

DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务,需先将已创建的数据源或集群绑定至数据开发...

模块升级

升级过程中将刷新一至两次模块,模块较大时可能需要长时间,请勿关闭界面,耐心等待。升级完成后,将再次进行错误检查,如有报错,请根据错误检查提示进行修改,必要时可对模块进行回滚,撤销此次升级。模块修改完成后,再次发布模块,...

应用升级

升级过程中将刷新一至两次应用,应用较大时可能需要长时间,请勿关闭界面,耐心等待。升级完成后,将再次进行错误检查,如有报错,请根据错误检查提示进行修改,必要时可对应用进行回滚,撤销此次升级。应用修改完成后,再次预览/发布...

数据开发与运行

数据开发运行历史保留多长时间?批量操作 如何对节点、资源、函数等进行相关批量修改相关属性的操作?如何在数据开发页面批量修改业务流程下节点使用的调度资源组?BI对接 使用Power BI连接MaxCompute报错,该如何处理?API调用 Openapi...

优雅下线

说明 静默时长:当前阶段执行后,等待多长时间可进行下一步操作。以暂停调度为例,下线任务暂停调度到达静默时长后,才可进行下线对象操作。3 定义计划执行方式 下线流程的每一个步骤,支持您选择人工触发或全自动触发步骤执行。4 查看并...

开发Link Visual的功能介绍

标识符 功能类型 功能名称 描述 控制台勾选 开发指南 StartVodByTime 服务 按时间方式开始观看录像 通知设备开始点播RTMP推流 是 该物模型无需额外开发 QueryRecordTimeList 服务 查询录像时间列表 App发起并由设备端响应查询请求,返回...

开发ODPS Script任务

如果个输入的数据源数据准备完成的时间间隔很(例如一个01:00可以准备好,一个07:00可以准备好),则不适合通过table variable衔接拼装为一个大的脚本模式SQL。脚本模式下,您可以对一个变量赋常量值,然后执行 SELECT*FROM 变量 语句...

任务调度属性配置概述

超时定义:定义该任务执行超过多长时间会自动退出。重跑属性:定义该任务自动调度时是否可重跑。出错自动重跑:定义该任务自动调度失败且可重跑时,自动重跑的频率。生效日期:定义该任务在什么时间段内调度。超过生效日期的任务将不再生成...

数据开发常见问题

数据开发运行历史保留多长时间?引擎操作常见问题 EMR引擎 Hive相关:Hive使用时的常见问题。Spark相关:Spark使用时的常见问题。MaxCompute引擎 开发相关:SQL:SQL常见问题 内建函数:内建函数常见问题 UDF:MaxCompute UDF(Java)常见...

时序引擎应用开发简介

6.预降采样 预降采样应用于较长时间范围的数据查询场景。在数据写入时按照设置的规则将原始数据降低精度存储,降采样查询时,通过查询低精度数据来减少查询的数据量,从而降低查询延迟。使用OpenTSDB或时间序列数据库TSDB的应用开发步骤 ...

数据开发功能索引

本文为您介绍DataWorks数据开发(DataStudio)界面的整体布局,以及进行开发操作的主界面(业务流程和节点)中各组件、按钮的功能作用,方便您快速了解及使用数据开发模块。进入数据开发 登录 DataWorks控制台,单击左侧导航栏的 数据建模...

数据开发:开发者

时间属性 通过调度配置的时间属性,配置节点生成周期实例的方式,实例调度周期与执行时间,是否支持重跑,任务执行超过多长时间自动退出等。说明 您需配置节点的 重跑属性 后才可提交节点。任务定时时间为单个节点维度,但任务实际运行时间...

交通

解决方案 因开发人员只具备 Java 和 Vue.js 的开发能力,无法在短时间内快速掌握一门全新的开发语言或原生 UI 组件开发的能力。但因业务要求紧急,因此技术团队决定将原有模型中的 Uni-App 替换为 mPaaS 小程序。针对点货网 App 进行功能...

参数节点

跨节点传参 当数据开发的业务流程中,某个下游节点的任务需要获取个、多级上游节点的输出参数时,您可以使用参数节点,将下游节点需要获取的所有参数统一添加至参数节点中,后续下游节点可直接挂在参数节点之下,即可获取到所有所需参数...

代码评审

因此,为避免高优先级任务因代码不合规导致任务失败,从而长时间占用资源导致计算资源浪费,阻塞其他任务运行,建议将高优先级的任务添加至强制代码评审基线范围,添加后,评审人员需对任务的代码质量进行把控,防止由于任务代码有误,未经...

Check节点

当满足调度运行条件后,Check节点将一直处于运行中状态直至满足检查条件返回成功,或由于长时间未检查通过而返回失败。调度配置,详情请参见 步骤三:配置任务调度。使用限制 不支持使用公共调度资源组运行Check节点任务。2023年11月1日 前...

mPaaS 10.1.68 升级指南

如果您继续使用,在将来的更新中可能需要花费更时间进行适配。iOS 热修复仅限专有云使用,更详情,请咨询 mPaaS 技术支持。定制库处理 10.1.68 基线版本各组件合入了定制化的需求,但是为了稳妥起见,如果此前您的依赖中包含定制库且...

规划工作空间

开发周期,运维链路,标准模式下上层任务正式发布前需要修改代码。架构稳定性★人员灵活性★业务复杂度★数据安全★可运维性★数据共享★以上三种划分模式可以混合使用,以综合各自优点。一种常用的混合策略是整体按数仓层次划分,但各...

创建解决方案

背景信息 DataWorks对数据开发模式进行全面升级,按照业务种类组织相关的不同类型的节点,让您能够更好地以业务为单元、连接个业务流程进行开发。DataWorks通过 工作空间>解决方案>业务流程 三级结构,全新定义开发流程,提升开发体验:...

配置任务调度

多时间属性介绍,详情请参见 时间属性配置说明。配置调度依赖 依赖属性中可以配置节点的上游依赖,表示即使当前节点的实例已经到定时时间,也必须等待上游节点的实例运行完毕,才会触发运行。例如,当前节点的实例将在上游 insert_data ...

客户案例

DataWorks在个行业中均有典型的案例落地,帮助个行业的企业解决数据痛点,挖掘数据价值,本文为您介绍典型行业中已落地的客户案例。新零售行业:大润发云上数据中台建设 客户架构如下。客户简介 为了快速数字化转型,拥抱新零售,...

数据治理中心概述

数据治理中心可自动发现平台使用过程中数据存储、任务计算、代码开发、数据质量及安全等维度存在的问题,并通过健康分量化评估,从全局、工作空间、个人等个视角,以治理报告及排行榜呈现治理成果,帮助您高效达成治理目标。同时,提供...

使用IoT Studio展示云监控报警历史

使用IoT Studio开发设备运维大屏时,可以在运维页面展示设备相关的报警历史信息,便于运维人员掌握设备运行状态,及时定位解决设备问题。本文介绍如何使用IoT Studio的业务逻辑开发和Web应用开发能力,实现设备报警历史信息的展示。场景...

函数计算节点

因此,进行函数开发前您需要先创建服务。创建服务,详情请参见 创建服务。已创建函数。函数是调度与运行的基本单位,是一段代码的处理逻辑。您需根据函数计算提供的函数接口形式编写代码,并将代码以函数的形式部署到函数计算进行应用。...

周期任务基本运维操作

补数据实例 需要对当前任务及下游任务执行补过去某一时间段或未来某段时间的数据的操作,即需要对历史或未来时间段的数据进行ETL操作。人为针对当前周期任务手动触发补数据操作,并生成补数据实例。生成补数据实例的同时触发补数据实例执行...

MaxCompute数据访问权限控制

如果需要跨项目操作开发表或生产表,子账号需要在 安全中心 发起申请,待审批通过后,便可在数据开发界面对表进行相关操作。数据访问权限管控流程 数据访问控制功能支持您进行 权限申请、权限审批、权限审计 的操作,还支持您查看 权限申请...

团队管理

随着企业(团队)规模的增长,您可能需要同时管理个研发团队,在云开发平台,点击页面右上角的头像图标,在展开的下拉菜单中,您可以看到当前您正在管理的企业(团队),您可以随时创建新的企业(团队)或者切换到其他您创建好的企业...

查看业务服务

物联网应用开发(IoT Studio)提供查看业务逻辑服务的功能,包括业务服务基本信息、逻辑配置、监控运维等。...查看服务运行时分布图,该分布图按分钟显示服务运行时间的趋势,帮助您了解哪些时段服务耗时较,便于优化业务服务的配置。

域名管理

在购买页面,根据您的业务需要选择 套餐类型 和 购买时,并完成购买。购买成功后,您可在该应用的 域名管理 页签下,单击 申请备案,申请ICP备案服务码并进行备案。具体操作,请参见 申请(免费)ICP备案服务码、PC端和移动端备案。体验...

配置发布API

触发器介绍 端低代码开发平台魔笔 提供 触发器 功能,包含 发布API 和 定时任务。发布API:发布API供外部应用访问Mobi应用的数据和服务。定时任务:指定时间内触发执行定时任务。前提条件 已创建应用,具体请参见 添加应用。已创建使用此...

离线同步任务运维

为确保任务运行无误,当您在DataStudio中完成任务开发,并发布至生产环境后,您可以进入运维中心管理离线同步任务、监控任务运行状态、修改同步资源组和查看任务运行日志等。本文列举离线同步任务的常见运维操作。前提条件 已完成离线同步...

产品计费

运行环境 3个(预览、开发、生产)/应用 3个(预览、开发、生产)/应用 3个(预览、开发、生产)/应用 3个(预览、开发、生产)/应用 3个(预览、开发、生产)/应用 应用数扩展-√页面搭建√数据建模√前后端逻辑编排√工作流编排√应用...

ETL工作流快速体验

GitHub十大热门编程语言 DataWorks MaxCompute 函数计算 OSS 数据集成 数据开发 基于GitHub Archive公开数据集,通过DataWorks 数据集成 模块获取过去1小时GitHub中提交次数最的代码语言数据,在DataStudio 数据开发 模块通过函数计算...

基本概念

本文为您介绍DataWorks中,工作空间、业务流程、解决方案、组件、任务、实例、业务日期、定时时间、提交、脚本开发、资源、函数和输出名称等基本概念。工作空间 工作空间 是DataWorks管理任务、成员,分配角色和权限的基本单元。工作空间...

设计阶段

如果出现出错、变慢(运行时间明显长于历史过往平均运行时间)等可能影响最终任务完成时间的事件,则应第一时间推送报警给第一任务责任人。设置优先级:基于有限的计算资源来设置任务优先级,以保证在已有资源被充分调配利用的情况下,可以...

加工数据

进入数据开发 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据建模与开发>数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。步骤一:新建MaxCompute表 提前新建dwd_log_info_di、dws_user_info_all_di、ads_user...

采集数据

本教程以MySQL中的用户基本信息(ods_user_info_d)表及OSS中的网站访问日志数据(user_log.txt)文件,通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例,为您介绍如何通过DataWorks数据集成实现异构...

查看、删除、移动、克隆、批量操作、代码搜索API

不能重复提交,需要进入API编辑页面,在右侧的 版本管理 里,废弃前一次提交的版本 发布 发布的前置条件是已提交,因此对于未提交API,需要先执行提交,再操作发布 发布的前置条件是已提交,因此对于未提交API,需要先执行提交,再操作发布...

代码示例

缓存时间:从当前时间往前推,多长时间内的缓存是有效的。推荐设置 30 秒以上的缓存时间。超时时间:定位超时的时间。单位,秒。默认值和最小值均为 2 秒。单击 定位 按钮,得到定位结果。单击右上角 reset,重置参数。
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
大数据开发治理平台 DataWorks 云数据库 MongoDB 版 文件存储 CPFS 移动开发平台 mPaaS 云解析DNS 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用