前提条件 已完成逻辑流执行代码的开发,前、后端逻辑流的详细操作请分别参见 开发前端逻辑流操作代码 和 开发后端逻辑流操作代码。操作步骤 登录 魔笔。在顶部菜单栏选择 应用管理,在左上角搜索框中搜索目标应用。在目标应用的卡片中单击 ...
DataWorks V2.0支持双工作空间开发,隔离开发和生产环境,保证数据研发规范,减少错误代码的出现。已升级DataWorks V2.0区域 目前所有区域均升级至DataWorks V2.0版本。DataWorks V2.0版本操作差异 您可参见DataWorks V2.0系列详解视频,对...
LoRa设备:连网方式为LoRaWAN,基于LoRa通信的设备,例如智慧博物馆场景中,借助环境传感器设备,使用LoRa通信技术,监控藏品所在环境的温度、湿度、PM2.5等指标。云网关设备:物联网平台支持通过云网关接入开源的MQTT协议、JT/T 808协议和...
本文将从接入、启动和卸载三方面向您介绍使用开发小助手相关的信息。接入开发小助手 为保证功能的完整性和独立性,离线包中心(需先集成 H5 容器及离线包)功能需要以 离线包开发助手 的形式在 mPaaS 插件中单独接入,其余功能通过接入 ...
您可以创建EMR(E-MapReduce)HIVE节点,通过类SQL语句协助读写、管理存储在分布式存储系统上的大数据集的数据仓库,完成海量日志数据的分析和开发工作。前提条件 数据开发(DataStudio)中已创建业务流程。数据开发(DataStudio)基于业务...
说明 上述说明在DataWorks上的具体体现为,管理员角色和开发角色的成员,有DataWorks上大部分功能权限,有DataWorks开发环境(MaxCompute引擎开发项目)所有权限,但默认没有生产环境(MaxCompute生产项目)的操作权限。如果子账号需要在...
参数赋值逻辑详情请参见 运行,高级运行和开发环境冒烟测试赋值逻辑有什么区别。保存并运行SQL语句。在工具栏,单击 图标,保存编写的SQL语句,单击 图标,运行创建的SQL任务。(可选)冒烟测试。如果您希望在开发环境进行冒烟测试,可在...
数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作,所以您创建节点前需要先新建业务流程,操作详情请参见 创建业务流程。已创建阿里云CDH集群,并注册CDH集群至DataWorks。创建CDH相关节点并开发CDH任务前,您需要先将...
参数赋值逻辑详情请参见 运行,高级运行和开发环境冒烟测试赋值逻辑有什么区别。保存并运行SQL语句。在工具栏,单击 图标,保存编写的SQL语句,单击 图标,运行创建的SQL任务。(可选)冒烟测试。如果您希望在开发环境进行冒烟测试,可在...
Presto(即PrestoDB)是一款灵活、可扩展的分布式SQL查询引擎,支持使用标准的SQL查询语言进行大数据的交互式分析查询(Presto概述),DataWorks为您提供EMR Presto节点,便于您在DataWorks上进行Presto任务的开发和周期性调度。...
参数赋值逻辑详情请参见 运行,高级运行和开发环境冒烟测试赋值逻辑有什么区别。说明 调度参数使用详情,请参考 调度参数支持的格式。配置任务调度 如果您需要周期性执行创建的节点任务,可以单击节点编辑页面右侧的 调度配置,根据业务...
联动 为减少设计和开发人员之间的沟通成本、避免重复的控件开发工作和视觉设计,统一组件库(AntUI)聚合完成了开发和视觉工作。设计师制定规范,开发解释规范成为控件,完整的开发指南便于开发实现,形成一站式的控件体系。通过统一的命名...
本模块将指引您快速完成一个完整的数据开发和运维操作。说明 如果您是第一次使用DataWorks,请确认已经根据 准备工作 模块的操作,准备好账号和工作空间角色等内容后,登录DataWorks控制台,单击相应工作空间后的 进入数据开发,即可进行...
在DataWorks任务开发中,您可以通过创建CDH MR(MapReduce)节点处理超大规模的数据集。本文为您介绍如何在DataWorks中创建并使用CDH MR节点。前提条件 数据开发(DataStudio)中已创建业务流程。数据开发(DataStudio)基于业务流程对不同...
人工智能平台PAI的 可视化建模Designer,用于实现端到端的机器学习开发流程的可视化建模工具。DataWorks为您提供PAI Designer节点,方便您通过该算法节点载入Designer工作流,通过调度配置实现Designer工作流的周期性任务调度。前提条件 ...
工作空间是DataWorks管理任务、成员,分配角色和权限的基本单元,所有开发工作都将在具体的工作空间内完成。因此,进行任务开发前您需要先创建工作空间,本文为您介绍如何创建工作空间。前提条件 已开通DataWorks服务,详情请参见 开通...
DataWorks为您提供CDH Spark节点,便于您在DataWorks上进行Spark任务的开发和周期性调度。本文为您介绍如何创建及使用CDH Spark节点。前提条件 数据开发(DataStudio)中已创建业务流程。数据开发(DataStudio)基于业务流程对不同开发引擎...
数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作,所以您创建节点前需要先新建业务流程,操作详情请参见 创建业务流程。已创建阿里云EMR集群,并注册EMR集群至DataWorks。创建EMR相关节点并开发EMR任务前,您需要先将...
参数赋值逻辑详情请参见 运行,高级运行和开发环境冒烟测试赋值逻辑有什么区别。保存并运行SQL语句。单击工具栏的 图标,保存编写的SQL语句,单击 图标,运行创建的SQL任务。(可选)冒烟测试。如您希望在开发环境进行冒烟测试,查看调度...
本文为您介绍数据开发相关的常见问题。任务开发常见问题 引擎基于DataWorks操作的常见问题 表相关 如何可视化新建表?为什么EMR通过DataWorks可视化建表失败报错:call emr exception?如何对生产表添加字段?如何将本地数据上传到...
但是由于当前HoloStudio暂未上线环境切换功能,建议开发和生产绑定同一个DB,否则HoloStudio将无法查询生产环境的数据。最后单击 创建工作空间 即可完成创建。环境 配置项 说明 备注 开发环境 访问身份 任务执行者 无 Hologres实例名称 ...
数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作,所以您创建节点前需要先新建业务流程,操作详情请参见 创建业务流程。已创建阿里云EMR集群,并注册EMR集群至DataWroks。创建EMR相关节点并开发EMR任务前,您需要先将...
2024年01月 Web可视化开发和移动可视化开发 功能名称 功能描述 发布时间 相关文档 组件交互 动作执行模式默认 同时执行,新增 按顺序执行。2024-01-29 交互配置 2023年12月 项目管理 功能名称 功能描述 发布时间 相关文档 关联设备 支持一...
物联网平台的设备端Link SDK提供了安全隧道的软件开发包,详细内容,请参见 设备端的安全隧道。设备端目标应用 访问端远程访问设备时,期望交互的设备本地应用,例如设备本地应用中的SSHD服务。访问端URL和Token 安全隧道创建后生成的唯一...
2个EMR集群分别用于开发和生产环境。OSS用于存储实际数据。DLF用于存储管理元数据。实现的主要方式如下文所示。DLF的环境隔离 在DLF中创建两个 数据目录(catalog),一个用于存储开发环境下的元数据(dev catalog),一个用于存储生产环境...
开发者在应用的开发和发布阶段,可能会遭遇消息推送失败的问题。由于 mPaaS 平台集成了不同渠道的推送功能,当遇到问题时,建议通过控制台进行消息推送的测试。如果消息状态是 Acked,则表示 mPaaS MPS 服务端后台已经把消息推送请求发送到...
一个DataWorks工作空间对应两个数据源,可以将开发和生产环境的数据源隔离。说明 您需要分别为开发环境和生产环境创建物理隔离的数据源,才可以实现开发生产环境隔离。对应DataWorks的环境 一个数据源为DataWorks的生产环境。两个数据源中...
扩展程序参数配置 DataWorks支持在扩展程序开发过程中使用参数来提高扩展程序开发和应用效率,在扩展程序代码开发时,将需要应用的参数添加至此处即可。您可直接使用DataWorks提供的典型应用场景的内置参数,也可自定义参数。支持添加多个...
背景信息 为了供您方便快捷的使用MaxCompute SQL进行数据分析和数据加工,MaxCompute提供了丰富的内建函数,以便您在日常开发和分析中使用,对于内建函数,您无需关注函数内部的实现逻辑,可直接进行调用。您可以根据需要从不同维度快速...
以下简称 CDH)与CDP(Cloudera Data Platform,以下简称CDP)集群对接的能力,在保留CDH集群或CDP集群作为存储和计算引擎的前提下,您可以使用DataWorks的任务开发、调度、数据地图(元数据管理)和数据质量等一系列的数据开发和治理功能...
说明 Hologres在标准DataWorks工作空间分开发环境和生产环境,但由于当前HoloStudio暂不支持环境切换,导致生产环境的数据在HoloStudio不可查询,建议开发和生产绑定同一个DB。已有工作空间 如果您已创建DataWorks工作空间,可以直接使用该...
前提条件 您需根据后续要开发和调度的任务类型,提前创建好对应的数据源或集群。该数据源或集群需参考本文绑定至数据开发(DataStudio)。数据开发(DataStudio)支持绑定的数据源或集群如下:创建MaxCompute数据源 创建Hologres数据源 ...
解决方案 数字海南选择了 mPaaS 作为海南省“码上办事”App 的开发和运营平台。具体来说 mPaaS 提供了以下能力支撑“码上办事”业务:业务快速开发:基于 mPaaS H5、小程序开发能力,1 个月内快速开发上线数百项业务,涵盖政府办事、公共...
扩展能力 自定义页面组件 如下场景可能需要自定义页面组件:您可以为自己的业务定制开发和维护一组标准的业务组件,以实现业务内的组件复用和组件标准化。通用组件无法满足业务需要时,您可以通过自定义页面组件满足特定的样式规范、交互...
工作空间是DataWorks中进行任务开发和成员权限管理的基本单元。本文将为您介绍工作空间的概念、类型及基本操作。工作空间概述 所有开发工作都将在DataWorks自定义的工作空间内完成,一个工作空间支持绑定多个类型的计算引擎实例,例如:...
但是由于当前HoloStudio未上线环境切换功能,建议开发和生产绑定同一个DB,否则HoloStudio将无法查询生产环境的数据。环境 配置项 说明 备注 标题 实例显示名称 自定义 无 生产环境 访问身份 主账号/子账号 DataWorks任务提交调度后,作为...
您可以参考本文完成组件接口的开发和使用。整个过程主要分为三步:获取业务组件数据结构。业务组件的数据结构和该组件的 mock.json 文件除去可选参数字段外,其余字段均保持一致。编写接口。表单提交接口 修改组件后,会调用该接口保存组件...
DataWorks的AnalyticDB for MySQL节点可进行AnalyticDB for MySQL任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用AnalyticDB for MySQL节点进行任务开发的主要流程。前提条件 已购买相应版本服务。购买DataWorks标准...
支持创建数据源时选择是否需要对数据源开启SSL认证,如果Hologres实例开启了传输加密,您可以在创建Hologres数据源时开启SSL认证,但开启认证后的Hologres数据源不能用于数据开发和调度。仅支持使用独享数据集成资源组、独享调度资源组运行...
详情请参考 数据源开发和生产环境隔离。调度参数 调度参数是DataWorks在调度场景下支持自动根据业务时间替换为具体值的参数,节点中使用调度参数后,在调度场景下,可以实现将对应业务时间的业务数据动态写入对应的时间分区中。详情请参见 ...