创建CDH Spark节点

DataWorks为您提供CDH Spark节点,便于您在DataWorks上进行Spark任务的开发和周期性调度。本文为您介绍如何创建及使用CDH Spark节点。前提条件 数据开发(DataStudio)中已创建业务流程。数据开发(DataStudio)基于业务流程对不同开发引擎...

交通

不能跨平台 mPaaS 组件化接入,会原生开发和小程序语法就可以轻松上手,小程序部分可以跨平台 有一定学习成本 客户价值 利用小程序完成 App 重构:点货网 App 基于 mPaaS 小程序,已成功实现从欢迎页启动后自动进入小程序,并直接调用...

权限管理与规范化数据开发

详情请参考 数据源开发和生产环境隔离。调度参数 调度参数是DataWorks在调度场景下支持自动根据业务时间替换为具体值的参数,节点中使用调度参数后,在调度场景下,可以实现将对应业务时间的业务数据动态写入对应的时间分区中。详情请参见 ...

创建并管理数据源

例如,执行离线同步任务时,可由运行环境控制任务所访问的数据库地址(配置生产、开发数据源对应不同数据库),使开发环境生产环境的数据隔离。说明 简单模式工作空间仅拥有一个环境,无法做到开发、生产隔离。关于工作空间模式的介绍,...

魔笔开发需要掌握什么编程语言呢?

问题描述 魔笔开发需要掌握什么编程语言?具备哪些编程的能力?代码平台和开发语言关系大吗?问题原因 低代码平台和开发语言关系不大的。解决方案 组件化需要掌握 js语言,其他的语言是不相关。

DataWorks V2.0

DataWorks V2.0支持双工作空间开发,隔离开发和生产环境,保证数据研发规范,减少错误代码的出现。已升级DataWorks V2.0区域 目前所有区域均升级至DataWorks V2.0版本。DataWorks V2.0版本操作差异 您可参见DataWorks V2.0系列详解视频,对...

基本概念

其中,在数据开发中绑定MaxCompute、Hologres、AnalyticDB for PostgreSQL、AnalyticDB for MySQL 3.0、ClickHouse、E-MapReduce和CDH/DCP数据源后,即可在工作空间开发和调度引擎任务。业务流程 针对业务实体,抽象出 业务流程 的概念,...

开发流程

详细操作请参见 开发前端逻辑流操作代码 开发后端逻辑流操作代码。步骤三、上传构建产物 返回魔笔IDE的逻辑流编辑界面,在逻辑流物料面板中单击上传构建产物,选择构建产物并上传。详细操作请参见 上传构建产物。开发完成自定义逻辑流...

金融

项目背景 为满足天津信托未来公司财富管理业务异地化、线上化、专业化发展,帮助客户构建从 0 到 1 的财富管理 App 系统,实现更加高效、便捷、安全的线上服务,提升客户满意度和品牌忠实度,并提升其互联网移动技术开发和运营管理能力。...

空间级模块权限管控

开发 该角色负责数据开发和维护工作,即在 数据开发 模块进行节点的开发与维护。说明 如果需要进行数据开发,您需要授予RAM用户开发或空间管理员角色权限。如果需要拥有发布权限,您需要授予RAM用户运维或空间管理员角色权限。运维 该角色...

如何分配开发任务

如果要取消某个成员的开发权限,则只需要在开发者管理操作中,删除已分配的成员即可,他之前对该应用的代码和开发部署权限也相应被回收。开发成员登录 开发成员使用自己的团队账号(可以是独立的阿里云账号,也可以是某个子账号,取决于该...

DataWorks On CDP/CDH使用说明

您可在DataWorks中注册CDH及CDP集群,基于业务需求进行相关任务开发、调度、数据地图(元数据管理)和数据质量等一系列的数据开发和治理操作。使用限制 仅支持使用独享调度资源组运行CDH或CDP集群任务。仅支持在DataWorks注册CDH5.16.2、...

新功能发布记录

2024年01月 Web可视化开发和移动可视化开发 功能名称 功能描述 发布时间 相关文档 组件交互 动作执行模式默认 同时执行,新增 按顺序执行。2024-01-29 交互配置 2023年12月 项目管理 功能名称 功能描述 发布时间 相关文档 关联设备 支持一...

创建AnalyticDB for MySQL3.0数据源

方式二:通过连接串模式创建数据源 使用该模式创建的数据源不支持用于数据开发和调度,只能用于数据同步。创建数据源配置如下。配置基础信息。参数 说明 数据源名称 定义数据源在DataWorks的名称,名称必须唯一。配置模式 选择连接串模式。...

如何使用解决方案开发项目

该页面包含开发者本人发布的授权解决方案,仅支持开发者本人被授权开发者使用。使用公开解决方案创建项目。在 解决方案市场 页面,移动鼠标到目标解决方案上方,单击 使用。您可单击 预览,查看项目详情。在 使用解决方案新建 对话框,...

平台安全诊断

您可以根据 数据源开发和生产环境隔离 进行评估与修改数据源。DataWorks工作空间数据源 此安全检测项为你扫描哪些标准模式空间下的数据源生产、开发环境配置相同。数据源访问模式 说明 DataWorks支持通过角色模式访问OSS数据源,该模式较...

创建EMR Spark节点

DataWorks为您提供EMR Spark节点,便于您在DataWorks上进行Spark任务的开发和周期性调度。本文为您介绍如何创建EMR Spark节点,并通过详细的应用示例,为您介绍EMR Spark节点的功能。背景信息 本节点支持使用OSS REF方式引用OSS资源,详情...

快速入门

一、YunID SDK简介 云ID(YunID)包含两部分服务:设备映射服务(DIS)账号映射服务(IAS)。设备映射服务的SDK已经内置于系统应用及其他SDK(如:OTA SDK)中,租户不需要单独集成。账号映射服务的SDK介绍见下文。二、账号映射服务的SDK...

测试分析方案报告

指标名称 字段来源 业务规则 系统架构分析 概括当前项目数据开发总体的流程范围。测试过程管理 测试版本控制 代码从测试环境发布至开发环境后,需描述此部分。项目交付测试通过后,每天上午9点、下午3点接受开发提交的新版本,其他时间...

创建CDH Hive节点

参数赋值逻辑详情请参见 运行,高级运行和开发环境冒烟测试赋值逻辑有什么区别。保存并运行SQL语句。在工具栏,单击 图标,保存编写的SQL语句,单击 图标,运行创建的SQL任务。(可选)冒烟测试。如果您希望在开发环境进行冒烟测试,可在...

创建CDH Presto节点

参数赋值逻辑详情请参见 运行,高级运行和开发环境冒烟测试赋值逻辑有什么区别。保存并运行SQL语句。在工具栏,单击 图标,保存编写的SQL语句,单击 图标,运行创建的SQL任务。(可选)冒烟测试。如果您希望在开发环境进行冒烟测试,可在...

操作权限控制

说明 上述说明在DataWorks上的具体体现为,管理员角色和开发角色的成员,有DataWorks上大部分功能权限,有DataWorks开发环境(MaxCompute引擎开发项目)所有权限,但默认没有生产环境(MaxCompute生产项目)的操作权限。如果子账号需要在...

上传构建产物

前提条件 已完成逻辑流执行代码的开发,前、后端逻辑流的详细操作请分别参见 开发前端逻辑流操作代码 开发后端逻辑流操作代码。操作步骤 登录 魔笔。在顶部菜单栏选择 应用管理,在左上角搜索框中搜索目标应用。在目标应用的卡片中单击 ...

创建CDH Impala节点

参数赋值逻辑详情请参见 运行,高级运行和开发环境冒烟测试赋值逻辑有什么区别。保存并运行SQL语句。在工具栏,单击 图标,保存编写的SQL语句,单击 图标,运行创建的SQL任务。(可选)冒烟测试。如果您希望在开发环境进行冒烟测试,可在...

创建EMR Hive节点

您可以创建EMR(E-MapReduce)HIVE节点,通过类SQL语句协助读写、管理存储在分布式存储系统上的大数据集的数据仓库,完成海量日志数据的分析和开发工作。前提条件 数据开发(DataStudio)中已创建业务流程。数据开发(DataStudio)基于业务...

创建CDH MR节点

在DataWorks任务开发中,您可以通过创建CDH MR(MapReduce)节点处理超大规模的数据集。本文为您介绍如何在DataWorks中创建并使用CDH MR节点。前提条件 数据开发(DataStudio)中已创建业务流程。数据开发(DataStudio)基于业务流程对不同...

创建并使用PAI Designer

人工智能平台PAI的 可视化建模Designer,用于实现端到端的机器学习开发流程的可视化建模工具。DataWorks为您提供PAI Designer节点,方便您通过该算法节点载入Designer工作流,通过调度配置实现Designer工作流的周期性任务调度。前提条件 ...

创建EMR Shell节点

参数赋值逻辑详情请参见 运行,高级运行和开发环境冒烟测试赋值逻辑有什么区别。说明 调度参数使用详情,请参考 调度参数支持的格式。配置任务调度 如果您需要周期性执行创建的节点任务,可以单击节点编辑页面右侧的 调度配置,根据业务...

创建工作空间

工作空间是DataWorks管理任务、成员,分配角色权限的基本单元,所有开发工作都将在具体的工作空间内完成。因此,进行任务开发前您需要先创建工作空间,本文为您介绍如何创建工作空间。前提条件 已开通DataWorks服务,详情请参见 开通...

创建并使用PAI DLC节点

参数赋值逻辑详情请参见 运行,高级运行和开发环境冒烟测试赋值逻辑有什么区别。保存并运行SQL语句。单击工具栏的 图标,保存编写的SQL语句,单击 图标,运行创建的SQL任务。(可选)冒烟测试。如您希望在开发环境进行冒烟测试,查看调度...

创建EMR Impala节点

参数赋值逻辑详情请参见 运行,高级运行和开发环境冒烟测试赋值逻辑有什么区别。说明 调度参数使用详情,请参考 调度参数支持的格式。保存并运行SQL语句。在工具栏,单击 图标,保存编写的SQL语句,单击 图标,运行创建的SQL任务。编辑 ...

数据开发常见问题

本文为您介绍数据开发相关的常见问题。任务开发常见问题 引擎基于DataWorks操作的常见问题 表相关 如何可视化新建表?为什么EMR通过DataWorks可视化建表失败报错:call emr exception?如何对生产表添加字段?如何将本地数据上传到...

创建EMR Spark SQL节点

参数赋值逻辑详情请参见 运行,高级运行和开发环境冒烟测试赋值逻辑有什么区别。说明 调度参数使用详情,请参考 调度参数支持的格式。保存并运行SQL语句。在工具栏,单击 图标,保存编写的SQL语句,单击 图标,运行创建的SQL任务。编辑 ...

创建并管理工作空间

在 管理中心>工作空间 页面对指定工作空间的属性进行管理配置,并为工作空间绑定MaxCompute、E-MapReduce等类型的计算引擎,用于进行后续开发操作。本文为您介绍工作空间的基本操作。操作入口介绍 工作空间各操作说明及入口如下表所示。...

服务条款

欢迎您申请试用云开发平台服务 在您申请试用阿里云云开发平台服务之前,请您仔细阅读 www.aliyun.com 网站上公布的相关规范、规则使用流程以及阿里云云开发平台免费试用服务协议的全部内容,特别是免除或者限制责任的条款、争议解决...

关于开发小助手

开发小助手 DevHelper 提供了常用的辅助开发工具 mPaaS 专用辅助工具,该工具集通过 mPaaS 插件提供给开发者。在将开发小助手接入开发工程后,您就可以使用开发小助手进行调试、帮助开发。在应用中,开发小助手以悬浮窗的形式出现,在...

准备环境

步骤一:创建OSS Bucket 本教程需要您创建一个OSS Bucket,后续会将用户信息和网站访问日志信息同步到OSS Bucket中,用于数据建模和数据分析。登录 OSS控制台。在左侧导航栏,单击 Bucket列表,在Bucket列表页面,单击 创建Bucket。在 创建...

下线节点

如何恢复已下线节点 报错:请先在发布中心把文件${filename}发布到生产环境或在发布中心取消发布 报错:节点存在子节点,导致任务删除或下线失败 如何下线节点 如果您使用的是标准模式工作空间,则开发环境生产环境隔离,在DataWorks的...

Java SDK使用说明

物联网平台提供的Java SDK,可帮助开发人员通过Java程序更便捷...您可以从Java 官方网站下载,并按说明安装Java开发环境。安装IoT Java SDK。访问Apache Maven 官网 下载Maven软件。添加Maven项目依赖。最新版IoT Java SDK的Maven依赖坐标:!...

概述

迁移助手可以帮您快速复制DataWorks上不同的版本、主账号、地域工作空间中的开发成果。...隔离开发环境生产环境 当开发环境生产环境的网络完全隔离后,您可以通过迁移助手,导出开发环境中已完成开发的任务至生产环境。
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 移动开发平台 mPaaS 商标服务 域名 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用