计费方式
本文为您介绍DataWorks数据集成的计费要点和各功能模块的软件费用详情。运行数据集成任务会产生DataWorks相关费用，此外还可能其他产品费用，具体如下：DataWorks相关收费 数据集成资源组（独享数据集成资源组计费说明：包年包月，如果使用...
升级数据统计
系统（应用）升级数据统计模块展示了以版本为维度的升级过程中各项数据的统计图表。导航：系统（应用）升级数据统计 升级结果查询 该图表显示了指定版本的升级安装成功和失败的设备数量随时间变化的曲线。图表分为“累计”和“增量”两张图...
魔笔使用中A、B两人可以互相看到各自的模块吗？
问题描述 魔笔使用中A、B两人可以互相看到各自的模块吗？问题原因 同一个主账号，子账号之间是共享工作空间的。解决方案 只要是主子账号关系就可以了。
计费逻辑说明
本文为您介绍DataWorks的计费要点和各功能模块的软件费用详情。注意事项 不同规格、不同云环境（例如，公共云、金融云）的产品计费情况不同，具体请以实际使用时的费用为准。仅阿里云主账号和同时拥有 AliyunBSSOrderAccess、...
平台版本
本文简述平台版本及子模块版本的概念 平台版本 平台版本是魔笔平台的版本，魔笔支持多个平台版本，开发者创建应用时候默认会基于魔笔平台的最新版本。当魔笔发布新的特性或修复重要缺陷的时候，会发布新的平台版本，您可以根据需要升级应用...
配置定时任务
在指定的应用卡片中单击 进入设计器，默认进入主模块的应用开发页面（Mobi Studio）。在左侧功能区单击，选择 触发器 页签。在右下角单击 添加触发器，打开 添加触发器 对话框。在 添加触发器的 对话框中，选择 定时任务。在 添加定时任务 ...
个人设置
例如，更改DataStudio左侧导航栏显示的功能模块、切换开发界面的背景颜色，以及设置编辑器可进行代码错误检查、自动换行、自动保存等。进入个人设置 登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应...
配置发布API
在指定的应用卡片中单击 进入设计器，默认进入主模块的应用开发页面（Mobi Studio）。在左侧功能区单击，选择 触发器 页签。在右下角单击 添加触发器。在弹框的添加触发器选择 发布API。在 添加发布API 页面中填写相关信息，单击 确定。...
配置连接器
在指定的应用卡片中单击 进入设计器，默认进入主模块的应用开发页面（Mobi Studio）。在左侧功能区单击，单击进入 连接器 页签。单击右下角的 添加连接器，进入 添加接口 页面。在 添加接口 页面，参照下表填写相关信息。参数 说明 接口...
PAI使用引导
模型开发者通常参与以下模块：AI开发 进入工作空间后，模型开发者支持 通过 快速开始 快速上手并体验PAI的训练和部署流程，也可以 使用 智能标注（iTAG）、可视化建模（Designer）、交互式建模（DSW）、分布式训练（DLC）及 模型在线服务...
什么是物模型
例如，电暖扇产品的功能属性有 电源开关、档位（高、中、低）和 室内温度，您可以在一个模块添加前2个属性，在另一个模块添加3个属性，然后分别在不同设备端，针对不同物模型模块功能进行开发。此时，该产品下不同设备就可以实现不同功能。...
使用IntelliJ IDEA部署ECS应用到EDAS
部署多模块工程 实际工作中，大部分Maven工程都为多模块工程，各个项目模块可以独立开发，其中某些模块也可能会使用到其他模块的功能，这样的项目工程就是多模块工程。如果您的工程项目为Maven多模块工程，并且需要部署工程中的某个子模块...
产品优势
本文介绍魔笔的产品优势，供您在使用时参考。一云多端 面向全端场景提供...系统基于纯代码开发，部分模块基于魔笔平台搭建后被集成到原有系统中，实现平滑升级。魔笔作为一个开发工具，可降低简单重复事项的资源投入，快速提升整体开发效率。
采集管理概述
埋点管理：包含 事件管理、属性管理、方案管理、开发计划 功能模块。管理应用内全部业务埋点的元数据，提供按照业务方案分类管理页面埋点元数据的能力，并可以集中管理参数和公共事件。埋点验证：包含 App 验证、Web 验证、小程序验证 功能...
用户角色权限图谱
支持（基于权限）支持（基于权限）支持（基于权限）支持（基于权限）支持（基于权限）跨库查询 支持（基于权限）支持（基于权限）支持（全局可用）支持（全局可用）支持（基于权限）数据库开发 一级功能模块 二级功能模块 普通用户 安全...
设置全局Spark参数
您可参考 Spark官方文档 自定义全局Spark参数，并配置全局Spark参数的优先级是否高于指定模块内（数据开发、数据分析、运维中心）的SPARK参数。本文为您介绍如何设置全局Spark参数。背景信息 Apache Spark是用于进行大规模数据分析的引擎。...
概述
魔笔提供了开箱即用的物料和功能，绝大多数情况下，您可以十分高效和灵活...此外，物料市场中也有很多其他开发者共享出来的模块，您可根据业务需要，选择匹配您业务的模块进行引用。关于构建自定义模块，详细操作请参见 如何构建自定义模块。
入门概述
本模块将指引您快速完成一个完整的数据开发和运维操作。说明 如果您是第一次使用DataWorks，请确认已经根据 准备工作 模块的操作，准备好账号和工作空间角色等内容后，登录DataWorks控制台，单击相应工作空间后的 进入数据开发，即可进行...
数据开发概述
DataWorks数据开发（DataStudio）模块用于定义周期调度任务的开发及调度属性，与运维中心配合使用，面向各引擎（MaxCompute、Hologres、EMR等）提供可视化开发主界面，支持智能代码开发、多引擎混编工作流、规范化任务发布等能力，帮助您...
开发流程
常见的使用场景如下所示，您可以按照流程引导，使用子产品模块：云原生开发场景 区域 描述 相关文档 ① 高质量的数据集是高精度模型的基础，也是数据准备的核心目标。您可以通过数据集管理模块将本地数据、阿里云存储中的数据以及公共数据...
MaxCompute数据权限控制详情
背景信息 DataWorks预置了空间预设角色，同时提供了自定义空间角色的功能，来控制用户是否可以使用DataWorks空间级模块、是否有开发引擎项目权限。但无论预设角色还是自定义角色，都可以通过预设或手动授权的方式使角色拥有开发引擎项目的...
开发前准备：绑定数据源或集群
若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发（DataStudio）模块。绑定后，才可读取数据源或集群中的数据，并进行相关开发操作。前提条件 您需根据后续要开发和调度...
SDK包裁剪说明
模块裁剪说明 通过 开发参考 下载的SDK默认为全功能模块，包含了官网认证的所有产品能力，实际在使用的过程中，您可以根据如下说明结合您实际的业务场景，在build.gradle中进行依赖调整：#阿里云实人认证服务SDK AAR implementation files...
快速体验
数据加工 使用 DataWorks数据开发（DataStudio）模块，将日志数据通过函数正则等方式拆解为可分析字段，并与用户信息表加工汇总产出基本的用户画像数据，并提交调度系统，结合DataWorks调度参数实现周期性数据清洗操作。学习如下内容：如何...
创建AnalyticDB for PostgreSQL数据源
后续操作 数据源创建完成后，您可根据需要执行如下操作：计算任务开发与调度：DataWorks的数据开发与运维中心模块，为您提供AnalyticDB for PostgreSQL任务的开发与调度能力，若您需要基于该AnalyticDB for PostgreSQL数据源进行AnalyticDB...
创建AnalyticDB for MySQL3.0数据源
后续操作 数据源创建完成后，您可根据需要执行如下操作：计算任务开发与调度：DataWorks的数据开发与运维中心模块，为您提供AnalyticDB for MySQL3.0任务的开发与调度能力，若您需要基于该AnalyticDB for MySQL3.0数据源进行AnalyticDB for...
Trace 链路追踪
但是绝大部分时候，这些信息不能帮助开发者定位到实际的请求耗时操作，所以提供了这样的一个慢链路追踪模块，旨在帮助开发者能以更清晰的方式解决慢 HTTP 请求问题。此功能已经正式上线，欢迎大家使用并提出反馈意见。用法 I.升级@alicloud...
创建MaxCompute数据源
数据源创建完成后，您可根据需要执行如下操作：计算任务开发与调度：DataWorks的数据开发与运维中心模块，为您提供MaxCompute任务的开发与调度能力，若您需要基于该MaxCompute数据源进行MaxCompute任务开发，或周期性调度MaxCompute相关...
在工作空间创建数据源或注册集群
步骤二：将数据源绑定至数据开发（DataStudio）数据源创建完成后，若您需在当前工作空间基于该数据源执行数据开发、数据分析、或使用运维中心周期性调度运行相关任务等操作，还需将数据源绑定至当前工作空间的数据开发（DataStudio）模块。...
创建手动任务
您可以在DataWorks的数据开发（DataStudio）模块创建手动任务，并在生产环境的运维中心管理手动任务。本文为您介绍如何创建手动任务，并将手动任务发布到生产环境。使用说明 若任务不需要发布生产环境操作生产环境引擎，您可选择 新建临时...
默认工作空间内置逻辑说明
进行实际开发时，建议您创建自己的工作空间，将用于执行开发操作的项目（例如，MaxCompute、E-MapReduce、Hologres）创建为工作空间的数据源或集群，并绑定至数据开发（DataStudio）模块，详情请参见 创建工作空间、在工作空间创建数据源或...
DataWorks节点合集
DataWorks的数据开发（DataStudio）模块为您提供多种类型的节点，包括用于数据同步的数据集成节点，用于数据清洗的引擎计算节点（例如，ODPS SQL、Hologres SQL、EMR Hive），以及可对引擎计算节点进行复杂逻辑处理的通用节点（例如，可...
创建并使用MaxCompute表
代码示例 开发环境（数据开发、开发环境运维中心）执行代码 生产环境（生产环境运维中心）执行代码 访问开发项目中的开发表：select col1 from projectname_dev.tablename;使用任务执行者个人云账号访问开发表。RAM用户（子账号）执行相关...
实验介绍
数据加工 使用 DataWorks数据开发（DataStudio）模块，将日志数据通过函数正则等方式拆解为可分析字段，并与用户信息表加工汇总产出基本的用户画像数据，并提交调度系统，结合DataWorks调度参数实现周期性数据清洗操作。学习如下内容：如何...
角色管理
场景1：用户现有权限：小明已在A空间，组织级为 普通用户 角色，空间级为 开发者 角色，小明可以看到A空间下工作台所有功能模块目录，可以新建（编辑）仪表板、电子表格、数据大屏、数据源、数据集等所有功能模块。用户权限变更 组织管理员...
设置全局YARN资源队列
方式二：配置产品模块内YARN队列 数据开发（DataStudio）：对于Hive、Spark节点，可在节点编辑页面右侧导航栏的 高级设置，通过 queue 参数设置单个节点任务的YARN资源队列。数据质量：可在EMR表的分区规则中，通过 运行队列 配置单个分区...
数据接入任务
数据接入任务模块为您提供设备数据接入和数据开发跟踪管理功能。数据接入任务的界面如下图所示，界面上方为您介绍“为什么会有数据接入任务”，以及“如何完成数据接入任务”。该模块任务主要来源于：接口导入：您在“数据服务”模块开通的...
任务调试流程
调试运行单个任务 数据开发概述，在左侧导航栏的数据开发或手动业务流程模块，双击业务流程目录下的目标节点，进入该节点的编辑页面。调试运行任务。在节点编辑页面，使用节点工具栏中的运行或高级运行调试代码逻辑，也可通过快捷运行调试...
选型指导
二、资源选型 构建完整的推荐系统，需要一些相对划分独立的数据模块、算法模块、在线链路模块等，需要按照开发习惯、现有业务系统的数据架构，选择合适的资源拼装选型。基于大数据开发实践，我们建议的选型为：序号 模块/用途 云服务 1 ...
周期性调度作业概述
如果您希望周期性运行MaxCompute作业，可使用DataWorks的DataStudio开发周期性...通过 RBAC权限模型，管理DataWorks空间级模块（例如，允许用户进入数据开发执行相关开发操作）与全局模块的使用权限（例如，禁止用户访问数据保护伞模块）。
- 产品推荐
- 这些文档可能帮助您