创建业务流程
完成创建后，您可以利用数据开发功能，对工作空间的数据进行深入分析和计算。前提条件 开始本操作前，请确保您已经在工作空间中准备好业务数据表 bank_data 和其中的数据，以及结果表 result_table。详情请参见 建表并上传数据。背景信息 ...
数据开发概述
数据开发包括编码研发和规范建模。编码研发用于构建计算任务，例如创建SQL代码任务、Shell任务、Python任务、MR任务和Spark任务；规范建模用于构建逻辑化的数据模型。前提条件 若需进行实时开发，需已购买实时研发增值服务并且当前租户已...
使用MaxCompute独享Tunnel进行数据同步
为满足业务增长对传输资源的更高要求，数据集成的同步任务默认使用独享资源组，可为您提供更好的数据同步稳定性和同步的并发数。本文为您介绍如何使用MaxCompute独享数据传输资源进行数据同步。注意事项 若在配置MaxCompute数据源时配置了 ...
发布任务
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。发布任务。检查通过的文件变更操作可在 任务发布>创建发布包 界面将操作发布至生产环境，有以下两种发布方式可选：单个...
发布模型至引擎
模型创建成功后，您需将维度表、明细表、汇总表、应用表通过发布操作物化...后续步骤 模型发布至目标引擎后，您可进入DataWorks的数据开发页面，基于该汇总表进行相关的数据开发操作。数据开发的功能介绍，详情请参见 数据开发界面功能介绍。
绑定交互式分析实例
进入DataWorks工作间之后，单击左上角的 图标，选择 全部产品>数据开发与运维>HoloStudio，进入HoloStudio开发界面。进入HoloStudio后，在 PG管理 单击 刷新，即可看到已成功绑定DB，之后您可以开始使用HoloStudio开发。选择已有工作空间...
创建并使用PAI Designer
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。右键单击目标业务流程，选择 新建节点>算法>PAI Designer。在 新建节点 对话框中输入节点 名称，并选择 路径，单击 ...
JSON数据从OSS迁移至MaxCompute
登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。在 数据开发 页面，鼠标悬停至 图标，单击 新建表>表。在 新建表 对话框中，选择相应的 路径，输入 ...
Kafka数据迁移MaxCompute最佳实践
本文以 select*from testkafka 为例，具体步骤如下：登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。在 临时查询 面板，右键单击 临时查询，选择 ...
创建EMR表
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。鼠标悬停至 图标，单击 新建表>EMR>表。您也可以找到相应的业务流程，右键单击 EMR，单击 新建表。在 新建表 对话框中...
元数据采集
管理中心-注册开源集群 自动启动采集 是 实时 实时 实时 Hologres 数据开发-绑定数据源 手动启动采集 是 取决于自定义采集计划 不支持 实时 AnalyticDB for PostgreSQL 数据开发-绑定数据源 手动启动采集 是 取决于自定义采集计划 不支持 ...
MaxCompute数据访问权限控制
如果需要跨项目操作开发表或生产表，子账号需要在 安全中心 发起申请，待审批通过后，便可在数据开发界面对表进行相关操作。数据访问权限管控流程 数据访问控制功能支持您进行 权限申请、权限审批、权限审计 的操作，还支持您查看 权限申请...
创建AnalyticDB for MySQL3.0数据源
若地域不一致，则只能创建为跨地域的数据源，此类数据源无法在DataWorks的数据开发（DataStudio）模块绑定，即无法用于数据开发或周期性调度任务，仅可进行数据同步任务。已购买所需的DataWorks资源组并完成资源组配置。AnalyticDB for ...
创建AnalyticDB for PostgreSQL数据源
若地域不一致，则只能创建为跨地域的数据源，此类数据源无法在DataWorks的数据开发（DataStudio）模块绑定，即无法用于数据开发或周期性调度任务，仅可进行数据同步任务。已购买所需的DataWorks资源组并完成资源组配置。AnalyticDB for ...
创建并管理维表
如果使用其它类型的字段，无法使用维表创建，请在 数据开发 页面执行DDL语句创建表。详情请参见 标准的建表语句。创建维表 数据分析概述。在数据分析页面的左侧菜单栏，单击 图标进入 维表 页面。在 维表 页面，单击 新建维表 下的 图标。...
一键同步MaxCompute表结构
也可以将该命令语句在数据开发中执行，并前往调度，实现MaxCompute表新增后Hologres外表也自动新增，详情见 Hologres开发：周期性调度。说明 Hologres只能加速查询MaxCompute的内表，不能加速查询MaxCompute的外表和View。操作步骤 登录 ...
创建项目
DataWorks的数据开发模块支持多人协同开发，所有本项目的成员都可以查看任务代码，且有编辑权限的成员都可以进行修改编辑。因此，无法很好地保密一些核心的敏感度高的代码。有类似高保密性的任务及数据，可以由单独项目的固定成员进行开发...
风险识别管理（旧版）
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。单击左上方的 图标，选择 全部产品>数据治理>数据保护伞。单击 立即体验，默认进入数据保护伞的 首页。单击左侧导航栏...
任务调度属性配置概述
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。进入调度配置页面。在数据开发（DataStudio）界面，您需找到目标节点，进入该节点的编辑页面。单击节点编辑页面右侧...
归并节点
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。鼠标悬停至 图标，单击 新建节点>通用>归并节点。在 新建节点 对话框中，输入节点 名称，并选择 路径。单击 确认。定义...
创建和使用EMR资源
DataWorks支持可视化创建EMR（E-MapReduce）JAR、EMR（E-MapReduce）FILE资源，用于上传提交自定义函数或开源MR示例源码作为资源，便于EMR 计算节点的数据开发过程中引用。本文为您介绍如何创建资源，并上传提交资源，为资源的使用做好前期...
批量操作
操作步骤 登录DataWorks控制台，进入 数据开发 页面后，在顶部的快捷操作按钮中单击 批量操作 按钮，即可打开批量操作页面。批量修改。在 批量操作 页面中，您可以在顶部页签中选择对 节点、资源 或者 函数 进行批量处理。您可以在页签中的...
HTTP触发器节点
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。在 数据开发 页面，鼠标悬停至 图标，单击 新建节点>通用>HTTP触发器。您也可以打开相应的业务流程，右键单击 通用，...
空间管理员职责
数据开发：仅开发角色和空间管理员角色可以在数据开发进行具体的开发工作。在设置工作空间的级别时，您需要首先选择设置调度引擎执行任务时，使用 阿里云主账号 还是 阿里云子账号 执行任务。如果设置有误，权限体系会被破坏。阿里云主账号...
无效问题添加白名单
登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。单击顶部菜单栏左侧的 图标，选择 全部产品>数据治理>数据治理中心。单击顶部菜单栏的 治理工作台，...
创建EMR函数
新建EMR资源详情可参考文档：创建和使用EMR资源 操作步骤 进入 数据开发 页面。登录 DataWorks控制台。在左侧导航栏，单击 工作空间列表。选择工作空间所在地域后，单击相应工作空间后的 快速进入>数据开发。新建业务流程，详情请参见 创建...
引用SQL组件
您可通过创建数据开发（DataStudio）的SQL组件节点使用组件，基于组件快速新建数据处理节点，提高开发效率。本文为您介绍如何引用组件。前提条件 已准备所需使用的组件，详情请参见 定义SQL组件。已创建SQL组件节点，详情请参见 创建并管理...
概述
通过使用树莓派（Raspberry Pi 4）、DHT11温湿度传感器设备和物联网应用开发（IoT Studio）平台，构建一个服务器机房的实时动态环境温湿度检测系统。...分析温湿度时序数据 开发数据服务API 展示机房温湿度数据。开发温度告警服务。
创建并使用PAI DLC节点
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。右键单击目标业务流程，选择 新建节点>算法>PAI DLC。在 新建节点 对话框输入节点 名称，单击 确认，完成节点创建。...
创建Hologres数据源
数据源创建完成后，您可根据需要执行如下操作：计算任务开发与调度：DataWorks的数据开发与运维中心模块，为您提供Hologres任务的开发与调度能力，若您需要基于该Hologres数据源进行Hologres任务开发，或周期性调度Hologres相关任务，需先...
查看数据风险（新版）
进入数据风险 登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。单击左上方的 图标，选择 全部产品>数据治理>数据保护伞，单击 立即体验，进入数据保护伞。说明 若阿里云...
账单数据订阅及查询分析
DataWorks及MaxCompute：DataWorks基于MaxCompute等大数据引擎，支持您在线进行SQL分析、业务洞察、编辑和分享数据，以及将查询结果保存为可视化图表卡片，快速搭建可视化数据报告。订阅账单数据后，用户中心会将相关账单数据同步至指定...
大数据安全治理的难点
流转 大数据系统通常是端到端的一整套数据开发和治理服务，不仅要采集数据、加工数据，更要将数据提供给业务方使用。因此，其存在错综复杂的数据流转链路，包括但不限于即席查询链路、离线传输链路、实时传输链路、数据服务API链路、其他...
创建数据脱敏规则
背景信息 DataWorks的脱敏场景分为静态脱敏和动态脱敏：动态脱敏：包括 数据开发/数据地图展示脱敏、数据分析展示脱敏、MaxCompute引擎层脱敏、Hologres引擎层脱敏 等场景。静态脱敏：指数据集成静态脱敏场景。各场景的详细介绍，请参见 ...
构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
导出、分享和下载电子表格
单击页面左上方的 图标，选择 全部产品>数据开发与运维>DataStudio（数据开发）。插入数据至已有表或新建MaxCompute并插入数据。将数据插入MaxCompute表（insert overwrite）如果您选择的插入模式为 将数据插入MaxCompute表（insert ...
一键同步MaxCompute数据
进入 数据开发 页面，鼠标悬停至顶部菜单栏的 图标。单击 一键MaxCompute数据同步。在 新建节点 对话框中，输入 节点名称，并选择 目标文件夹 和 数据库。单击 提交。在编辑节点页面，配置各项参数。参数 描述 外部表来源 已有外部表：表示...
一键上传本地文件
进入 数据开发 页面，鼠标悬停至顶部菜单栏的 图标。单击 一键本地上传文件。在 一键本地文件上传 对话框中，配置各项参数。参数 描述 目标库 Hologres的数据库名称。目标schema 当前数据库的Schema名称。如果您没有新建Schema，则只能选择...
加工数据
进入数据开发 登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。步骤一：新建MaxCompute表 提前新建dwd_log_info_di、dws_user_info_all_di、ads_user...
创建Aliyun HBase数据源
如果您使用的是云数据库HBase，在对接Dataphin进行数据开发时，您需要先完成Aliyun HBase数据源的创建。更多信息，请参见 什么是云数据库HBase。前提条件 若您需在Dataphin中创建基于阿里云产品的数据源，创建数据源前，需确保Dataphin的IP...
- 产品推荐
- 这些文档可能帮助您