数据治理中心概述
在进行数据开发前，可通过检查项对数据开发功能相关的约束进行检查，当检查出存在不符合约束规范的内容时，系统会生成影响开发流程正常执行的问题事件。您可基于该事件处理暴露的问题，以便数据开发流程可以正常执行。治理项检测。用于提交...
概述
EMR数据开发于2022年2月21日停止功能更新，2023年9月30日停止全面支持。如果您在2022年2月21日21点前未使用过数据开发功能，推荐您通过EMR Workflow进行...您也可以迁移到大数据开发治理平台DataWorks，详情请参见 EMR数据开发停止更新公告。
技术架构选型
在数据模型设计之前，您需要首先完成技术架构的选型。本教程中使用阿里云大数据产品MaxCompute配合...MaxCompute作为整个大数据开发过程中的离线计算引擎。DataWorks则包括数据开发、数据质量、数据安全、数据管理等在内的一系列功能。
EMR数据开发停止更新公告
2022年2月21日21点起，E-MapReduce（简称EMR）数据开发功能停止更新，进入维护状态，会影响创建项目、新建和运行作业、工作流、数据开发运维等功能。如果您还在使用数据开发功能，请尽快迁移到DataWorks构建数据开发平台。本文为您介绍数据...
EMR Studio概述
EMR Studio是E-MapReduce提供的开源大数据开发套件，包含Apache Zeppelin、Jupyter Notebook和Apache Airflow等开源组件。能够无缝关联EMR集群（EMR on ECS和EMR on ACK）的计算引擎提交任务，并提供了交互式开发、任务调度和任务监控等...
DataWorks快速入门指引
DataWorks基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎，为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台，为了便于新用户快速了解DataWorks的数据开发治理操作全流程，DataWorks为您提供了...
创建解决方案
背景信息 DataWorks对数据开发模式进行全面升级，按照业务种类组织相关的不同类型的节点，让您能够更好地以业务为单元、连接多个业务流程进行开发。DataWorks通过 工作空间>解决方案>业务流程 三级结构，全新定义开发流程，提升开发体验：...
相关的云服务
DataWorks作为阿里云一站式大数据开发与治理平台，通常会与计算引擎产品联合使用，此外使用DataWorks进行数据集成时通常联合进行数据传输的数据源产品一起使用。本文为您介绍典型场景下，使用DataWorks时通常会使用到的其他云产品。计算...
流程管控
DataWorks提供了全链路的数据开发治理能力，为您提供了统一的数据开发治理流程，同时也支持您在DataWorks的默认流程上基于自己的业务需求在关键的流程节点进行流程管控。本文为您介绍DataWorks在数据开发过程中支持的流程管控能力。背景...
开发管控：管理者
作为工作空间的管理者，在使用数据开发（DataStudio）时，您可以针对用户的开发行为实施有效的管控措施，进行开发流程、数据安全、审计等相关操作，本文将帮助您快速掌握DataStudio的相关功能，实现对数据开发过程的有效管控。背景信息 ...
准备环境
前提条件 大数据开发治理平台DataWorks：购买DataWorks，详情请参见 购买指引。说明 因本示例提供的数据资源都在华东2（上海），建议购买时选择地域为华东2（上海）。对象存储OSS：已开通OSS服务，具体步骤，请参见 开通OSS服务。步骤一：...
实现开发生产等多套环境隔离
使用DataWorks进行大数据开发时，支持对开发、测试、生产等环境进行隔离，当您联合使用了其他阿里云产品时，也可根据环境隔离诉求进行对应业务的环境设置与隔离，本文以DataWorks联合EMR、OSS等产品为例，为您介绍如何实现开发生产等多套...
多场景最佳实践，立即探索无影的无限可能
无影云电脑（专业版）有着丰富的应用场景，可广泛地用于具有高数据安全管控、高性能计算等要求的安全办公、远程办公、临时云电脑、软件开发、专业制图设计和外呼中心等场景。本文介绍 无影云电脑（专业版）典型的使用场景以及应对不用的...
支持的云服务
为RAM用户授予无影云电脑系统权限策略 操作审计 操作审计 帮助您监控并记录阿里云账号的活动，包括通过阿里云控制台、OpenAPI、开发者工具对云上产品和服务的访问和使用行为。操作审计 监控并记录您的阿里云账号在使用 无影云电脑 时的各类...
服务条款
或为披露方所有的，或转移至该披露方的，对该披露方业务有商业价值的信息（包括但不限于有关商业秘密、电脑程序、设计技术、专有技术、工艺、数据、业务和产品开发计划），与该披露方业务有关的客户的信息及其他信息，或该披露方从他方收到...
创建Log Service数据源
在引入Log Service的业务数据至Dataphin中进行数据开发的场景中，您需要先创建Log Service数据源。本文为您介绍如何创建Log Service类型的数据源。背景信息 Log Service即阿里云日志服务，如果您使用的是阿里云日志服务，在对接Dataphin...
创建Log Service数据源
在引入Log Service的业务数据至Dataphin中进行数据开发的场景中，您需要先创建Log Service数据源。本文为您介绍如何创建Log Service类型的数据源。背景信息 Log Service即阿里云日志服务，如果您使用的是阿里云日志服务，在对接Dataphin...
创建DataHub数据源
背景信息 DataHub即阿里云流式数据服务DataHub，如果您使用的是阿里云流式数据服务DataHub，在对接Dataphin进行数据开发时，您需要先完成DataHub数据源的创建。更多DataHub信息，请参见 产品概述。权限说明 Dataphin仅支持 超级管理员、...
创建Aliyun HBase数据源
如果您使用的是云数据库HBase，在对接Dataphin进行数据开发时，您需要先完成Aliyun HBase数据源的创建。权限说明 仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。操作步骤 在Dataphin首页，单击顶部菜单栏的 ...
创建Tablestore数据源
如果您使用的是阿里云Tablestore，在对接Dataphin进行数据开发或将Dataphin的数据写入至Tablestore的场景中，您需要先完成Tablestore数据源的创建。权限说明 仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。...
创建SAP HANA数据源
如果您使用的是SAP HANA，在对接Dataphin进行数据开发或将Dataphin的数据导出至SAP HANA场景中，您需要先完成SAP HANA数据源的创建。更多SAP HANA信息，请参见 SAP HANA官网。权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块架构...
创建DataHub数据源
背景信息 DataHub即阿里云流式数据服务DataHub，如果您使用的是阿里云流式数据服务DataHub，在对接Dataphin进行数据开发时，您需要先完成DataHub数据源的创建。更多DataHub信息，请参见 DataHub的产品概述。使用限制 Dataphin仅支持超级...
创建RocketMQ数据源
背景信息 RocketMQ即阿里云消息队列RocketMQ版，如果您使用的是阿里云消息队列RocketMQ版，在对接Dataphin进行数据开发时，您需要先完成RocketMQ数据源的创建。更多信息，请参见 什么是消息队列RocketMQ版。权限说明 仅支持 超级管理员、...
MaxCompute数据访问权限控制
如果需要跨项目操作开发表或生产表，子账号需要在 安全中心 发起申请，待审批通过后，便可在数据开发界面对表进行相关操作。数据访问权限管控流程 数据访问控制功能支持您进行 权限申请、权限审批、权限审计 的操作，还支持您查看 权限申请...
创建Vertica数据源
如果您使用的是Vertica，在对接Dataphin进行数据开发时，您需要先完成Vertica数据源的创建。更多Vertica信息，请参见 Vertica官网。权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。操作步骤 ...
创建Tablestore数据源
如果您使用的是阿里云Tablestore，在对接Dataphin进行数据开发或将Dataphin的数据写入至Tablestore的场景中，您需要先完成Tablestore数据源的创建。更多信息，请参见 什么是表格存储。权限说明 仅支持 超级管理员、数据源管理员、板块架构...
创建IBM DB2数据源
如果您使用的是IBM DB2，在对接Dataphin进行数据开发时，您需要先完成IBM DB2数据源的创建。更多IBM DB2信息，请参见 IBM DB2官网。权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。操作步骤 ...
创建Vertica数据源
如果您使用的是Vertica，在对接Dataphin进行数据开发时，您需要先完成Vertica数据源的创建。更多Vertica信息，请参见 Vertica官网。权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。操作步骤 ...
创建Aliyun HBase数据源
如果您使用的是云数据库HBase，在对接Dataphin进行数据开发时，您需要先完成Aliyun HBase数据源的创建。更多信息，请参见 什么是云数据库HBase。前提条件 若您需在Dataphin中创建基于阿里云产品的数据源，创建数据源前，需确保Dataphin的IP...
创建OSS数据源
如果您使用的是阿里云对象存储OSS，在对接Dataphin进行数据开发或将Dataphin的数据写入至OSS时，您需要先完成OSS数据源的创建。更多OSS信息，请参见 什么是对象存储OSS。权限说明 Dataphin仅支持超级管理员、数据源管理员、板块架构师、...
创建OceanBase数据源
如果您使用的是阿里云数据库OceanBase，在对接Dataphin进行数据开发或将Dataphin数据写入至OceanBase时，您需要先完成OceanBase数据源的创建。更多OceanBase信息，请参见 什么是OceanBase。操作步骤 请参见 数据源管理入口，进入 数据源...
新建Amazon S3数据源
如果您使用的是Amazon S3，在对接Dataphin进行数据开发或将Dataphin的数据写入至Amazon S3时，您需要先完成Amazon S3数据源的创建。更多Amazon S3信息，请参见 什么是Amazon S3。权限说明 仅支持具备新建数据源权限的账号进行新建。更多...
创建PolarDB-X数据源
如果您使用的是PolarDB-X，在对接Dataphin进行数据开发时，您需要先完成PolarDB-X数据源的创建。更多PolarDB-X信息，请参见 什么是云原生分布式数据库PolarDB-X。权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理...
创建OceanBase数据源
如果您使用的是阿里云数据库OceanBase，在对接Dataphin进行数据开发或将Dataphin数据写入至OceanBase时，您需要先完成OceanBase数据源的创建。更多OceanBase信息，请参见 什么是OceanBase。操作步骤 请参见 数据源管理入口，进入 数据源...
创建AnalyticDB for PostgreSQL数据源
背景信息 AnalyticDB for PostgreSQL即阿里云的云原生数仓AnalyticDB PostgreSQL，如果您使用的是云原生数仓AnalyticDB PostgreSQL，在对接Dataphin进行数据开发时，您需要先完成AnalyticDB for PostgreSQL数据源的创建。更多云原生数仓...
创建OSS数据源
如果您使用的是阿里云对象存储OSS，在对接Dataphin进行数据开发或将Dataphin的数据写入至OSS时，您需要先完成OSS数据源的创建。更多OSS信息，请参见 什么是对象存储OSS。权限说明 Dataphin仅支持超级管理员、数据源管理员、板块架构师、...
创建SAP HANA数据源
如果您使用的是SAP HANA，在对接Dataphin进行数据开发或将Dataphin的数据导出至SAP HANA场景中，您需要先完成SAP HANA数据源的创建。更多SAP HANA信息，请参见 SAP HANA官网。权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块架构...
创建FTP数据源
如果您使用的是FTP，在对接Dataphin进行数据开发或将Dataphin的数据写入至FTP的场景中，您需要先完成FTP数据源的创建。更多FTP信息，请参见 FTP官网。使用限制 Dataphin仅支持超级管理员、数据源管理员、板块架构师、项目管理员角色创建...
新建Amazon S3数据源
如果您使用的是Amazon S3，在对接Dataphin进行数据开发或将Dataphin的数据写入至Amazon S3时，您需要先完成Amazon S3数据源的创建。更多Amazon S3信息，请参见 什么是Amazon S3。权限说明 仅支持具备新建数据源权限的账号进行新建。更多...
创建OpenGauss数据源
说明 通常情况下，生产数据源和开发数据源需配置非同一个数据源，以使开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。参数 描述 JDBC URL 链接地址的格式为 ...
- 产品推荐
- 这些文档可能帮助您