需求阶段
确认需求 N个工作日（视各企业实际情况而定）内如果无异议，则产品需求文档定稿，并开始进入后续的设计与开发阶段。迭代需求流程 对于同一需求，在完成首次需求评审并定稿产品需求文档后，业务方再次提出的需求，均属于迭代需求。迭代需求...
使用教程（时序模型）
背景信息 Tablestore的时序模型是针对时间序列数据的特点进行设计，适用于物联网设备监控、设备采集数据、机器监控数据等场景。更多信息，请参见 时序模型介绍。在Tablestore的时序模型中，采用一张二维的时序表来存储时序数据。每行代表...
JAR作业开发
说明 Table API作业的开发方式与Datastream作业相同。使用限制 受部署环境、网络环境等因素的影响，开发DataStream作业，需要注意以下限制：仅支持JAR形式的作业提交和运行，支持一个主JAR包和多个附加依赖JAR包。不支持在Main函数中读取...
作业编辑
设置作业 各类作业类型的开发与设置，请参见 作业 部分。以下内容介绍的是作业的 基础设置、高级设置、共享库 和 告警设置。在 作业编辑 页面，单击右上角的 作业设置。在 作业设置 面板，设置基础信息。配置项 说明 作业概要 作业名称 您...
临时查询
设置作业 各个具体作业类型的开发与设置，请参见 作业 部分。以下内容介绍的是作业的 基础设置、高级设置、共享库 和 告警设置。在 临时查询 页面，单击右上角的 作业设置。在 作业设置 面板，设置基础信息。参数 描述 作业概要 作业名称：...
2023年
本文为您介绍了MaxCompute 2023年内容更新的最新动态，基于此您可以了解MaxCompute中增加了哪些新功能、语法新特性和权限变更，提升项目开发效率。MaxCompute的重要功能发布记录请参见 产品重大更新。2023年12月更新记录 时间 特性 类别 ...
文档修订记录
配置代码模板 2023.6.29 新增功能 数据开发 DataWorks为您提供函数计算节点，您可通过该节点周期性调度处理事件函数，并完成与其他类型节点的集成和联合调度。函数计算节点 2023.6.29 新增功能 管理控制 创建E-MapReduce计算引擎数据源：...
2023-04-13版本
对于Jar和Python作业来说，开发与线上天然隔离，且不需要使用到SQL中的UDF、Connector和Catalog等组件，所以不需要部署上线的机制。优化Jar作业和Python作业创建流程。SQL开发页面不再提供Jar和Python作业的创建，您可以直接在作业运维页面...
通过实时计算订阅数据
进入 阿里云流计算开发平台，单击 开发>作业开发>新建作业，创建一个名称为test的开发作业。单击左侧菜单栏的 数据存储，右键单击 DataHub 数据存储，选择 注册数据存储，填入相关信息，单击 注册。参数 说明 数据存储类型 DataHub数据存储...
作业开发入门概述
AnalyticDB MySQL 湖仓版（3.0）提供Spark引擎和 AnalyticDB MySQL XIHE引擎，您可以选择不同的引擎进行不同方式的作业开发。本文介绍通过XIHE SQL（包含MPP和BSP模式）和Spark SQL方式进行 AnalyticDB MySQL 内表作业开发的流程。作业开发...
Python作业开发
本文为您介绍Flink Python API作业开发的背景信息、使用限制、开发方法、调试方法和连接器使用等。背景信息 Flink Python作业需要您在本地完成开发工作，Python作业开发完成后，再在Flink开发控制台上部署并启动才能看到业务效果。整体的...
部署作业
完成作业开发后，您需要将作业部署。部署将开发和生产隔离，部署后不影响运行中的作业，只有（重新）启动后才会正式上线运行。本文为您介绍如何部署SQL作业、JAR作业和Python作业。前提条件 已完成作业开发。SQL作业开发，详情请参见 SQL...
作业开发入门概述
本文介绍通过Spark SQL和XIHE BSP SQL方式进行 AnalyticDB MySQL 外表作业开发的流程。应用场景 当 AnalyticDB MySQL 湖仓版（3.0）集群的存储预留资源为0 ACU时，无法创建 AnalyticDB MySQL 内表，您可以通过Spark SQL和XIHE BSP SQL方式...
配置作业部署信息
在作业启动前，您需要配置作业部署信息。本文为您介绍如何配置作业部署信息。前提条件 其他阿里云账号或RAM用户等访问项目空间，并进行作业资源配置等操作时，则需要为其进行授权，详情请参见 作业操作授权。已完成作业部署，详情请参见 ...
作业运维（新版）
MaxCompute作业运维功能支持查看历史作业和正在运行的作业，方便您了解作业运行详情及分析作业运行时的资源负载情况，帮助您对作业进行运维管理。功能介绍 MaxCompute的作业运维功能支持查看并运维您当前项目下 历史作业和正在运行的作业。...
本地运行和调试包含连接器的作业
本文为您介绍如何在开发者本地环境中运行和调试包含阿里云实时计算Flink版连接器的作业，以便快速验证代码的正确性，快速定位和解决问题，并节省云上成本。背景信息 当您在Inteillij IDEA中运行和调试Flink作业，如果其包含了阿里云实时...
MaxCompute作业概述
MaxCompute中数据开发作业主要存在以下三种类型：周期性调度作业、数据集成作业、数据分析作业。典型场景 创建作业：创建ODPS SQL节点、数据传输作业：数据集成、数据分析作业。查看作业运行信息：使用Logview查看作业运行信息、在...
概述
（推荐）DataStudio DataWorks的DataStudio（数据开发）模块为您提供了界面化、智能高效的大数据开发与测试服务，您可以在绑定Hologres实例后，通过使用Hologres节点进行Hologres数据开发，包括SQL管理、MaxCompute数据同步等功能。...
创建ClickHouse数据源
后续操作 数据源创建完成后，您可根据需要执行如下操作：计算任务开发与调度：DataWorks的数据开发与运维中心模块，为您提供ClickHouse任务的开发与调度能力，若您需要基于该ClickHouse数据源进行ClickHouse任务开发，或周期性调度...
什么是IoT Studio
物联网应用开发提供了Web可视化开发、移动可视化开发、业务逻辑开发与物联网数据分析等一系列便捷的物联网开发工具，解决物联网开发领域开发链路长、定制化程度高、投入产出比低、技术栈复杂、协同成本高、方案移植困难等问题。功能特点 ...
数据开发与运维中心：数据加工
任务监控与定位处理 计费 进行数据开发与运维可能产生的费用包括：运行任务所需的 调度资源组 费用。计费详情请参见 独享调度资源组计费说明：包年包月、公共调度资源组计费说明：按量付费。进行运维监控时，监控规则计算扫描所需的实例...
DataWorks准备工作流程
DataWorks是为您提供专业高效、安全可靠的一站式大数据开发与治理平台，使用其进行数据开发前，您需做好相关准备工作，保障后续开发任务可顺利执行。本文为您介绍DataWorks的购买及环境准备流程，帮助您快速开通DataWorks并准备所需开发...
什么是EMR Serverless Spark
EMR Serverless Spark...内置版本管理、开发与生产隔离，满足企业级开发与发布标准。Serverless的资源平台 开箱即用，无需手动管理和运维云基础设施。弹性伸缩，秒级资源弹性与供给。按量付费，按实际计算资源量付费，进一步降低计算总成本。
按登录方式授权
实时计算Flink版支持阿里云账号、阿里云RAM用户、阿里云RAM角色、资源目录成员方式登录并访问实时计算控制台，以及进行作业开发和运维。不同登录方式下需要被授权的主体（身份或账号）可能不同，本文通过示例为您介绍不同登录方式下，访问...
受众与核心能力
产品定位 DataWorks致力于为数据开发者、数据分析师、数据资产管理者，打造一个具备开放自主开发与全栈数据研发能力的一站式、标准化、可视化、透明化的智能大数据全生命周期云研发平台。DataWorks赋予用户仅通过单一平台，即可实现数据...
Flink Python作业快速入门
本文带您快速体验Flink Python流作业和批作业的创建、部署和启动，以了解实时计算Flink版Python作业的操作流程。前提条件 如果您使用RAM用户或RAM角色等身份访问，需要确认已具有Flink控制台相关权限，详情请参见 权限管理。已创建Flink...
HoloStudio一键迁移至DataStudio
单击顶部菜单栏的 图标，选择 全部产品>数据开发与运维>Holo Studio。单击HoloStudio界面左侧导航栏的 一键迁移DataStudio。在 HoloStudio一键迁移 界面，单击右上角的 开始迁移。开始迁移后将为您展示迁移进度和迁移结果。迁移完成后，您...
创建Hologres数据源
数据源创建完成后，您可根据需要执行如下操作：计算任务开发与调度：DataWorks的数据开发与运维中心模块，为您提供Hologres任务的开发与调度能力，若您需要基于该Hologres数据源进行Hologres任务开发，或周期性调度Hologres相关任务，需先...
DataWorks On Hologres使用说明
类别 描述 相关文档 版本选择 DataWorks基础版服务可满足Hologres开发中基本的数据上云、数据开发与调度生产、简单的数据治理工作，若需获取更专业的数据治理、数据安全解决方案，可选择相应的标准版、专业版、企业版服务。DataWorks标准版...
创建AnalyticDB for PostgreSQL数据源
后续操作 数据源创建完成后，您可根据需要执行如下操作：计算任务开发与调度：DataWorks的数据开发与运维中心模块，为您提供AnalyticDB for PostgreSQL任务的开发与调度能力，若您需要基于该AnalyticDB for PostgreSQL数据源进行AnalyticDB...
创建AnalyticDB for MySQL3.0数据源
后续操作 数据源创建完成后，您可根据需要执行如下操作：计算任务开发与调度：DataWorks的数据开发与运维中心模块，为您提供AnalyticDB for MySQL3.0任务的开发与调度能力，若您需要基于该AnalyticDB for MySQL3.0数据源进行AnalyticDB for...
DataWorks On MaxCompute使用说明
类别 描述 相关文档 版本选择 DataWorks基础版服务可满足MaxCompute开发中基本的数据上云、数据开发与调度生产、简单的数据治理工作，若需获取更专业的数据治理、数据安全解决方案，可选择相应的标准版、专业版、企业版服务。DataWorks标准...
场景：工作空间模式升级（简单模式升级标准模式）
若您当前使用的是简单模式工作空间，但希望将开发与生产环境隔离，可将简单模式工作空间升级为标准模式工作空间。本文为您介绍如何升级工作空间模式。操作须知 升级工作空间模式前，您需先了解以下内容：了解简单模式与标准模式工作空间的...
修改作业
调用ModifyFlowJob，修改数据开发作业。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是 ...
开发前准备：绑定数据源或集群
后续操作 数据源绑定后，您可基于需要执行如下操作：计算任务开发与调度：进行数据开发及任务的周期性调度运行。详情请参见 数据开发概述、运维中心概述。数据建模：执行相关依赖于数据源的建模任务，例如，模型开发、模型发布等。详情请...
创建并管理MaxCompute节点
在弹框中配置节点的名称，完成后单击 确认，完成MaxCompute节点创建操作，后续您即可在节点中进行对应MaxCompute任务开发与配置。开发MaxCompute任务 当前DataWorks支持多种MaxCompute节点类型，便于您开发不同类型的MaxCompute任务。节点...
创建CDH Impala节点
在 新建节点 弹窗中，配置节点的 名称，完成后单击 确认，完成节点创建，后续您可在创建的节点中进行对应任务的开发与配置操作。步骤二：开发Impala任务 您可以双击已创建的节点，进入任务开发页面，进行以下任务开发操作。（可选）选择CDH...
DataWorks On CDP/CDH使用说明
环境准备 一、资源准备 类别 描述 相关文档 版本选择 DataWorks基础版服务可满足 CDP或CDH 基本的数据上云、数据开发与调度生产、简单的数据治理工作，若需获取更专业的数据治理、数据安全解决方案，可选择相应的 标准版、专业版、企业版 ...
绑定交互式分析实例
进入DataWorks工作间之后，单击左上角的 图标，选择 全部产品>数据开发与运维>HoloStudio，进入HoloStudio开发界面。进入HoloStudio后，在 PG管理 单击 刷新，即可看到已成功绑定DB，之后您可以开始使用HoloStudio开发。选择已有工作空间...
创建CDH Presto节点
在 新建节点 弹窗中，配置节点的 名称，完成后单击 确认，完成节点创建，后续您可在创建的节点中进行对应任务的开发与配置操作。步骤二：开发Presto任务 您可以双击已创建的节点，进入任务开发页面，进行以下任务开发操作。（可选）选择CDH...
- 产品推荐
- 这些文档可能帮助您