SQL 编辑和执行
SQL 执行 SQL 语句编辑完成后，在 SQL 窗口的工具栏中单击 运行 F8 运行当前 SQL 窗口中所有的 SQL 语句。功能 说明 运行 F8 运行当前 SQL 窗口中所有的 SQL 语句。可以通过快捷键 F8 运行所有 SQL 语句。运行当前语句 F9 运行当前选中的...
DataWorks节点合集
DataWorks的数据开发（DataStudio）模块为您提供多种类型的节点，包括用于数据同步的数据集成节点，用于数据清洗的引擎计算节点（例如，ODPS SQL、Hologres SQL、EMR Hive），以及可对引擎计算节点进行复杂逻辑处理的通用节点（例如，可...
新建Flink_SQL任务
本文为您介绍基于Fusioninsight Flink实时引擎如何创建FLINK_SQL任务。前提条件 在开始执行操作前，请确认项目已开启 实时引擎 并已配置Fusioninsight flink为计算源。具体操作，请参见 创建通用项目。权限说明 仅支持 超级管理员、项目...
公共节点
Flink Vvr SQL Flink Vvr SQL节点是基于Apache Flink（以下简称Flink）开发的商业版，VVR引擎接口完全兼容Flink开源版本，适用于在K8s部署运行的Flink节点，具体操作，请参见 新建Flink Vvr SQL类型的公共节点。Flink SQL Flink SQL节点是...
创建Microsoft SQL Server数据源
通过创建Microsoft SQL Server数据源能够实现Dataphin读取Microsoft SQL Server的业务数据或向Microsoft SQL Server写入数据。本文为您介绍如何创建Microsoft SQL Server数据源。前提条件 若您需在Dataphin中创建基于阿里云产品的数据源，...
Flink_SQL任务开发方式
Dataphin的Flink_SQL任务支持多种开发方式，包括原生DDL+DML开发、基于Catalog开发、使用Dataphin元表进行开发、使用Dataphin数据源表进行开发、以及使用计算源物理表进行开发，且不同开发方式所创建的表支持任意混用，包括镜像表。...
新建FLINK_SQL任务
本文为您介绍基于开源Flink实时引擎如何创建FLINK_SQL任务。前提条件 在开始执行操作前，请确认项目已开启 实时引擎 并已配置 Flink 为计算源。具体操作，请参见 创建通用项目。权限说明 仅支持 超级管理员、项目管理员 和 开发者 创建...
新建Flink Vvp SQL类型的公共节点
Flink Vvp SQL公共节点是为了简化计算模型、降低您使用Flink门槛而设计的可以使用标准SQL语义开发的公共节点。操作步骤 方式一：写SQL语句方式 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，...
SQL组件概述
组件使用流程 在DataWorks中创建的 组件 需与DataWorks的 SQL组件节点 配合使用，具体流程如下：定义SQL组件 组件开发者可通过数据开发（DataStudio）的 组件管理 界面，定义通用逻辑的过程体代码及输入输出参数，通过编写抽象的SQL加工...
什么是EMR Notebook
兼容开源 EMR Notebook兼容开源Jupyter Notebook，您可以通过文件导入、导出的方式实现开发工具的自由切换，从而降低了使用门槛。产品功能 交互式编程环境 支持逐步执行SQL和Python代码，并根据运行结果调整后续代码。多种数据源类型 支持...
HoloWeb简介
HoloWeb实现对Hologres中数据库的可视化管理和开发功能，相比PostgreSQL生态的开发工具，HoloWeb具有如下优势。操作简便 Holoweb提供Hologres引擎功能的可视化界面，无需写SQL命令就能进行大数据开发，操作简便，可以极大降低大数据开发...
通过Spark Distribution SQL Engine开发Spark SQL作业
当您需要实时分析数据或通过JDBC协议开发Spark SQL作业时，可以通过 AnalyticDB for MySQL 的Spark Distribution SQL Engine开发Spark SQL作业。通过Spark Distribution SQL Engine可以更方便地利用SQL分析、处理和查询数据，提升SQL执行...
MapReduce支持SQL运行时执行模式
新版本MaxCompute支持将MapReduce作业指定为SQL运行时执行模式，基于SQL运行时，MapReduce可以使用MaxCompute SQL引擎编译器、基于代价的优化器和向量化执行的执行引擎，同时可以复用SQL引擎开发的各种新特性，包括功能、性能、稳定性等...
SQL查询概述
应用场景 提取并下载数据：通过SQL查询可以对计算源中的数据进行提取、聚合、过滤、排序等操作，并支持下载数据，以满足数据分析和报表生成的需求。数据可视化：通过SQL查询可以对计算源中提取的业务数据以图表的形式展示，可有效的帮助...
SQL查询概述
应用场景 提取并下载数据：通过SQL查询可以对计算源中的数据进行提取、聚合、过滤、排序等操作，并支持下载数据，以满足数据分析和报表生成的需求。数据可视化：通过SQL查询可以对计算源中提取的业务数据以图表的形式展示，可有效的帮助...
功能特性
Spark开发编辑器 Notebook开发编辑器 Spark SQL开发 Spark应用开发 调度开发 AnalyticDB for MySQL支持通过DMS、Dataworks和第三方工具Airflow调度任务。DMS调度XIHE SQL DMS调度Spark DataWorks调度XIHE SQL Airflow调度Spark 数据可视化 ...
创建CDH Impala节点
在DataWorks中，CDH Impala节点可以编写并执行Impala SQL脚本。与CDH Hive相比，CDH Impala节点为您提供了更快速的查询性能。本文为您介绍如何创建与使用CDH Impala节点。使用限制 不支持 公共调度资源组 运行该类型任务。步骤一：创建CDH ...
创建CDH Presto节点
开发SQL代码：简单示例 在SQL编辑区域输入任务代码，示例如下。show tables;select*from userinfo;开发SQL代码：使用调度参数 DataWorks提供 调度参数，可实现调度场景下代码动态入参，您可在节点中通过${变量名} 的方式定义代码中的变量，...
选择连接工具
连接MaxCompute的工具指引 至此，您已完成准备工作，请根据您选择的数据处理开发工具，参照指引执行后续操作，快速完成一个完整的MaxCompute使用链路：开发工具 工具指引 MaxCompute客户端 通过客户端使用MaxCompute 更多MaxCompute客户端...
DataWorks On MaxCompute使用说明
节点代码定义：MaxCompute语法 创建并使用MaxCompute表 开发ODPS SQL任务 引用SQL组件 开发ODPS Spark任务 开发PyODPS 2任务 开发PyODPS 3任务 开发ODPS Script任务 开发ODPS MR任务 创建并使用MaxCompute资源 创建并使用自定义函数 您可...
创建CDH Hive节点
开发SQL代码：简单示例 在SQL编辑区域输入任务代码，示例如下。show tables;select*from userinfo;开发SQL代码：使用调度参数 DataWorks提供 调度参数，可实现调度场景下代码动态入参，您可在节点中通过${变量名} 的方式定义代码中的变量，...
创建EMR Presto节点
Presto（即PrestoDB）是一款灵活、可扩展的分布式SQL查询引擎，支持使用标准的SQL查询语言进行大数据的交互式分析查询（Presto概述），DataWorks为您提供EMR Presto节点，便于您在DataWorks上进行Presto任务的开发和周期性调度。...
功能特性
HBase外部表 开发和分析工具 根据业务需要用户可选择连接MaxCompute的开发工具，进行后续MaxCompute的使用及开发操作。功能集 功能 功能描述 参考文档 Odpscmd 客户端 odpscmd MaxCompute提供客户端odpscmd，访问MaxCompute项目并运行命令...
Quick BI如何从页面获取后端执行的SQL
产品名称 Quick BI 产品...使用谷歌浏览器，打开开发者工具，选择network。2.清空旧的请求。3.点击刷新按钮，发送新的请求。4.名字为“previewCubeData?workspaceId=XXXXX”的接口包含传入后端的SQL。5.在preview展开debug_info就能看见SQL。
Java应用监控和诊断方案
慢服务/SQL报表 进入该应用的SQL分析报表，可以清楚地定位到具体的慢SQL、慢服务。分布式调用链查询 点击慢SQL的接口快照，可以找到一条包含该SQL调用的请求，并能看到该方法的调用堆栈，进而定位到代码级别的问题。无论从全局视角还是单个...
创建并使用PAI Designer
人工智能平台PAI的 可视化建模Designer，用于实现端到端的机器学习开发流程的可视化建模工具。DataWorks为您提供PAI Designer节点，方便您通过该算法节点载入Designer工作流，通过调度配置实现Designer工作流的周期性任务调度。前提条件 ...
Quick BI嵌入第三方仪表板后如何查看图表的SQL
问题描述 阿里云Quick BI在嵌入第三方仪表板后，需要...打开浏览器，按F12键，打开开发者工具，单击查看olapResult接口，单击Preview，找到Preview页签中的sqlText参数，该参数就是图表的SQL。适用于 Quick BI 说明：本文适用于仪表板模块。
创建CDH MR节点
在DataWorks任务开发中，您可以通过创建CDH MR（MapReduce）节点处理超大规模的数据集。本文为您介绍如何在DataWorks中创建并使用CDH MR节点。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发（DataStudio）基于业务流程对不同...
Paimon外部表
在 SQL 开发 页面，创建包含如下语句的SQL作业，部署并运行作业。关于如何创建并运行SQL作业详情，请参见 SQL作业开发。INSERT INTO `catalogname`.`default`.test_tbl VALUES('2023-04-21',1,'AAA'),('2023-04-21',2,'BBB'),('2023-04-22'...
HoloStudio快速入门
DataWorks-HoloStudio作为基于交互式分析（Hologres）引擎的一站式开发平台，在为您提供SQL界面开发的同时，也支持使用可视化UI界面完成Hologres开发，同时也与DataWorks深度集成，方便您完成数据...关于Hologres的更多开发工具请参见 概述。
创建并使用PAI DLC节点
开发SQL代码：使用调度参数 DataWorks提供的 调度参数 可实现周期调度场景下代码动态入参，您可在节点任务中通过${变量名} 的方式定义代码中的变量，并在 调度配置>参数 处，为该变量赋值。调度参数支持的格式，详情请参见 调度参数支持的...
创建CDH Spark节点
在工具栏，单击 图标，保存编写的SQL语句，单击 图标，运行创建的SQL任务。（可选）冒烟测试。如果您希望在开发环境进行冒烟测试，可在执行节点提交，或节点提交后执行，冒烟测试，操作详情请参见 执行冒烟测试。后 续步骤 提交并发布节点...
调试代码片段：快捷运行
创建ODPS SQL节点，详情请参见 开发ODPS SQL任务。创建EMR Hive节点，详情请参见 创建EMR Hive节点。使用限制 目前仅支持ODPS SQL、EMR Hive节点使用快捷运行功能。仅非运行状态的节点支持使用该功能。如果节点的任务代码处于运行状态，则...
创建EMR Shell节点
为了满足特定业务需求，您...在工具栏，单击 图标，保存编写的SQL语句，单击 图标，运行创建的SQL任务。（可选）冒烟测试。如果您希望在开发环境进行冒烟测试，可在执行节点提交，或节点提交后执行，冒烟测试，操作详情请参见 执行冒烟测试。
认识MaxCompute Studio
MaxCompute Studio是阿里云MaxCompute平台提供的安装在开发者客户端的大数据集成开发环境工具，是一套基于流行的集成开发平台IntelliJ IDEA的开发插件，帮助您便捷、快速地进行数据开发。本文将为您介绍MaxCompute Studio的功能界面和常用...
ClickHouse SQL
DataWorks的ClickHouse SQL节点可进行ClickHouse SQL任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用ClickHouse SQL节点进行任务开发的主要流程。前提条件 已创建业务流程。数据开发（DataStudio）基于业务流程执行...
管理健康报告
参数化SQL分析从SQL执行频次、SQL执行总耗时、SQL耗时离散度、SQL CPU资源总消耗、SQL内存资源总消耗、SQL执行失败频次等维度进行排序，获取相应的TOP SQL并展现相关指标。通过参数化SQL分析，您可以：获取StarRocks数据库整体的SQL执行...
最佳实践：SQL组件
附录：表结构说明 您需在ODPS SQL节点中创建销售明细数据表和目标输出表，详情请参见 开发ODPS SQL任务。创建销售明细数据表 销售明细数据表的建表语句如下：CREATE TABLE IF NOT EXISTS company_sales_record(order_id STRING COMMENT '...
创建EMR Spark节点
在工具栏，单击 图标，保存编写的SQL语句，单击 图标，运行创建的SQL任务。（可选）冒烟测试。如果您希望在开发环境进行冒烟测试，可在执行节点提交，或节点提交后执行，冒烟测试，操作详情请参见 执行冒烟测试。后 续步骤 提交并发布节点...
SQL Server节点
DataWorks的SQL Server节点可进行SQL Server任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用SQL Server节点进行任务开发的主要流程。背景信息 SQL Server是用于存储和处理数据的关系型数据库管理系统（RDBMS），为您...
- 产品推荐
- 这些文档可能帮助您