场景：MaxCompute引擎在不同模式工作空间访问资源与...
DataWorks包括简单模式和标准模式两...表名 在projectA项目下创建一个开发库表user_info，则数据库表名为：projectA_dev.user_info。生产环境 项目名.表名 在projectA项目下创建一个生产库表user_info，则数据库表名为：projectA.user_info。
AnalyticDB for MySQL3.0整库周期性增全量同步至...
效果：同步修改过的表，没有修改的表不会再进行同步 数据开发相关场景 如果您有下游数据依赖，需要进行数据开发操作的场景，可以参考 配置调度依赖，进行节点上下游的设置，对应的周期任务节点信息可以在周期配置中查看。
Hologres整库周期性增全量同步至MaxCompute
效果：同步修改过的表，没有修改的表不会再进行同步 数据开发相关场景 如果您有下游数据依赖，需要进行数据开发操作的场景，可以参考 配置调度依赖，进行节点上下游的设置，对应的周期任务节点信息可以在周期配置中查看。
编辑脚本
脚本类型 输入配置 输出配置 创建联邦表 原始样本（多个）联邦表（一个或多个）预处理规则 联邦表（一个或多个）联邦表（一个或多个）预处理应用 联邦表（一个或多个）联邦预处理规则（一个）联邦表（一个或多个）模型开发 联邦表（一个或...
文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
公开数据集概述
MaxCompute将GH Archive提供的海量公开事件数据进行离线处理并开发，生成以下表：dwd_github_events_odps（GitHub公开事件数据事实表）dws_overview_by_repo_month（GitHub公开事件月度指标数据聚合表）说明 表中的数据源于 GH Archive。...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
维度建模
维度：维度是用于分析数据的一个角度，一方面对维度进行可控管理，另一方面指导维度表的设计，如地理维度，时间维度。维度属性：维度属性隶属于一个维度，用来描述维度的属性，如地理维度中的国家名称，省份名称。时间周期：时间周期是用来...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
透视分析：按资源类型
表数量趋势：查看所选工作空间在指定时间段内的开发表、生产表或所有表的数量变化趋势。表存储分布：查看所选工作空间在指定日期内表的存储情况。表存储趋势：查看所选工作空间在指定时间段内的开发表、生产表或所有表的存储变化趋势。表...
采集数据
本文为您介绍如何新建OSS和RDS数据源来访问本教程所提供的用户信息与网站日志数据，配置数据同步链路至私有OSS数据源，并通过EMR Hive节点建表去查询同步后的数据，完成数据同步的操作过程。前提条件 开始本文的操作前，请准备好需要使用的...
搭建茶园监控应用概述
一个定时触发服务：用于每个整点统计前一小时的最高温度数据，并存储到另一个云数据库RDS版MySQL数据表中。一个HTTP接口：用于从RDS数据库中，筛选出指定时间段内，每小时的最高温度数据。使用Web可视化开发工作台，开发一个Web前端应用。...
数据质量监控
数据质量监控模块为您提供数据表开发的跟踪管理功能。数据质量监控的界面如下图所示，默认显示当前项目接入的“现场开发”类的全部数据表，可切换显示项目中“同步专网”或“产品部署”类数据表。其中：现场开发类表：可选择显示总数据表、...
步骤一：开发维度逻辑表
本文为您介绍如何基于本教程完成 产品维度逻辑表 和 客户维度逻辑表 开发。背景信息 完成产品维度逻辑表开发并提交后，还需完成客户维度逻辑表的开发并提交。本教程的产品维度逻辑表开发与客户维度逻辑表开发操作步骤相同，本文以开发 产品...
步骤一：开发维度逻辑表
本文为您介绍如何基于本教程完成 产品维度逻辑表 和 客户维度逻辑表 开发。背景信息 完成产品维度逻辑表开发并提交后，还需完成客户维度逻辑表的开发并提交。本教程的产品维度逻辑表开发与客户维度逻辑表开发操作步骤相同，本文以开发 产品...
Flink_SQL任务开发方式
Dataphin元表开发方式 在Dataphin中，元表是在原生DDL+DML开发上更高一层的逻辑概念，元表是通过数据管理的跨存储类型表。开发过程中所用到的输入表、输出表、维表可以通过创建元表方式来进行创建和管理，以支持您通过引用元表的方式来创建...
概述
本文介绍使用IoT Studio的业务逻辑功能，开发一个控制空调的智能服务。该服务可根据当前温度的变化，控制空调自动开启或关闭。背景信息 业务逻辑是IoT Studio提供的开发工具，支持通过编排服务节点的方式快速完成业务服务开发。本示例以...
创建并使用MaxCompute表
代码示例 开发环境（数据开发、开发环境运维中心）执行代码 生产环境（生产环境运维中心）执行代码 访问开发项目中的开发表：select col1 from projectname_dev.tablename;使用任务执行者个人云账号访问开发表。RAM用户（子账号）执行相关...
Flink_SQL任务开发方式
Dataphin元表开发方式 在Dataphin中，元表是在原生DDL+DML开发上更高一层的逻辑概念，元表是通过数据管理的跨存储类型表。开发过程中所用到的输入表、输出表、维表可以通过创建元表方式来进行创建和管理，以支持您通过引用元表的方式来创建...
概述
本案例介绍如何使用物联网应用开发（IoT Studio）平台的Web可视化开发功能开发一个可展示和控制家居用品开关状态（例如灯、窗帘等的开关状态）的Web应用。设计思路 创建并接入相应的产品（例如：开关遥控器）和设备。需要为产品定义以下...
ALTER TABLESPACE
为一个特定表空间设定这两个参数值将覆盖规划器对从该表空间中的表读取页面代价的估计值，以及执行者的预取行为，这些估计值由具有相同名称的配置参数建立。如果一个表空间位于一个比其余 I/O 子系统更快或者更慢的磁盘上时，这些参数就能...
创建并使用MaxCompute表
代码示例 开发环境（数据开发、开发环境运维中心）执行代码 生产环境（生产环境运维中心）执行代码 访问开发项目中的开发表：select col1 from projectname_dev.tablename;使用任务执行者个人云账号访问开发表。RAM用户（子账号）执行相关...
CREATE TABLE AS
CREATE TABLE AS 创建一个表，并且用由一个 SELECT 命令计算出来的数据填充该表。简介 CREATE TABLE AS 创建一个表，并且用由一个 SELECT 命令计算出来的数据填充该表。该表的列具有和 SELECT 的输出列相关的名称和数据类型（不过可以通过...
DROP TABLE
不过，要删除一个被视图或者另一个表的外键约束所引用的表，必须指定 CASCADE（CASCADE 将会把依赖的视图也完全移除，但是对于外键它将只移除外键约束，而完全不会移除其他表）。语法 DROP TABLE[IF EXISTS]name[,.][CASCADE|RESTRICT]参数...
CLUSTER
如果你从一个表中要求一个范围的被索引值或者多行都匹配的一个单一值，CLUSTER 就会有所帮助，因为一旦该索引标识出了第一个匹配行所在的表页，所有其他匹配行很可能就在同一个表页中，并且因此节省了磁盘访问并且提高了查询速度。...
数据地图概述
表权限管控 表操作权限申请 标准模式工作空间下，RAM用户默认无法通过SQL命令直接操作生产表，如果您需要操作生产表或跨账号查询生产表，需要进行权限申请，您可以在表详情页中的 申请权限 入口申请表的相关权限。当您在表详情页单击申请权...
开发部署扩展程序：函数计算方式
支持添加多个参数，一行一个参数，参数格式为 key=value。更多参数的使用，请参见 高级应用：扩展程序参数配置。扩展程序选项配置 输入提供给扩展程序使用者使用的功能配置项，可实现该扩展程序在不同工作空间进行个性化管控。扩展程序开发...
层次调用规范
如果多个任务刷新输出一个表（不同任务插入不同的分区），DataWorks上需要建立一个虚拟任务，依赖多个任务的刷新和输出。通常，下游应该依赖此虚拟任务。CDM汇总层优先调用CDM明细层，可累加指标计算。CDM汇总层尽量优先调用已经产出的粗...
开发部署扩展程序：自建服务方式
支持添加多个参数，一行一个参数，参数格式为 key=value。更多参数的使用，请参见 高级应用：扩展程序参数配置。扩展程序选项配置 输入提供给扩展程序使用者使用的功能配置项，可实现该扩展程序在不同工作空间进行个性化管控。扩展程序开发...
数据表管理
创建普通表 CREATE TABLE命令用于创建一个表，创建表时可以定义以下内容：表的列以及 数据类型 表约束的定义 表分布定义 表存储格式 分区表定义 使用 CREATE TABLE 命令创建表，格式如下：CREATE TABLE table_name([{ column_name data_...
管理字段
字段是指某一个事物的一个特征，或者说是属性。本文为您介绍如何通过DDM管理字段。创建字段 主键是指唯一标识的一条记录，不能重复，不允许为空。表中，中央横线的上方创建的字段就是主键字段，字段前会有一个红色的标志。外键是指一个表的...
CREATE TABLESPACE
为一个特定表空间设定这些值将覆盖规划器对该表空间中表页读取的常规代价估计，和执行程序的预取行为，由同名的配置参数确定（见 seq_page_cost、random_page_cost、effective_io_concurrency、maintenance_io_concurrency）。如果一个表...
DELETE
删除多表数据时，一条SQL语句只能删除一张表，不支持同时删除多张表。语法 单表删除是指查询一个表，并删除满足WHERE子句指定条件的数据。多表删除是指单个SQL语句进行多表关联查询，并在一个表中删除满足WHERE子句指定条件的数据。单表...
审批负责人治理（Beta）
表（开发环境/生产环境）的审批负责人不是当前租户成员。推荐负责人 系统结合异常原因和推荐策略来建议转交的目标负责人。推荐原因 对于转交的目标负责人，系统的推荐策略（优先级依此降低）：对于生产表，使用有效的开发表的审批负责人，...
时序表操作
由于时序表包括时间线元数据表和时间线数据表，因此一个时序表会使用两个表名额。目前支持使用时序模型功能的地域有华东1（杭州）、华东2（上海）、华北2（北京）、华北3（张家口）、华北6（乌兰察布）、华南1（深圳）、中国香港、德国...
MaxCompute数据访问权限控制
说明 同一个申请单提交的多张表权限申请，会按照表Owner的不同自动拆分成多个申请单。查看审批详情。单击目标申请 操作 列的 审批，您可以在 审批详情 对话框查看目标申请的 申请详情、审批记录 等详细信息。审批申请。根据申请的详细内容...
RestAPI Reader最佳实践
实践1：读取一个接口数据，该接口根据时间范围查询数据 示例场景：接口定义 本实践示例的场景为读取一个RESTful接口数据并写入一个MaxCompute分区表中，其中使用的示例RESTful接口为一个自建的测试GET接口，会根据接口输入的时间范围参数...
DROP TABLE
语法 DROP TABLE name[CASCADE|RESTRICT|CASCADE CONSTRAINTS]说明 DROP TABLE 可从数据库中删除表，当您删除一个表时，这个表的所有分区或子分区也会被删除。要清空表中的行但不销毁表，请使用 DELETE。DROPTABLE 始终删除针对目标表存在...
时序模型介绍
每行代表一个时间线在某个时间点的数据，该行的主键部分为时间线标识和时间戳，该行的数据列部分为该时间线在该时间戳下的数据点，可以有多个数据列。主键结构和数据列的结构无须用户进行预先定义，用户仅需要在写入时指定数据列的列名即可...
表基础
但是，极少会定义一个接近这个限制的表，即便有也是一个值的商榷的设计。如果我们不再需要一个表，我们可以通过使用DROP TABLE命令来移除它。例如：DROP TABLE my_first_table;DROP TABLE products;尝试移除一个不存在的表会引起错误。然而...
- 产品推荐
- 这些文档可能帮助您