VAR_SAMP
当您需要了解数据值的波动或分布情况时，MaxCompute支持使用VAR_SAMP函数计算指定数值列的样本方差，帮助您从数据中提取出更深层次的价值。此函数为MaxCompute 2.0扩展函数。注意事项 升级到MaxCompute 2.0后，产品扩展了部分函数。如果您...
交互分析管理
新建SQL参数 添加日期/时间类型 说明 创建一个日期区间（起始时间/截止时间）的变量，适用于使用日期列筛选数据源。单击 添加参数，打开 新建SQL参数 窗口。选择 日期/时间类型，单击 下一步。请根据表格内容，填写配置项。模块 参数 说明 ...
HISTOGRAM
在同一条SQL语句中同时使用多个聚合函数时，如果项目资源不足，会出现内存溢出问题，请您根据实际业务情况优化SQL或购买计算资源。命令格式 map,bigint>histogram(K input);参数说明 input：输入字段，将作为Map的Key。返回值说明 返回构造...
MAP_AGG
在同一条SQL语句中同时使用多个聚合函数时，如果项目资源不足，会出现内存溢出问题，请您根据实际业务情况优化SQL或购买计算资源。命令格式 map,V>map_agg(K a,V b);参数说明 a：输入字段，将作为Map的Key。b：输入字段，将作为Map的value...
计算组管理
1 target_status INTERGER 计算组的目标状态，由于变更计算组状态是异步的，例如执行创建计算组的SQL，系统会立即返回SQL执行结果，但返回SQL结果时，并非计算组已经创建成功，系统会在后台异步创建计算组，这里的状态记录了计算组最终需要...
STDDEV_SAMP
计算样本标准差。使用限制 窗口函数的使用限制如下：窗口函数只能出现在 select 语句中。窗口函数中不能嵌套使用窗口函数和聚合函数。窗口函数不能和同级别的聚合函数一起使用。命令格式-计算样本标准差 double stddev_samp(double)decimal...
新建同步目标表
参数 描述 任务名称 填写离线计算任务的名称，例如SQL。调度类型 选择任务的调度类型。调度类型 包括：周期任务：自动参与系统的周期性调度。手动任务：需要手动触发任务的运行。描述 填写对任务的简单描述。选择目录 选择离线计算任务的...
计算与分析概述
表格存储支持通过MaxCompute、Spark、Hive或者HadoopMR、函数计算、Flink、Presto、表格存储多元索引以及表格存储SQL查询进行计算与分析。分析工具选择 表格存储支持 宽表模型、时序模型 等多种数据模型。使用不同数据模型时支持的分析工具...
MAP_UNION_SUM
在同一条SQL语句中同时使用多个聚合函数时，如果项目资源不足，会出现内存溢出问题，请您根据实际业务情况优化SQL或购买计算资源。命令格式 map,V>map_union_sum(map,V>input);参数说明 input：输入Map。说明 输入Map的Value的类型必须是...
MULTIMAP_AGG
在同一条SQL语句中同时使用多个聚合函数时，如果项目资源不足，会出现内存溢出问题，请您根据实际业务情况优化SQL或购买计算资源。命令格式 map,array<V>>multimap_agg(K a,V b);参数说明 a：输入字段，将作为Map的Key。b：输入字段，相同...
MAP_UNION
在同一条SQL语句中同时使用多个聚合函数时，如果项目资源不足，会出现内存溢出问题，请您根据实际业务情况优化SQL或购买计算资源。命令格式 map,V>map_union(map,V>input);参数说明 input：输入Map。返回值说明 返回构造的Map。示例 select...
新建HOLOGRES_SQL任务
本文为您介绍在绑定了Hologres离线计算引擎的项目下如何创建HOLOGRES_SQL任务。背景信息 SQL离线计算任务适用于对已有数据进行加工处理，生成符合业务场景需求的数据的场景。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。在数据 开发 ...
新建HOLOGRES_SQL任务
本文为您介绍在绑定了Hologres离线计算引擎的项目下如何创建HOLOGRES_SQL任务。背景信息 SQL离线计算任务适用于对已有数据进行加工处理，生成符合业务场景需求的数据的场景。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。在数据 开发 ...
新建MAX_COMPUTE_SQL任务
本文为您介绍在离线计算引擎MaxCompute下如何创建MAX_COMPUTE_SQL任务。背景信息 SQL离线计算任务适用于对已有数据进行加工处理，生成符合业务场景需求的数据场景。操作步骤 在Dataphin首页，单击顶部菜单栏中的 研发。默认进入 开发 页面...
配置跨库Spark SQL节点
任务编排中的跨库Spark SQL节点，主要针对各类跨库数据同步和数据加工场景，您可以通过编写Spark SQL，完成各种复杂的数据同步或数据加工的任务开发。前提条件 支持的数据库类型：MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、...
新建MAX_COMPUTE_SQL任务
本文为您介绍在离线计算引擎MaxCompute下如何创建MAX_COMPUTE_SQL任务。背景信息 SQL离线计算任务适用于对已有数据进行加工处理，生成符合业务场景需求的数据场景。操作步骤 在Dataphin首页，单击顶部菜单栏中的 研发。默认进入 开发 页面...
SQL查询计量计费
SQL本身不会有额外的计算消耗。但是使用SQL查询数据的过程中，表扫描、索引查询等操作会消耗读写吞吐量。本文介绍了SQL查询功能的计费项及计费示例。注意事项 SQL本身不会有额外的费用，但是使用SQL查询数据过程中涉及到的表扫描、索引查询...
DATEDIFF
本文为您介绍如何使用DATEDIFF函数，计算两个日期之间的天数差值。使用限制 仅实时计算引擎VVR 3.0.0及以上版本支持DATEDIFF函数。语法 INT DATEDIFF(VARCHAR enddate,VARCHAR startdate)INT DATEDIFF(TIMESTAMP enddate,VARCHAR startdate...
窗口函数
cumstd 计算累积标准差。cummax 计算累积最大值。cummin 计算累积最小值。cumcount 计算累积和。lag 按偏移量取当前行之前第几行的值。如果当前行号为rn，则取行号为rn-offset的值。lead 按偏移量取当前行之后第几行的值。如果当前行号为rn...
就绪检测节点
检测规则 检测规则 首先通过SQL 语句来计算源数据表中数据的数量，再验证这个数量是否符合条件。检测规则支持添加多条，界面示例和关键参数说明如下：配置项 说明 SQL代码 填写对应的质量检测代码。解析 当有参数时，单击 解析，支持解析...
占位符
select*from table_name where area='华北' and product in('商品A','商品B')系统占位符 使用方法和其他占位符一致，能够用在SQL、计算字段中，支持以下4种系统占位符：用户名（登录账号）：$system{accountName} 用户昵称（组织内）：$...
使用须知
内建函数 支持通过内建数学函数、窗口函数、日期函数、聚合函数、字符串函数等处理数据。UDF 支持通过创建自定义函数来满足更多的计算需求。如果您拥有一定开发经验 如果您拥有一定的开发经验，了解分布式概念，且希望解决某些无法用SQL...
外部表概述
创建好的外部表可以像普通的MaxCompute表一样使用（大部分场景），充分利用MaxCompute SQL的强大计算功能。说明 使用外部表功能时，外部表的数据不会复制一份存在MaxCompute上并产生存储费用。外部表支持全量搜索。Tunnel功能及Tunnel SDK...
慢日志
慢日志功能提供交互页面，您可以查看格式化的慢SQL模板、慢SQL明细，以及每条慢SQL执行次数、耗时、返回行数等关键信息。同时，您可以对慢SQL进行诊断优化。在分析慢SQL执行计划的基础上，为您推荐出包括局部索引和全局二级索引在内的合适...
Flag参数列表
ALL SQL Session/Project odps.sql.executionengine.enable.string.to.date.full.format 如果需要转换带时分秒的日期字符串，需要把该参数值设置成True，默认值是False。True：打开。False：关闭。CAST SQL Session/Project odps.sql....
Quick BI如何实现去重后的累计计算
产品名称 Quick BI 产品模块 数据集 概述 本文向您介绍参数SQL的写法，帮助您实现部分累计计算的应用场景。问题描述 现有订单明细表，记录了每天的购买商品用户，如何展示每天的购买用户数，及截止到每天的累计购买用户数 解决方案 Quick ...
SETPROJECT
ALL SQL Session/Project odps.sql.executionengine.enable.string.to.date.full.format 如果需要转换带时分秒的日期字符串，需要把该参数值设置成True，默认值是False。True：打开。False：关闭。CAST SQL Session/Project odps.sql....
SQL洞察
SQL Review：对选定区间与基准区间内的数据库实例进行workload分析，并且对数据库实例中运行的SQL进行深度分析，展示数据库实例的索引优化建议、SQL改写建议、TOP SQL、新增SQL、失败SQL、SQL特征分析、执行变化SQL、性能恶化SQL和TOP流量...
COUNT_IF
在同一条SQL语句中同时使用多个聚合函数时，如果项目资源不足，会出现内存溢出问题，请您根据实际业务情况优化SQL或购买计算资源。命令格式 bigint count_if(boolean)参数说明 expr：必填。BOOLEAN类型表达式。返回值说明 返回BIGINT类型。...
治理效果
计算量 项目内执行MaxCompute任务（包括开发者编写的SQL任务和智能计算引擎自动编码的SQL任务）所消耗的计算资源量。计算分 项目粒度的计算健康分。存储优化量 项目粒度的存储治理项处理后节省的存储资源量。计算优化量 项目粒度的计算治理...
治理效果
计算量 项目内执行MaxCompute任务（包括开发者编写的SQL任务和智能计算引擎自动编码的SQL任务）所消耗的计算资源量。计算分 项目粒度的计算健康分。存储优化量 项目粒度的存储治理项处理后节省的存储资源量。计算优化量 项目粒度的计算治理...
开发ODPS SQL任务
说明 由于国际标准化组织发布的中国时区信息调整，通过DataWorks执行相关SQL时，日期显示某些时间段会存在时间差异：1900~1928年的日期时间差异5分52秒，1900年之前的日期时间差异9秒。运行日志：您可以单击 运行日志 页签，查看Logview，...
DescribeSqlPattern-查询SQL Pattern详情
查看指定日期内AnalyticDB MySQL湖仓版（3.0）集群下的SQL Pattern详情。接口说明 当前服务的接入地址请参见 服务接入点。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动...
COVAR_SAMP
在同一条SQL语句中同时使用多个聚合函数时，如果项目资源不足，会出现内存溢出问题，请您根据实际业务情况优化SQL或购买计算资源。命令格式 double covar_samp(,)参数说明 colname1、colname2：必填。数据类型为数值类型的列。其他类型返回...
消费监控告警
MaxCompute提供如下消费监控告警方式：单SQL消费限制：MaxCompute支持在执行SQL语句前预估SQL语句的消费（包括使用后付费和包年包月计算资源的SQL）。当预估消费超出设定的阈值时，SQL语句执行受限，系统返回失败状态并给出失败信息。您...
计费常见问题
如果您需要控制SQL作业的计算成本，请参见 计算成本优化。通过DataWorks执行补数据操作后，为什么费用会产生较大波动？DataWorks会在您定义的补数据时间区间内的每个调度周期都运行一次补数据操作。例如补30天的数据，调度周期为天，则补...
SQL处理优化
为了方便用户操作Transactional Table 2.0，MaxCompute计算引擎对SQL全套的数据查询DQL语法和数据操作DML语法进行了支持，并且SQL引擎内核模块包括Compiler、Optimizer、Runtime等都做了专门适配开发以支持相关功能和优化。本文为您介绍...
COVAR_POP
在同一条SQL语句中同时使用多个聚合函数时，如果项目资源不足，会出现内存溢出问题，请您根据实际业务情况优化SQL或购买计算资源。命令格式 double covar_pop(,)参数说明 colname1、colname2：必填。数据类型为数值类型的列。其他类型返回...
V5.3.x系列实例版本说明
V5.3.2-1645122 日期 2018.07.05 类别 说明 修复问题 修复带有Outline的SQL在高并发场景因无法生效而产生不合预期的执行计划的问题。修复事务中单个物理库的SELECT因使用并行查询策略导致拿物理连接报错的问题。V5.3.2-1623342 日期 2018....
ANY_VALUE
在同一条SQL语句中同时使用多个聚合函数时，如果项目资源不足，会出现内存溢出问题，请您根据实际业务情况优化SQL或购买计算资源。命令格式 any_value()参数说明 colname：必填。可以为任意类型。返回值说明 返回值类型同 colname 对应值...
- 产品推荐
- 这些文档可能帮助您