2021年
本次发布两种构建湖仓一体的方式：与阿里云OSS+DLF构建湖仓一体能力：通过MaxCompute和OSS实现。该方式需要配套使用阿里云产品数据湖构建DLF（Data Lake Formation）。数据湖的元数据（Schema）全部位于DLF中。MaxCompute可以利用DLF对湖...
Oracle同步至Tablestore
本文以Oracle同步至表格存储Tablestore场景为例，为您介绍如何通过数据集成将Oracle的某张表数据实时同步到Tablestore。使用限制 本实践仅支持使用 独享数据集成资源组。前提条件 已完成来源数据源、去向数据源的配置。本实践以Oracle作为...
如何对JSON类型进行高效分析
PolarDB IMCI实现完整虚拟列功能，支持两种Generated Column：Virtual Generated Column（默认）与Stored Generated Column。其中Virtual只会将Generated Column计算后值持久化到列存，但不会持久化到行存，每次行存读取时会重新实时计算；...
INSERT ON CONFLICT(UPSERT)
更新后test1表的数据为：a b c 1 2 3 场景2：实现InsertOrUpdate的整行更新，可以通过如下两种方式实现。方式1：在 SET.EXCLUDED 中列出所有的列。INSERT INTO test1(a,b,c)VALUES(1,1,1)ON CONFLICT(a)DO UPDATE SET b=EXCLUDED.b,c=...
事件仪表盘
过滤器 打开 过滤器，选择已创建的数据过滤器或新建数据过滤器，并配置数据过滤器脚本，实现数据的筛选功能。详情请参见 管理数据过滤器。数据响应结果 实时展示了组件所使用的数据。当组件数据源发生变化时，数据响应结果会对应展示最新的...
新建表
外键约束：在两个表的数据之间建立连接（可为一列或多列），旨在保持关联表之间数据的一致性、完整性。设置完成后不支持新增和编辑。检查约束：在编辑数据库数据时，按照设置的检查规则进行校验，校验通过才允许数据修改操作。由于 ...
数据重排
使用示例 本文将MaxCompute公共数据集TPC-DS中1 TB规格的 customer 表分别以 DISTRIBUTE BY+SORT BY、CLUSTER BY 两种排序方法重排后写入新的数据表，比较写入前后表的大小以验证存储优化效果，MaxCompute公共数据集TPC-DS详情请参见 TPC-...
Join优化
物理算子支持 SelectDB支持如下两种物理Join算子，用于实现单机引擎中数据进行Join的处理过程。Hash Join：在右表上根据等值Join列建立哈希表，左表流式的利用哈希表进行Join计算，这个算子只适用于等值Join。Nest Loop Join：通过两个for...
快速入门综述
分析型数据库MySQL版（AnalyticDB MySQL版）是一种高并发低延时的PB级实时数据仓库，全面兼容MySQL协议以及SQL 2003语法标准，可以毫秒级针对万亿级数据进行即时的多维分析透视和业务探索。前提条件 先注册阿里云账号。如果以按量付费方式...
设置关联数据源及其启停状态
在 编辑数据目的 面板的 关联数据源 的下拉列表框，通过以下操作，更新关联的数据源。添加数据源：单击下拉列表框，选择数据源。重要 一个数据目的中最多可以关联10个数据源。删除数据源：在下拉列表框，单击已选择数据源的删除 图标。在 ...
如何实现两表关联查询
具体实现步骤如下：为需要进行关联查询的两个数据表分别创建映射关系。具体操作，请参见 创建表的映射关系。在SELECT语句中使用Join操作进行两表关联查询。具体操作，请参见 查询数据 和 Join。进行两表关联查询时可选的Join类型包括INNER ...
使用ETL分析实时订单
维表：更新不频繁（非实时更新）的表，一般用于结合实时数据拼装成宽表进行数据分析。转换格式 ETL在处理数据时会将流转换为动态表，在该动态表上进行持续查询（即动态表会被INSERT、UPDATE、DELETE操作持续更改），产生一个新的动态表。...
文档更新动态（2024年）
更新说明 设置Dataphin实例的计算引擎为MaxCompute 管理中心-研发平台 新增排他编辑锁配置，开启后，开发平台编辑任务时，不支持被其他用户抢锁，可由锁定人主动释放锁，从而减少被抢锁后已修改内容丢失或覆盖更新的问题的产生。...
JindoCube使用说明
相关页面如下：定期更新的相关用户选项如下：参数 描述 Save Mode 支持Overwrite和Append两种模式。Overwrite：会覆盖之前曾经构建的Cache数据。Append：会新增数据到Cache中。Trigger Strategy 触发策略，设置触发构建任务的开始时间和...
JindoCube使用说明
相关页面如下：定期更新的相关用户选项如下：参数 描述 Save Mode 支持Overwrite和Append两种模式。Overwrite：会覆盖之前曾经构建的Cache数据。Append：会新增数据到Cache中。Trigger Strategy 触发策略，设置触发构建任务的开始时间和...
JindoCube使用说明
相关页面如下：定期更新的相关用户选项如下：参数 描述 Save Mode 支持Overwrite和Append两种模式。Overwrite：会覆盖之前曾经构建的Cache数据。Append：会新增数据到Cache中。Trigger Strategy 触发策略，设置触发构建任务的开始时间和...
JindoCube使用说明
相关页面如下：定期更新的相关用户选项如下：参数 描述 Save Mode 支持Overwrite和Append两种模式。Overwrite：会覆盖之前曾经构建的Cache数据。Append：会新增数据到Cache中。Trigger Strategy 触发策略，设置触发构建任务的开始时间和...
JindoCube使用说明
相关页面如下：定期更新的相关用户选项如下：参数 描述 Save Mode 支持Overwrite和Append两种模式。Overwrite：会覆盖之前曾经构建的Cache数据。Append：会新增数据到Cache中。Trigger Strategy 触发策略，设置触发构建任务的开始时间和...
JindoCube使用说明
相关页面如下：定期更新的相关用户选项如下：参数 描述 Save Mode 支持Overwrite和Append两种模式。Overwrite：会覆盖之前曾经构建的Cache数据。Append：会新增数据到Cache中。Trigger Strategy 触发策略，设置触发构建任务的开始时间和...
JindoCube使用说明
相关页面如下：定期更新的相关用户选项如下：参数 描述 Save Mode 支持Overwrite和Append两种模式。Overwrite：会覆盖之前曾经构建的Cache数据。Append：会新增数据到Cache中。Trigger Strategy 触发策略，设置触发构建任务的开始时间和...
更新或删除数据（UPDATE|DELETE）
本文中的命令您可以在如下工具平台执行：MaxCompute客户端 使用SQL分析连接 使用云命令行（odpscmd）连接 使用DataWorks连接 MaxCompute Studio 前提条件 执行 delete、update 操作前需要具备目标Transactional表的读取表数据权限（Select...
表格数据管理
本文用于介绍表格问答表格数据导入与管理功能使用方法。功能概述 表格问答能力是系统算法运用“给定的表格”的基础上形成的，表格数据管理 则是用于“给定表格”。在表格数据管理中，集合了有关表格数据的 新增、编辑、删除与更新 等功能，...
创建表组
表组是一系列可发生关联的数据表的集合，分析型数据库MySQL版（AnalyticDB MySQL版）为管理相关联的数据表，引入表组的概念。说明 创建 AnalyticDB MySQL版 数据库时，系统自动创建维度表组。注意事项 表组名以字母开头，字母或数字结尾...
DQL操作常见问题
解决措施 如果您的使用场景确实需要ORDER BY放开LIMIT限制，可以通过如下两种方式实现：Project级别：设置 setproject odps.sql.validate.orderby.limit=false;关闭 order by 必须带 limit 的限制。Session级别：设置 set odps.sql....
约束
（上面关于不引用其他表数据的警告实际上是此限制的特殊情况。打破此假设的常见方法的一个示例是在 CHECK 表达式中引用用户定义的函数，然后更改该函数的行为。本数据库不会禁止那样，但它不会注意到现在表中是否有行违反了 CHECK 约束。这...
Hologres推荐的数仓分层
场景选择原则 当数据写入Hologres之后，Hologres里定义了三种实现实时数仓的方式：实时要求非常高，要求写入即可查，更新即反馈，有即席查询需求，且资源较为充足，查询复杂度较低，适合 实时数仓场景一：即席查询。有实时需求，以分析为主...
UDT概述
您可以使用以下两种方法：通过UDT功能在SQL语句中直接调用 java.lang。打开新类型，因为下面的操作会用到INTEGER，即INT类型。set odps.sql.type.system.odps2=true;SELECT java.lang.Integer.MAX_VALUE;和Java语言一样，java.lang 包可以...
基于DLF、RDS或Flink、OSS支持Delta Lake或Hudi存储...
数据湖存储与管理 对象存储OSS 数据湖构建DLF 将在线数据库中的源数据引入数据湖时，OSS会作为数据湖的统一存储，存储机制包含Delta Lake和Hudi两种。同时，DLF采用元数据管理功能管理元数据库和元数据表。数据湖探索与分析 MaxCompute ...
列存索引中GroupJoin算子的实现
本文介绍了 PolarDB IMCI中GroupJoin算子的一些限制条件和实现方式，以及其他数据的一些相关实现。阅读本文前请先了解基础的HASH JOIN与HASH GROUP BY算法。背景 SELECT key1,SUM(sales)as total_sales FROM fact_table LEFT JOIN ...
功能更新动态（2024年）
设置Dataphin实例的计算引擎为MaxCompute 研发平台设置 新增排他编辑锁配置，开启后，开发平台编辑任务时，不支持被其他用户抢锁，可由锁定人主动释放锁，从而减少被抢锁后已修改内容丢失或覆盖更新的问题产生。支持的研发对象范围包括：...
数据加密
全密态功能根据实例类型不同，可通过以下两种方案实现：Intel SGX 安全增强型实例：全密态功能可以利用该规格为用户提供基于可信执行环境（Trusted Execution Environment，简称TEE）的数据安全保护。此时，全密态功能支持对密文数据进行...
数据加密
全密态功能根据实例类型不同，可通过以下两种方案实现：Intel SGX 安全增强型实例：全密态功能可以利用该规格为用户提供基于可信执行环境（Trusted Execution Environment，简称TEE）的数据安全保护。此时，全密态功能支持对密文数据进行...
数据加密
全密态功能根据实例类型不同，可通过以下两种方案实现：Intel SGX 安全增强型实例：全密态功能可以利用该规格为用户提供基于可信执行环境（Trusted Execution Environment，简称TEE）的数据安全保护。此时，全密态功能支持对密文数据进行...
数据加密
全密态功能根据实例类型不同，可通过以下两种方案实现：Intel SGX 安全增强型实例：全密态功能可以利用该规格为用户提供基于可信执行环境（Trusted Execution Environment，简称TEE）的数据安全保护。此时，全密态功能支持对密文数据进行...
数据加密
全密态功能根据实例类型不同，可通过以下两种方案实现：Intel SGX 安全增强型实例：全密态功能可以利用该规格为用户提供基于可信执行环境（Trusted Execution Environment，简称TEE）的数据安全保护。此时，全密态功能支持对密文数据进行...
查询结果不符合预期的常见原因
在使用Lindorm宽表引擎的过程中，如果使用方法不当，可能会出现查询结果与预期不符的情况。本文列举了导致此类问题产生的几种常见原因，请您根据原因进行排查，优化查询条件。问题描述 Lindorm宽表引擎是兼容HBase的NoSQL数据引擎，其存储...
交叉透视表
本文介绍交叉透视表全量选择时各配置项的含义。图表样式 交叉透视表是表格组件的一种，支持数据内容的自定义展示，能够将数据信息以表格的形式清晰地展示在可视化应用上。样式面板 搜索配置：单击 样式 面板右上角的搜索配置项图标，可在...
恢复库表
极速库表恢复 本地盘实例的极速库表恢复功能分免费版和付费版两种，具体收费详情如下（云盘实例不支持极速库表恢复功能）：免费版：开启及使用极速库表恢复（免费版），不收取任何费用。付费版：开启及使用极速库表恢复（付费版）后，将...
Hudi概述
Apache Hudi是一种数据湖的存储格式，在Hadoop文件系统之上提供了更新数据和删除数据的能力以及消费变化数据的能力。Hudi表类型 Hudi支持如下两种表类型：Copy On Write 使用Parquet格式存储数据。Copy On Write表的更新操作需要通过重写...
配置全局参数
全局参数的作用对象目前主要有以下两种：查询控件：查询控件接受到全局参数后，会直接以全局参数注入的条件作为默认值，绑定到某个具体的子组件上。说明 实际作用的图表还需要依赖于对应子组件选择的作用范围。因为只是改变了默认值，所以...
- 产品推荐
- 这些文档可能帮助您