DataWorks V2.0
DataWorks V2.0版本操作差异 您可参见DataWorks V2.0系列详解视频，对DataWorks V2.0各功能模块的特性进行深入学习：DataWorks V2.0数据开发功能与用法解析 DataWorks V2.0数据集成简介与最佳实践 DataWorks V2.0智能监控简介与最佳实践 ...
用自然语言实时查看BI报表
背景 为了让不熟悉SQL语言的用户能方便地从数据库中取数分析，PolarDB for AI联合达摩院推出自研的自然语言到数据库查询语言转义（Nature Language To SQL，简称 NL2SQL）能力。PolarDB for AI会将用户输入的自然语言（中文或英文）自动...
NL2BI：用自然语言实时查看BI报表
背景 为了让不熟悉SQL语言的用户能方便地从数据库中取数分析，PolarDB for AI联合达摩院推出自研的自然语言到数据库查询语言转义（Nature Language To SQL，简称 NL2SQL）能力。PolarDB for AI会将用户输入的自然语言（中文或英文）自动...
数据分析作业
更多SQL查询的操作指导请参见 SQL查询。使用DataWorks的临时查询 如果您是在使用DataWorks的DataStudio进行数据开发，过程中需要做一些简单的调试分析查询，您可以使用DataWorks的临时查询功能，临时查询的操作指导请参见 创建临时查询。
RDS SQL Server同步至云原生数据仓库AnalyticDB ...
数据传输服务DTS（Data Transmission Service）支持将 RDS SQL Server 实例的数据同步至 云原生数据仓库AnalyticDB PostgreSQL版，帮助您轻松实现数据的流转。通过 AnalyticDB PostgreSQL版 提供的数据在线分析服务和离线数据处理功能，您...
RDS SQL Server同步至云原生数据仓库 AnalyticDB ...
数据传输服务DTS（Data Transmission Service）支持将 RDS SQL Server 实例的数据同步至 云原生数据仓库AnalyticDB PostgreSQL版，帮助您轻松实现数据的流转。通过 AnalyticDB PostgreSQL版 提供的数据在线分析服务和离线数据处理功能，您...
RDS SQL Server同步至云原生数据仓库 AnalyticDB ...
数据传输服务DTS（Data Transmission Service）支持将 RDS SQL Server 同步至 云原生数据仓库AnalyticDB MySQL版 3.0，帮助您轻松实现数据的传输，用于实时数据分析。前提条件 已创建源 RDS SQL Server 实例，支持的版本，请参见 同步方案...
RDS SQL Server同步至云原生数据仓库 AnalyticDB ...
数据传输服务DTS（Data Transmission Service）支持将 RDS SQL Server 同步至 云原生数据仓库AnalyticDB MySQL版 3.0，帮助您轻松实现数据的传输，用于实时数据分析。前提条件 已创建源 RDS SQL Server 实例，支持的版本，请参见 同步方案...
管理健康报告
该健康报告提供了前一天（T+1）的数据，并包括SQL查询、表分析和导入任务三个核心部分。查看健康报告 进入EMR Serverless StarRocks实例列表页面。登录 E-MapReduce控制台。在左侧导航栏，选择 EMR Serverless>StarRocks。在顶部菜单栏处，...
新功能发布记录
此功能涵盖了字段的基本分布情况、各种统计指标以及TOP5的时间序列图，为用户提供了深入的数据洞察和可视化工具，便于理解和挖掘。全部地域 字段分析 2024年2月 功能名称 功能描述 支持地域 相关文档 导入Amazon S3文件 阿里云日志服务SLS...
SQL查询
数据源查询 在数据分析查询引擎绑定时自动创建的MaxCompute数据源，默认使用个人账号执行任务，如果要访问生产表，您需在SQL命令中指定生产项目名称，若查询的表数据无权限，请前往 安全中心 进行申请。数据源白名单访问控制 当使用数据...
SQL洞察
SQL洞察是一种可视化的分析工具和技术，用于深入了解SQL查询的行为和性能特点，可以帮助数据库管理员和开发者了解SQL查询的具体执行情况，如查询的耗时、资源占用等详细信息。通过SQL洞察功能，可以实时监控SQL的运行状态，并基于这些数据...
时序引擎版本说明
修复进行删除操作后新写入的数据无法查询的问题。优化读写性能，稳定性修复。3.4.34 发布日期 类型 说明 2023年11月02日 功能优化 稳定性修复。3.4.33 发布日期 类型 说明 2023年10月11日 功能优化 优化内存使用体验。优化查询性能。完善...
SQL查询
SQL查询为多数据引擎提供统一的访问接口。通过SQL查询功能，您可以对表格存储中数据进行复杂的查询和高效的分析。SQL查询在车联网场景中作为不同类型数据的统一查询接口。概述 SQL查询兼容MySQL的查询语法，同时提供基础的SQL DDL建表能力...
PolarDB MySQL版8.0.1版本发布日志
修复在CTE（Common Table Expression）中多处引用基于TempTable引擎的临时表，并且在临时表上使用索引扫描时，可能导致节点崩溃的问题。修复列存索引在处理超长字符串类型时出现的内存越界问题。修复在使用列存索引功能时，同时打开预读...
宽表引擎版本说明
2.2.15 2021年10月18日 功能优化 优化 Lindorm SQL 的使用，修复某种情况下建表失败和强一致表访问失败的问题。建议升级至此版本以上。2.2.12 2021年09月06日 功能优化 优化compaction策略，提高效率。优化Scan返回的数据量。2.2.11 2021年...
功能特性
结构设计 结构同步 支持对比不同数据库、指定表之间的表结构，产生差异化脚本并执行到目标数据库。结构同步 空库初始化 支持将源数据库的表结构同步至空数据库中（数据库中不存在任何表），实现快速同步数据库表结构，适用部署多区域、多...
Serverless Presto概述
Presto开发的初衷就是为了解决使用Hive来进行在线分析速度太慢的问题，因此它采用全内存流水线化的执行引擎，相较于其它引擎会把中间数据落盘的执行方式，Presto在执行速度上有很大的优势，特别适合用来做Adhoc查询、BI分析、轻量级ETL等...
PolarDB MySQL版8.0.2版本发布日志
支持在SQL Trace中配置跟踪慢查询的执行信息。2024-04-17 问题修复 修复Statement Outline和Concurrency Control等功能在执行Reload操作时，出现的内存泄漏的问题。修复左连接 INFORMATION_SCHEMA 库中的表时结果错误的问题。修复了当已...
管控模式
可视化数据查询结果呈现 Y Y Y SQL格式化 Y Y Y SQL智能提示 Y Y Y 表结构管理 表结构对比 Y Y Y 表结构编辑 Y Y Y 表结构同步 Y Y Y 数据字典导出 5个 无限制 无限制 表结构设计规范 N N Y 表结构研发流程 N N 支持跨云账号、跨数据库和自...
数据库自治服务的审计事件
操作审计记录了用户通过OpenAPI或控制台等方式操作云资源时产生的管控事件，数据库自治服务支持在操作审计中查询的事件如下表所示，部分事件缺少的事件含义后续将逐步完善。事件名称 事件含义 AccessAliyunECSDBInstance 获取ECS数据库实例...
开发ODPS SQL任务
DataWorks为您提供ODPS SQL节点，可用于周期性调度MaxCompute的SQL任务，并完成与其他类型节点的集成和联合调度。MaxCompute SQL任务采用类似SQL的语法，适用于海量数据（TB级）但实时性要求不高的分布式处理场景。本文为您介绍在DataWorks...
开发ODPS SQL任务
DataWorks为您提供ODPS SQL节点，可用于周期性调度MaxCompute的SQL任务，并完成与其他类型节点的集成和联合调度。MaxCompute SQL任务采用类似SQL的语法，适用于海量数据（TB级）但实时性要求不高的分布式处理场景。本文为您介绍在DataWorks...
新功能发布记录
无 Spark Distribution SQL Engine AnalyticDB for MySQL Spark提供Spark开源原生能力Distribution SQL Engine的托管服务，支持通过Spark Distribution SQL Engine开发Spark SQL作业，从而更方便地利用SQL分析、处理和查询数据，提升SQL...
深度解析PolarDB数据库并行查询技术
选择多表并行的JOIN 并行扫描不仅支持一张表，也支持SQL中有2张或更多的FACT表进行并行扫描，示例如下：SELECT o.o_custkey,sum(l.l_extendedprice)as s FROM orders o,lineitem l WHERE o.o_custkey=l.l_orderkey GROUP BY o.o_custkey ...
应用场景
多源联合分析 该场景需要解决云上企业构建数据仓库时配置数据同步链路繁杂的问题，以及分库分表所带来的数据分析复杂性问题，让用户可以更专注于业务逻辑。该场景可实现：支持多数据源接入 支持数据库（RDS、PolarDB-X（原DRDS）、PolarDB...
Explain和Explain Analyze
当SQL查询性能不佳或查询结果不符合预期时，Hologres提供了Explain和Explain Analyze命令用于分析查询语句执行计划，可以帮助您了解Hologres如何执行查询语句，以便您对查询语句或数据库结构进行调整优化。本文介绍在Hologres中通过Explain...
MaxCompute数据开发规范
本文为您介绍MaxCompute数据开发规范，包括项目空间、表、视图、工作流节点和编码规范。在进行数据开发前，请做好数据仓库研发流程的阶段规划，了解各种角色及其职责，具体内容请参见 数据仓库研发规范概述。项目空间管理规范 关于项目划分...
使用Hologres实现分页
建议先把复杂SQL子查询的结果写入一张临时表中，然后查询操作基于该临时表进行，对应的SQL步骤如下：为了避免每次子查询都创建一张临时表，导致临时表泛滥，可以事先建立一张临时表。begin create table query_result_table_tmp(query_id ...
解决SQL Server表中的中文乱码问题
解决方法 为了解决在SQL Server表中查询生僻字出现乱码的问题，您需要使用Unicode编码格式的数据类型，例如NVARCHAR，并在向该数据类型插入数据时，使用前置词N。N代表国家语言，必须大写。如果没有使用前置词N，则SQL Server会将字符串...
离线同步数据质量排查
任务配置并发读取时会切分出多个分片查询SQL，由于数据库事务一致性策略，每个查询SQL查询的都是当前提交时的数据快照，并且多个SQL并不在一个事务上下文内。因此在源头数据变化时会同步不到查询SQL之后的变化。这类原因导致的问题一般是...
如何对JSON类型进行高效分析
本文介绍了PolarDB IMCI为应对海量结构化与半结构化数据分析场景，通过整合列式JSON、虚拟列、秒级加减列、表列数扩展及列存索引等系列功能而构建出的扩展流计算方案，以及该方案的应用案例。背景 随着应用场景多样化与快速迭代，业务系统...
公告
MaxCompute在使用SQL UDF和外部表场景下，提供了SQL反向访问VPC的设置方法，支持UDF和外部表访问VPC中的服务，这里分别介绍两种场景的设置升级方法。UDF场景 在执行包含UDF的SQL任务时，若您是通过以下参数指定UDF访问的VPC以及对应的IP...
Quick BI中sql参数如何搭配字段控件一起使用
产品名称 Quick BI 产品模块 仪表板，可视化分析 概述 本文为您介绍Quick BI中sql参数如何搭配字段控件一起使用。问题描述 sql参数如何搭配字段控件一起使用。问题原因 不清楚sql参数和字段控件在使用时的区别。解决方案 1.首先明确sql参数...
Quick BI的新交叉表中设置查询条件后查询数据慢，查看...
问题描述 在Quick BI中新交叉表中设置查询条件之后，查询比较慢，查看SQL打印生成多条SQL语句。问题原因 Quick BI中的新交叉表是有特殊逻辑的，设置多个查询条件时，会导致有多条SQL语句的生成。新交叉表为了计算总计小计以及分组这些功能...
一键诊断
一键诊断 功能，可针对指定时间段的集群运行状况发起诊断，结合监控数据、日志数据以及库表状态等信息进行联合分析，从集群的资源水位、负载变化、查询SQL、算子、存储等多方面评估集群的健康状况，帮助您提高集群问题排查、分析效率。...
表批读写
与不指定路径的内部表不同，当您使用DROP表时，不会删除外部表的文件 如果运行CREATE TABLE的位置已经包含使用Delta Lake存储的数据，Delta Lake将执行以下操作：如果只指定表名和位置，例如：SQL%sql CREATE TABLE events USING DELTA ...
列存索引技术架构介绍
在处理大数据量下复杂查询所需要的能力方面，如优化器处理子查询的能力、高性能算子HashJoin、SQL并行执行能力等，MySQL社区一直将其放在比较低优先级上，因此，MySQL的数据分析能力提升进展缓慢。随着MySQL发展为世界上最为流行的开源数据...
PolarDB HTAP实时数据分析技术解密
并行查询的加入使得PolarDB突破了单核执行性能的限制，利用多核CPU的并行处理能力，PolarDB部分SQL查询耗时成指数级下降。Why We Need Column-Store 并行执行框架突破了CPU扩展能力的限制，带来了显著的性能提升。然而受限于行式存储及行式...
8.0.1和8.0.2版功能对比
PolarDB for MySQL 8.0.1版和8.0.2版在功能上存在一些差异，包括Warm Buffer Pool、Hash Join、弹性并行查询、执行器增强、优化器增强、分区表、多主集群（库表）、Blink Tree等方面的差异。本文介绍这两个版本的功能区别，以便您基于业务...
- 产品推荐
- 这些文档可能帮助您