一站式HTAP服务
背景信息 PolarDB PostgreSQL版 是擅长事务处理的OLTP数据库，将每一行数据以连续的形式保存在存储介质上，使用迭代器模型的执行器对数据进行增删改查。这种存储形式和执行模型能够很高效地完成高并发的事务处理负载，但无法高效应对大规模...
MaxCompute物理表和字段详情
反馈质量问题：您可以通过该功能向当前质量负责人反馈在使用资产过程中遇到的质量问题（如数据产出不稳定、数据内容不准确等），以通知相关负责人及时进行整改，从而推动提升资产可用性和健康度。配置详情请参见 添加并管理问题清单。您...
Hologres物理表和字段详情
反馈质量问题：您可以通过该功能向当前质量负责人反馈在使用资产过程中遇到的质量问题（如数据产出不稳定、数据内容不准确等），以通知相关负责人及时进行整改，从而推动提升资产可用性和健康度。配置详情请参见 添加并管理问题清单。您...
基于DLF、RDS或Flink、OSS支持Delta Lake或Hudi存储...
Delta Lake和Hudi是数据湖方案中常用的存储机制，为数据湖提供流处理、批处理能力。MaxCompute基于阿里云DLF、RDS或Flink、OSS产品提供了支持Delta或Hudi存储机制的湖仓一体架构。您可以通过MaxCompute查询到实时数据，即时洞察业务数据...
SQL查询介绍
通过控制台使用SQL查询 通过命令行工具使用SQL查询 使用SDK 通过JDBC使用SQL查询 JDBC连接表格存储 通过Hibernate使用 通过MyBatis使用 使用Go语言驱动 计费说明 SQL本身不会有额外的费用，但是使用SQL查询数据过程中涉及到的表扫描、索引...
什么是EMR Serverless StarRocks
您无需在上游应用中进行数据转换操作，便可以直接在使用物化视图的过程中实现数据的转换与加工，简化了数据处理流程。数据湖分析 StarRocks不仅能高效地分析本地存储的数据，也可以作为计算引擎直接分析数据湖中的数据。您可以通过...
Iceberg概述
而Iceberg简化了工作流程，整个数据处理过程是一条完整的、可靠的实时流，其数据的清洗、转换和特征化等操作都是流上的节点动作，无需处理历史数据和实时数据。此外，Iceberg还支持原生的Python SDK，对于机器学习算法的开发者非常友好。
SQL洞察和审计
当您在安全合规审计、性能分析、故障排除等场景下需要监控和管理RDS MySQL实例中执行的SQL语句时，可以利用SQL洞察和审计功能对SQL语句的执行情况进行记录和聚合分析。开启该功能后会自动记录来自数据库内核的SQL语句，以及SQL语句的执行...
SQL洞察和审计
当您在安全合规审计、性能分析、故障排除等场景下需要监控和管理RDS MySQL实例中执行的SQL语句时，可以利用SQL洞察和审计功能对SQL语句的执行情况进行记录和聚合分析。开启该功能后会自动记录来自数据库内核的SQL语句，以及SQL语句的执行...
概览
暂不支持 使用COPY ON CONFLICT覆盖导入数据 使用COPY命令快速导入数据的过程中，如果数据与表的约束冲突，会导致COPY命令报错退出。AnalyticDB PostgreSQL版 提供了COPY ON CONFLICT功能，可以让数据COPY不会因为约束冲突导致失败。暂不...
元表和字段资产详情
反馈质量问题：您可以通过该功能向当前质量负责人反馈在使用资产过程中遇到的质量问题（如数据产出不稳定、数据内容不准确等），以通知相关负责人及时进行整改，从而推动提升资产可用性和健康度。配置详情请参见 添加并管理问题清单。您...
无效映射关系管理
无效映射关系为您展示已生效数据标准和资产对象的映射关系，映射规则执行将会过滤无效映射的资产，也不会基于该映射关系进行落标监控评估，也不会生成落标评估明细，本文为您介绍如何查看、新增和管理无效映射关系。权限说明 超级管理员、...
无效映射关系管理
无效映射关系为您展示已生效数据标准和资产对象的映射关系，映射规则执行将会过滤无效映射的资产，也不会基于该映射关系进行落标监控评估，也不会生成落标评估明细，本文为您介绍如何查看、新增和管理无效映射关系。权限说明 超级管理员、...
新功能发布记录
备份恢复计费说明 备份恢复概览 备份策略 2023 年 3 月 17 日 功能描述 相关文档 开发者中心使用指南 支持数据脱敏，提供数据静态脱敏功能，在数据导出、结果集导出等场景支持开启数据脱敏策略。例如：ODC 支持对邮箱、银行卡号、固定电话...
减灾与应急时空解决方案与案例
公司主营OpenRIS灾害风险大数据平台提供了海量灾害数据的快速地图展示、统计查询、切割下载、上传数据定制化在线分析等功能，实现了灾害数据与模型一体化云服务。在数据与系统上云过程前，遇到了如下挑战：长期积累的时空数据类型多、数据...
导出数据
导出整个数据库 支持导出整个数据库的表结构、数据、以及存储过程、函数、触发器、视图事件等结构类型。登录 数据管理DMS 5.0。在页面左侧的 数据库实例 列表区域，找到目标数据库。左键双击数据库名称，进入SQL Console。右键单击目标表，...
2021年
云原生多模数据库Lindorm是面向物联网、互联网、车联网等设计和优化的，支持宽表、时序、文本、对象、流、空间等多种数据的统一访问和处理的云原生多模超融合数据库。在很多应用场景中需要把HBase增强版或者Lindorm的数据导入到MaxCompute...
通过命令行工具使用宽表模型
通过Tablestore CLI使用 表格存储 宽表模型（WideColumn）时，您需要根据所用平台下载相应命令行工具，然后使用命令行工具进行开通表格存储服务、创建实例、配置接入实例信息、创建数据表、读写表中数据以及使用SQL查询数据的操作。...
DataWorks数据服务对接DataV最佳实践
MaxCompute服务于批量结构化数据的存储和计算，已经连续多年稳定支撑阿里巴巴全部的离线分析业务。过去，如果您想要通过DataV展示海量数据的分析结果，需要自建一套离线数据计算自动导入MySQL的任务流程，过程繁琐且成本高。现在通过...
2020年
polar_utility 存储过程 存储过程允许返回holdable refcursor。无 DBMS_JOB包 新增DBMS_JOB包，您可以通过高权限账号进行调用或跨库调度。DBMS_JOB 优化 UTL_ENCODE 新建的普通用户支持使用UTL_ENCODE插件。UTL_ENCODE polar_agg插件 polar...
MaxCompute账单用量明细分析
如果您想了解费用的分布情况并避免在使用MaxCompute产品时费用超出预期，您可以通过获取MaxCompute账单并进行分析，为资源使用率最大化及降低成本提供有效支撑。本文为您介绍如何通过用量明细表分析MaxCompute的费用分布情况。背景信息 ...
逻辑表和字段资产详情
反馈质量问题：您可以通过该功能向当前质量负责人反馈在使用资产过程中遇到的质量问题（如数据产出不稳定、数据内容不准确等），以通知相关负责人及时进行整改，从而推动提升资产可用性和健康度。配置详情请参见 添加并管理问题清单。您...
数据脱敏
源数据库/项目名 是 选择包含脱敏数据的表所在的项目名称。源表名 是 选择脱敏数据所在的数据表名称。源分区 否 输入需要脱敏的数据在数据表中的分区名称。分区是指在创建MaxCompute数据表时指定的分区空间，用于限定不同区域，方便快速和...
如何查看表的数据存储量
介绍如何查看表的数据存储量。操作步骤 通过控制台在数据表的 基本详情 页签，可以查看表大小，即表的数据存储量。通过控制台在数据表的 监控指标 页签，选择 指标分组 为 表大小，可以查看表大小，即表的数据存储量。
2021年
新功能 Delta Lake和Hudi是数据湖方案中常用的存储机制，为数据湖提供流处理、批处理能力。MaxCompute基于阿里云DLF、RDS、OSS产品提供了支持Delta或Hudi存储机制的湖仓一体架构。基于DLF、RDS、OSS支持Delta Lake或Hudi存储机制 2021-08-...
什么是MaxCompute
以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化用户运维投入，使您可以经济并高效地分析处理海量数据。随着数据收集手段不断丰富，行业数据大量积累，数据规模已增长到了...
使用须知
增强操作 支持通过命令导入导出MaxCompute表中的数据、复制表数据等SQL增强操作。内建函数 支持通过内建数学函数、窗口函数、日期函数、聚合函数、字符串函数等处理数据。UDF 支持通过创建自定义函数来满足更多的计算需求。如果您拥有一定...
有效映射关系管理
有效映射关系是基于配置的落标映射规则自动生成或手动配置添加的数据标准和资产对象之间的映射关系，可用于描述资产对象应该遵循某个数据标准，或数据标准被某个资产对象关联遵循，是进行落标监控的前提条件。本文为您介绍如何管理有效映射...
有效映射关系管理
有效映射关系是基于配置的落标映射规则自动生成或手动配置添加的数据标准和资产对象之间的映射关系，可用于描述资产对象应该遵循某个数据标准，或数据标准被某个资产对象关联遵循，是进行落标监控的前提条件。本文为您介绍如何管理有效映射...
并发导出数据
重要 表格存储 Java SDK从5.6.0版本开始支持并发导出数据功能。使用并发导出数据功能时，请确保获取了正确的Java SDK版本。关于Java SDK历史迭代版本的更多信息，请参见 Java SDK历史迭代版本。背景 多元索引中提供了Search接口，Search...
文档修订记录
Tablestore数据源 Tablestore Stream数据源 2023.4.7 新增功能 数据集成 DataWorks数据集成支持使用IoT Reader插件读取物联网企业实例数据服务中提供的系统表、产品表、自定义存储表。IoT数据源 2023年3月更新记录 时间 特性 类别 描述 ...
基本概念
L 流引擎 面向流式数据处理的引擎，提供了流式数据的存储和轻计算功能，帮助您轻松实现流式数据存储至 云原生多模数据库 Lindorm，构建基于流式数据的处理和应用。更多信息，请参见 流引擎介绍。逻辑I/O 由应用程序发给文件系统的读写操作...
功能发布记录 2022年之前
DataWorks的数据治理中心从全局视角、工作空间视角、个人视角，自动发现并量化平台使用过程中数据存储、任务计算、代码开发、数据质量及数据安全等维度存在的待治理问题，并通过健康分模型进行统计，以治理报告及治理排行榜的形式呈现治理...
CreateDataFlow-创建数据流动
创建一个CPFS文件系统与源端存储的数据流动。接口说明 基础操作 文件存储 CPFS 2.2.0 及以上版本、智算 CPFS 2.4.0 及以上版本支持数据流动。文件存储 CPFS、CPFS 智算版状态为运行中，才能创建数据流动。一个文件存储 CPFS 或者 CPFS 智算...
Serverless模式
AnalyticDB PostgreSQL版 全新推出Serverless模式，利用云基础设施提供的资源池化和海量存储能力，结合传统MPP数据库技术、离在线一体化技术和Serverless技术，实现了计算存储分离、秒级扩缩容和多实例数据实时共享的特性。简介 AnalyticDB...
企业版和标准版功能对比
支持 支持 库表恢复 PolarDB 提供的库表恢复功能，不会覆盖和删除原集群中已有的库表，不会将数据写入原集群的库表中，而是在原集群中新建库表。您可以在库表恢复过程中指定新的库名或表名，通过指定库和表的方式，将db1的备份数据恢复到db...
导入与导出
整库同步：在AnalyticDB MySQL中新建一张表，表名要不同于报错的表，表结构需要和源表的表结构一致，通过 INSERT INTO SELECT 将源表中的数据写入新建表中，删除报错的表，然后通过Rename将新表更名为报错的表名，重启DTS任务即可。...
新功能发布记录
无 2023年11月 数仓版 类别 名称 说明 相关文档 新增 一键诊断 数仓版（3.0）推出一键诊断功能，可对指定时间段的集群运行状况发起诊断，结合监控数据、日志数据以及库表状态等信息进行联合分析，从集群的资源水位、负载变化、查询SQL、算...
数据建模
Excel导出：支持将数据模型设计模块中的逻辑表及信息以Excel的形式导出，并提供按全量模型与按查询条件的方式进行导出。DDL设置：支持根据逻辑表，自动生成并保存不同云计算资源类型的DDL语句。物理化：支持将已存在的逻辑表物理化到数据库...
原子指标
导入状态：导入并保存：仅导入并保存数据，不生成新的版本 导入并提交：导入数据，并将最新导入的数据提交一个新的版本 批量导入仅支持导入.xlsx格式文件，每次最多可导入30000条数据，并且文件大小不超过10MB。查看导入结果。在 完成 页签...
- 产品推荐
- 这些文档可能帮助您