如何查看表和数据库的数据量大小？
执行以下命令，查询一张表的总大小（单位为MB，包含表的索引和数据）：select pg_size_pretty(pg_total_relation_size('<schemaname>.<tablename>'));执行以下命令，查询表的数据大小（单位MB，不包括索引）：select pg_size_pretty(pg_...
Dataphin即席查询下载数据，较大的数值展示为科学计数...
问题描述 本文主要描述了Dataphin即席查询下载数据，较大的数值展示为科学计数法的解决方法。问题原因 导出来的是CSV文件，显示是Excel的机制，需要我们自己设置格式。解决方案 在Excel中选中该列，设置单元格格式，在数字中将分类选为数值...
Dataphin即席查询下载数据，较大的数值最后四位数为...
问题描述 本文主要描述了Dataphin即席查询下载数据，较大的数值最后四位数为0000的解决方法。问题原因 导出来的是csv文件，显示的时候末尾位数为0000是Excel的机制。解决方案 使用Notepad+等工具打开。适用于 Dataphin v2.9.4-3
云数据库 RDS MySQL 版的decimal字段过大导致查询不...
问题描述 云数据库 RDS MySQL 版的 decimal 字段过大，导致查询不准确。问题原因 云数据库 RDS MySQL 版的 decimal 字段过大查询不准的情况，这是MySQL数据库的BUG引起。解决方法 可以通过添加索引进行优化解决，优化SQL语句如下。create ...
云数据库 RDS MySQL 版的decimal字段过大导致查询不...
问题描述 云数据库 RDS MySQL 版的 decimal 字段过大，导致查询不准确。问题原因 云数据库 RDS MySQL 版的 decimal 字段过大查询不准的情况，这是MySQL数据库的BUG引起。解决方法 可以通过添加索引进行优化解决，优化SQL语句如下。create ...
JindoFS实战演示
使用Checksum迁移HDFS数据到OSS 使用Checksum迁移HDFS数据到OSS 2021-05-11 通过Checksum算法，你可以在大数据迁移场景中校验数据的完整性、对比数据差异并实现增量迁移。本视频为您介绍如何使用Jindo Distcp迁移HDFS数据到OSS，以及在迁移...
功能发布记录（2023年）
2023.4.18 所有地域 所有DataWorks用户 SQL查询 大数据公共数据集上线 基于大数据AI公共数据集（淘宝、飞猪、阿里音乐、Github、TPC等），通过DataWorks与MaxCompute快速完成TB级别大数据分析。2023.4.11 所有地域 所有DataWorks用户 SQL...
如何查询云数据库Redis中过大的Key
Redis提供了List、Hash、Zset等复杂类型的数据结构，在使用Redis时可能由于Key设计不合理而导致某个Key过大。Redis作为简单的单线程模型，在获取或删除较大Key时，可能会对业务产生一定影响。在集群架构下，大Key问题还很容易造成某个子...
风险识别管理（新版）
规则名称 规则类型 规则等级 规则配置 非工作时间查询大数据量敏感数据 数据访问风险 低 如下时间段查询数据量大于10000时命中该规则。周一至周五：22:00～24:00。周六至周日：00:00～24:00。相似SQL查询 数据访问风险 低 十分钟内查询相似...
Quick BI仪表板图表查询时间远大于图表SQL在数据库...
问题描述 Quick BI仪表板图表查询时间远大于图表SQL在数据库查询时间什么原因。问题原因 查看用户侧图表查询时的接口返回信息，访问数据库建立连接时间花费20秒，查询SQL任务2毫秒，访问数据库时花费了较长时间导致报表加载时间较长。解决...
加速服务
数据服务支持对部分数据源表的查询提供加速能力，加速能力包含DataWorks数据服务提供的加速能力和MaxCompute本身支持的加速方案（MCQA）。通过使用加速服务，您可以在调用API时提高数据查询的速率和性能。本文为您介绍两种加速方案的使用...
查询非结构化数据
说明 您可以根据需要选择Extractor、StorageHandler或Outputer类型：Extractor：自定义输入数据解析器，用来实现自定义处理数据读取的逻辑，即如何读取非结构化数据。StorageHandler：用于指定和配置自定义Extractor和Outputer的实现类。...
查询管理与分析
此类查询通常涉及到大规模数据处理、复杂的计算操作，或是跨多个数据库的交互。之所以关注运行中大查询，是因为这些查询可能会大量占用CPU、内存及IO等计算资源，从而影响系统中其他查询的性能。因此，对这类查询进行实时监控是维护系统...
查看云虚拟主机MySQL数据库中表的大小
当您的云虚拟主机MySQL数据库剩余可用空间较小时，您可以查看数据库中所有表的大小，并删除有异常的或者无用的表，以便享有更多的可用空间。本文为您介绍查看主机MySQL数据库中表大小的方法。操作步骤 登录待查看表大小的数据库。具体操作...
SELECT MATERIALIZED VIEW
背景信息 物化视图状态分为如下两种：物化视图有效 执行查询语句时，MaxCompute会从物化视图中直接查询数据，不会从源数据中查询数据。物化视图无效 执行查询语句时，MaxCompute无法从物化视图中直接查询数据，会从源数据中查询数据，无法...
通过企业监控大盘查看监控数据
本文为您介绍如何通过企业监控大盘可视化查看监控数据。前提条件 请确保您已开通企业云监控。具体操作，请参见 开通企业云监控。背景信息 如果您想了解云监控与Grafana的其他集成方式，请参见 概览。操作步骤 创建指标仓库。具体操作，请...
快速体验MaxCompute
MaxCompute支持您使用 MaxCompute控制台、MaxCompute客户端、MaxCompute Studio和DataWorks工具处理数据。本文指导您基于MaxCompute提供的公开数据集，通过 MaxCompute控制台，快速体验在MaxCompute上执行SQL语句查询数据及下载查询结果到...
查询Delta表数据
2 3 4 0 1 Time taken:2.937 seconds,Fetched:5 row(s)说明 查看数据与在Spark中插入的数据一致，说明Hive已经成功访问了Delta表的数据。通过Presto查询Delta表数据 执行以下命令，进入Presto命令行。presto-server master-1-1:8889-...
GetDataServiceFolder
调用GetDataServiceFolder查询数据服务文件夹。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是...
查看云虚拟主机SQL Server数据库中表的大小
当您的云虚拟主机SQL Server数据库剩余可用空间较小时，您可以查看数据库中所有表的大小，并删除有异常的或者无用的表，以便享有更多的可用空间。本文为您介绍查看云虚拟主机SQL Server数据库中表的大小的方法。操作步骤 登录待查看表大小...
GetDataServiceGroup
调用GetDataServiceGroup查询数据服务业务流程。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String ...
Quick BI交叉表导出数据时，报错“本次查询已超出最大...
问题描述 Quick BI交叉表导出数据时，报错“本次查询已超出最大行列交叉数量，请通过减少行/列维度数量或添加筛选条件解决”。问题原因 1.交叉表中行是维度，列是度量的场景。导出1000行数据。2.交叉表中行是维度，列是度量和维度混布的...
GetDataServiceApplication
调用GetDataServiceApplication查询数据服务App的详情。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action ...
Flink Table Store与Hive集成
E-MapReduce的Flink Table Store服务支持在Hive中查询数据。本文通过示例为您介绍如何在Hive中查询Flink Table Store中的数据。使用限制 仅EMR-3.45.0版本、EMR-5.11.0版本的集群，支持在Hive中查询Flink Table Store中的数据。操作步骤 ...
Flink Table Store与Trino集成
E-MapReduce的Flink Table Store服务支持在Trino中查询数据。本文通过示例为您介绍如何在Trino中查询Flink Table Store中的数据。使用限制 仅EMR-3.45.0版本、EMR-5.11.0版本的集群，支持在Trino中查询Flink Table Store中的数据。操作步骤...
查询数据开发中可用的集群列表
调用ListFlowClusterAll接口，查询数据开发可用的集群列表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 ...
自媒体：易撰
所属行业：自媒体 网站地址：易撰 客户介绍 长沙营智信息技术有限公司是专业的新媒体大数据服务商，其旗下知名品牌易撰，基于新媒体大数据挖掘技术及NLP算法分析，为各内容创客、广告主提供全面、科学、精准的大数据分析服务以及大数据架构...
SQL处理优化
在查询效率上，跟查询普通表最大的不同在于，读取源表数据文件时，可能会涉及大量 DeltaFile 的合并以及数据历史中间状态的消除，详情可参见 TimeTravel 查询设计，从而极大影响读取效率，因此对于查询频率和效率要求比较高的业务场景，...
SQL查询
工作空间已配置数据源：DataWorks的数据源分为引擎绑定时默认创建的引擎数据源和在数据源配置界面创建的自建数据源，若要操作非引擎数据源，请确保已创建数据源，详情请参见 创建并管理数据源。已拥有某数据源在数据分析模块的查询权限：...
RDS SQL Server如何查看实例、数据库及表占用的空间...
概述 本文主要介绍如何查看RDS SQL Server实例、数据库及表占用的磁盘空间大小。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等...
RDS for SQL Server如何查看实例、数据库及表占用的...
use<数据库名>go sp_spaceused@updateusage=N'true' 参数 说明 database_size 即数据库的大小，它包含日志的大小，始终大于 reserved+unallocated_space。unallocated space 数据库的未分配空间。reserved 已分配的空间总量。data 数据使用...
ListFileVersions
UseType String NORMAL 文件所属的功能模块，包括NORMAL（数据开发）、MANUAL（手动任务）、MANUAL_BIZ（手动工作流）、SKIP（数据开发的空跑调度）、ADHOCQUERY（临时查询）和COMPONENT（组件管理）。PageNumber Integer 1 当前数据页的...
TPC-DS数据
支持的工具或平台 MaxCompute客户端（odpscmd）MaxCompute Studio DataWorks数据开发SQL节点 Query样例文件 MaxCompute提供了针对不同数据规格的Query样例文件，每个文件内包含99个查询，这些查询的复杂性和扫描数据范围差异很大，请谨慎...
数据查询与分析管控
附录：查看数据源的访问身份 工作空间模式差异 数据源环境介绍 自建数据源 默认创建自建数据源时，配置的访问该数据源的账号，拥有该自建数据源的访问权限。该功能仅对数据源查询权限进行管控，若要对数据源的读写操作进行权限管控，请参考...
通过操作审计查询行为事件日志
DeleteBusiness 删除业务流程 ExecuteFile 将文件作为临时任务执行 LockFile 偷锁编辑 DICreateDatasource 数据集成新增数据源 数据集成 DIBatchCreateDatasource 数据集成批量新增数据源 DIUpdateDatasource 数据集成修改数据源 ...
Catalog概述
本文为您介绍什么是Catalog（数据目录），以及如何使用Catalog管理和查询内外部数据。基本概念 内部数据：保存在StarRocks中的数据。外部数据：保存在外部数据源（例如Apache Hive、Apache Iceberg和Apache Hudi）中的数据。Catalog ...
Catalog概述
本文为您介绍什么是Catalog（数据目录），以及如何使用Catalog查询内外部数据。基本概念 内部数据：保存在StarRocks中的数据。外部数据：保存在外部数据源（例如，Apache Hive、Apache Iceberg和Apache Hudi）中的数据。Catalog StarRocks ...
数据上传
DataWorks的数据上传功能支持将本地文件、数据分析的电子表格、OSS文件等数据上传至MaxCompute、EMR Hive、Hologres等引擎进行分析及管理，为您提供便捷的数据传输服务，助力您快速实现数据驱动业务。本文为您介绍如何使用数据上传功能上传...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
- 产品推荐
- 这些文档可能帮助您