TableSearch-表格问答
URL POST/v3/openapi/apps/{app_group_identity}/actions/table-search 说明[app_group_identity]：表示应用名（需要指定应用名访问，主要针对服务中的应用版本）。以上 URL 省略了请求Header参数及编码等因素。以上 URL 中省略了访问应用...
Hologres权限相关
问题汇总 在使用Hologres开发时，需要有实例的具体开发权限，才能在实例内进行操作。与实例权限相关的常见问题，请单击如下链接查看解决方法。如何选择合适的Hologres权限模型？在Hologres实例内操作报错：role“RAM$xxx”doesn't not ...
Hologres SQL语句的常见问题
本文为您介绍编写和优化Hologres SQL语句时可能遇到的常见问题及解决方法。报错：Creating publication with table that without binlog is not supported now 报错：bigint out of range 报错：too many shards in this instance 报错：...
元数据仓库共享模型（Hadoop）
v3.10 血缘数据dim_dataphin_lineage_node_table/dim_dataphin_lineage_table，添加实时表的血缘数据。租户用户表dim_dataphin_tenant_user 新增user_status、system_role_list字段，添加项目的生成账号的数据。新增数据源配置信息表dim_...
元数据仓库共享模型（MaxCompute）
v3.10 血缘数据dim_dataphin_lineage_node_table/dim_dataphin_lineage_table，添加实时表的血缘数据。租户用户表dim_dataphin_tenant_user 新增user_status、system_role_list字段，添加项目的生成账号的数据。新增数据源配置信息表dim_...
使用RDS MySQL时报“SELECT ...table 'user'”错误
SELECT command denied to user 'username'@'ip' for table 'user' 问题原因 数据库名使用错误，指定的库中不存在user表。解决方案 测试RDS实例是否异常。可以使用MySQL客户端连接到RDS，查询对应的表，如果可以正常查询，说明RDS没有问题...
使用RDS MySQL时报“SELECT ...table 'user'”错误
SELECT command denied to user 'username'@'ip' for table 'user' 问题原因 数据库名使用错误，指定的库中不存在user表。解决方案 测试RDS实例是否异常。可以使用MySQL客户端连接到RDS，查询对应的表，如果可以正常查询，说明RDS没有问题...
“Not found physical table meta when renaming ...
问题描述 Dataphin事实逻辑表提交失败报错：Not found physical table meta when renaming table null 问题原因 用户手工drop了事实逻辑表对应的物化表，导致提交报错。解决方案 下线逻辑表，然后再重新提交即可。适用于 Dataphin
基本概念
从上图中能很容易看出一个问题：假如Table Group的Shard数与Worker个数不成比例关系（如上图 Table Group 1 有3个Shard，但是只有2个Worker），那么就一定会存在某个Worker比其他Worker多分配一个SE给Table Group的情况，这样在计算时，就...
Quick BI如何设置仪表板中明细表不进行数据分页
问题描述 本文主要介绍Quick BI设置仪表板中明细表不进行数据分页。问题原因 仪表板中的明细表进行分页想去掉该分页。解决方案 1.点击明细表>样式>展示型配置。2.去掉显示分页。适用于 Quick BI
建表概述
一般情况下无需设置Table Group，使用默认Table Group即可，当实例规格较大（大于256 Core时），建议根据业务情况划分不同的Table Group和Shard数，带来更好的性能，使用详情请参见 Table Group与Shard Count操作指南。call set_table_...
Quick BI中明细表的分页不生效
问题描述 Quick BI中明细表的分页不生效，查看这个明细表时，设置的全是维度，但是分页不生效，查看其他页都是第一页的显示。问题原因 分页是数据库执行的结果，具体要看数据库的表现，数据库这个limit不排序的情况下不起作用，所以要加上...
如何使用Prometheus监控Windows
如果使用这些非分页池内存的组件出现问题可能会对系统造成致命影响。例如，使用非分页池的驱动程序中的内存泄露可能会导致系统完全挂死，因为用户模式进程的内存要求被转储到磁盘。页错误（次/秒）Critical WMI（PageFaultsPersec）当进程...
如何使用Prometheus监控Windows
如果使用这些非分页池内存的组件出现问题可能会对系统造成致命影响。例如，使用非分页池的驱动程序中的内存泄漏可能会导致系统完全挂死，因为用户模式进程的内存要求被转储到磁盘。页错误（次/秒）Critical WMI（PageFaultsPersec）当进程...
Dataphin即席查询中查询汇总逻辑表报错"select*from ...
问题描述 Dataphin即席查询中查询汇总逻辑表报错"select*from logical aggregate table({0})is not allowed。完整的报错信息如下：Error Code:DPN.OS.NotAllowSelectStarFromDws Error Message:select*from logical aggregate table({0})is...
RDS MySQL排序分页查询数据顺序错乱的处理
问题描述 MySQL排序分页查询某些时候会出现数据顺序错乱的情况，例如alarm_test表结构如下所示。CREATE TABLE alarm_test(id bigint(20)NOT NULL DEFAULT '0',detail varchar(255)CHARACTER SET utf8 NOT NULL,created_on timestamp NOT ...
ListLineage
调用ListLineage接口，查询...Action=ListLineage&EntityQualifiedName=maxcompute-table.project.table&NextToken=next-token-from-previous-request&Keyword=name-keyword&Direction=up&PageSize=10&公共请求参数 正常返回示例 XML 格式 ...
常见问题
本文汇总了Hudi使用时的常见问题。Spark查询Hudi数据重复，如何处理？Hive查询Hudi数据重复，如何处理？Spark查询Hudi表分区裁剪不生效？使用Spark的alter table语句时，报错xxx is only supported with v2 tables，如何处理？Spark查询...
Sqoop常见问题
本文汇总了Sqoop使用时的常见问题。导入RDS数据至EMR时，时间字段显示延迟8小时如何处理？问题描述：例如，在云数据库RDS数据源中，数据表 Test_Table 中包含时间戳（TIMESTAMP）字段。您可以执行以下命令，导入 Test_Table 中的数据至HDFS...
ListMetaCollectionEntities
CollectionQualifiedName String 是 album.12345 集合唯一标识 EntityType String 否 maxcompute-table 实体类型 例如：maxcompute-table:maxcompute 表类型 Keyword String 否 test 搜索关键词 NextToken String 否 12222 分页信息，指定...
流式入库
但是这么做有以下几个问题：缺少读写隔离，易造成读端失败或者产生数据准确性问题。流式作业没有Exactly-Once保证，入库作业失败后需要人工介入，确保数据不会写重或者写漏（如果是SparkStreaming，有At-Least-Once保证）。Hive从0.13版本...
Dataphin逻辑表的物化表是根据什么规则生成和变化的
产品名称 Dataphin 产品模块 事实逻辑表、维度逻辑表、汇总逻辑表 概述 本文介绍了Dataphin物化拆分的基本规则和多版本模型刷新机制 问题描述 1.修改逻辑表的哪些地方会导致物化表的版本发生变化？2.有些逻辑表存在多个物化表，具体是根据...
ListEntitiesByTags
根据标签列出实体，目前只支持 maxcompute-table 类型的实体。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 ...
管理Kafka JSON Catalog
CREATE TABLE IF NOT EXISTS `some_catalog`.`some_database`.`some_table1` AS TABLE `kafka-catalog`.`kafka`.`topic1`/*+OPTIONS('scan.startup.mode'='earliest-offset')*/;CREATE TABLE IF NOT EXISTS `some_catalog`.`some_database`...
列存索引中GroupJoin算子的实现
INNER JOIN/GROUP BY RIGHT 此场景如下SQL所示：l_table INNER JOIN r_table ON l_table.key1=r_table.key1 GROUP BY r_table.key1 考虑到l_table.key1=r_table.key1，这种情况被归到“INNER JOIN,GROUP BY LEFT”里。LEFT OUTER JOIN/...
DLF+EMR之统一权限最佳实践
初始化测试数据-db_a.table1 insert overwrite table db_a.table1 values('1','aliyun','emrA1'),('2','aliyun','dlfA1');db_a.table2 insert overwrite table db_a.table2 values('1','aliyun','emrA2'),('2','aliyun','dlfA2');db_b....
使用Flink SQL消费实时变更数据示例
Push模式支持将实时变更数据投递至下游系统（例如TT、DD或MetaQ），同时可以结合其他计算平台对增量数据进行计算，构建一套完整的实时数据系统，但是这种模式存在日志堆积、开发周期长等问题。Pull模式的实时数据订阅功能底层使用Lindorm ...
数据服务
本文为您汇总数据服务的相关问题。为什么数据服务无法连接ECS自建的数据库？是否必须开通API网关？如何配置数据源？数据服务是否支持MaxCompute（ODPS）数据源？向导模式生成API与脚本模式有何功能差异？数据服务中的API分组的作用是什么，...
图解MySQL 8.0优化器查询解析篇
对父查询的所有相关数据结构进行重新计算（leaf_table_count，derived_table_count，table_func_count，materialized_derived_table_count，has_sj_nests，has_aj_nests，partitioned_table_count，cond_count，between_count，select_n_...
数仓场景：增量数据实时统计
指标修正简单，与传统增量计算方式不一样的是，该方案将中间的状态也持久存储在StarRocks中，提升了后续分析的灵活性，当中间数据质量有问题时，直接对表修正，重刷数据即可。方案缺点 大部分实时增量计算依赖于Flink，需要使用者有一定的...
Flink全托管
Flink全托管产品（Flink Serverless）是基于Apache Flink构建的全托管产品，为您提供全托管的实时计算服务。Hologres与Flink全托管高度兼容，支持...常见问题 Flink全托管使用过程中，常见问题及解决方案请参见 Blink和Flink常见问题及诊断。
数仓场景：增量数据实时统计
指标修正简单，与传统增量计算方式不一样的是，该方案将中间的状态也持久存储在StarRocks中，提升了后续分析的灵活性，当中间数据质量有问题时，直接对表修正，重刷数据即可。方案缺点 大部分实时增量计算依赖于Flink，需要使用者有一定的...
Upsert Kafka
本文为您介绍如何使用Upsert Kafka连接器。背景信息 Upsert Kafka连接器支持以upsert方式从Kafka topic中读取数据并将数据写入Kafka topic。作为源表，此连接器可以将Kafka中存储...最佳实践 MySQL整库同步Kafka 如何解决Flink依赖冲突问题？
Maxwell
CREATE TABLE KafkaTable(origin_database STRING METADATA FROM 'value.database' VIRTUAL,origin_table STRING METADATA FROM 'value.table' VIRTUAL,origin_primary_key_columns ARRAY<STRING>METADATA FROM 'value.primary-key-columns...
Canal
CREATE TABLE KafkaTable(origin_database STRING METADATA FROM 'value.database' VIRTUAL,origin_table STRING METADATA FROM 'value.table' VIRTUAL,origin_sql_type MAP,INT>METADATA FROM 'value.sql-type' VIRTUAL,origin_pk_names ...
JindoDistCp使用说明
example-oss-bucket/hourly_table/2017-02-01/03/1.log.gz-rw-rw-rw-1 1956 2020-04-17 20:58 oss:/example-oss-bucket/hourly_table/2017-02-01/03/2.log.gz-rw-rw-rw-1 1956 2020-04-17 20:58 oss:/example-oss-bucket/hourly_table/...
如何优化数据全量抽取
} } } } } 分页查询场景 向用户展示列表信息时，需要分页来提高页面的加载效率，避免返回过多冗余信息，用于处理分页显示需求的查询，称为分页查询。关系型数据库没有直接提供分段返回表中数据的能力，高效的实现分页查询，还需要结合数据...
创建和使用CCI
下表汇总了使用 ALTER TABLE 语句变更索引的支持情况 语句 是否支持 ALTER TABLE ADD PRIMARY KEY 支持 ALTER TABLE ADD[UNIQUE/FULLTEXT/SPATIAL/FOREIGN]KEY 支持 ALTER TABLE ALTER INDEX index_name {VISIBLE|INVISIBLE} 不支持修改CCI...
采集MySQL查询结果
数据库表样例 CREATE TABLE `VersionOs`(`id` int(11)unsigned NOT NULL AUTO_INCREMENT COMMENT 'id',`time` datetime NOT NULL,`version` varchar(10)NOT NULL DEFAULT '',`os` varchar(10)NOT NULL,`count` int(11)unsigned NOT NULL,...
Debezium
常见问题 故障时投递重复的变更事件 在正常的操作环境下，Debezium能够以exactly-once的语义投递每条变更事件，Flink能够正常消费Debezium产生的变更事件。在非正常情况下（例如有故障发生），Debezium只能保证at-least-once的投递语义。...
- 产品推荐
- 这些文档可能帮助您