管理工作空间
描述 该工作空间的详细描述、用途、功能或其他相关信息。单击 创建工作空间。删除工作空间 警告 删除工作空间后，该工作空间及其下的所有资源将被永久删除，并且无法恢复，因此请谨慎操作。在Workflow页面，单击待删除工作空间操作列的 ...
自助建站方式汇总
搭建PostgreSQL主从架构 PostgreSQL被业界誉为先进的开源数据库，支持NoSQL数据类型（JSON/XML/hstore）。本教程介绍在CentOS 7操作系统的ECS实例上搭建PostgreSQL主从架构的操作步骤。管理ECS实例自建数据库 ECS实例自建数据库，是指在ECS...
为RAM用户授权
各权限策略的详细说明，请参见 权限策略。单击 确定。单击 完成。完成授权后，权限立即生效，您可以使用RAM用户身份登录 阿里云E-MapReduce控制台，执行已被授权的操作。说明 如果RAM用户不再需要已授权的权限，可移除对应权限。具体操作，...
湖仓一体
本章节介绍如何通过 云数据库SelectDB 提供的联邦查询技术，对数据湖、数据库、远端文件等外部数据源进行联邦分析。为您提供简单、快速的数据分析体验。概述 云数据库SelectDB 提供多源数据目录功能（Multi-Catalog或Catalog），支持对接...
管理配置信息
EMR Serverless支持通过控制台查询或修改StarRocks BE、FE等组件的参数，以及查看配置的操作历史记录。前提条件 已创建EMR Serverless实例，详情请参见 创建实例。...相关文档 如需查看配置项的详细说明，请参见 参数配置。
启动实时检测与分析
计算资源状态分析 详细分析 该页面为您展示最近5分钟集群任务的详细分析和打分，并给出优化建议，您可以根据优化建议进行调优。同时也会展示部分存在异常行为的作业列表，您可以根据异常作业进行排查。计算引擎信息 在计算基础信息中，您...
管理尽力交付
前提条件 已创建数据湖（DataLake）、数据分析（OLAP）、实时数据流（DataFlow）、数据服务（DataServing）、机器学习（Data Science）或自定义集群（Custom），详情请参见 创建集群。使用限制 手动扩容场景：仅按量付费类型的节点组，支持...
为RAM用户授权
在EMR Serverless StarRocks中，RAM的典型使用场景如下：用户：如果您购买了EMR Serverless StarRocks实例，您的组织里有多个用户（例如运维、开发或数据分析）需要使用这些实例，您可以创建一个策略允许部分用户使用这些实例。避免了将同...
管理事件
单击目标事件操作列的 详情，可以查看事件的详细信息。单击 全部，可以查看所有系统事件。相关文档 当前仅展示EMR on ECS中DataLake、DataFlow、OLAP、DataServing或Custom集群类型的事件，如果是其他类型集群的事件，详情请参见 管理事件...
EMR Doctor概述
E-MapReduce Doctor（简称EMR Doctor）是E-MapReduce产品自研的面向开源大数据集群的智能运维诊断系统。通过EMR Doctor（即集群管理页面的“健康检查”功能）可以全局了解集群的健康状况和动态走势，为运维决策和资源优化提供有力的信息...
配置监控告警
相关文档 如果您需要查看监控指标的详细信息，详情请参见 监控指标说明。如果您需要新建联系人，详情请参见 创建报警联系人或报警联系人组。如果您需要根据自身的业务设置对应的报警规则，则可以创建自定义报警规则，详情请参见 创建自定义...
数据格式描述文件
本文介绍索引数据的描述文件（Ingestion Spec文件）。Ingestion Spec（数据格式描述）是Druid对要索引数据的格式以及如何索引该数据格式的一个统一描述，它是一个JSON文件，一般由三部分组成。{"dataSchema":{.},"ioConfig":{.},...
管理审计日志
StarRocks将所有审计日志存储在本地文件 fe/log/fe.audit.log 中，并且这些日志无法通过系统内部数据库访问。启用审计日志功能将安装AuditLoader插件，该插件能够从本地文件中读取日志，并通过HTTP PUT方法将其导入StarRocks数据库，方便您...
ZOOKEEPER指标
本文介绍ZOOKEEPER指标的详细信息。ZOOKEEPER指标包含以下部分：Important metrics zk count info Important metrics 参数 指标 描述 AvgLatency zk_avg_latency。Zookeeper平均请求延迟。单位：ms。MaxLatency zk_max_latency Zookeeper...
ClickHouse指标
本文为您介绍ClickHouse指标的详细信息。参数 指标 描述 QPS clickhouse_server_query QPS。Merge clickhouse_server_merges Merge数。Mutation clickhouse_server_mutations Mutation数。Server Memory clickhouse_server_memory_usage ...
跨库查询
功能介绍 Database是PostgreSQL生态下数据库的最高级别，同一个实例中的不同Database之间无法直接互相查询数据，在保证了数据库业务隔离的同时，也带来了跨业务跨库之间联合查询的不便。在 AnalyticDB PostgreSQL版 中，您可以通过外部数据...
WHERE语句
WHERE语句可用于对SELECT语句中的数据进行筛选。语法 SELECT[ALL|DISTINCT]{*|projectItem[,projectItem]*} FROM tableExpression[WHERE booleanExpression];示例 测试数据 Address City Oxford Street Beijing Fifth Avenue Beijing ...
开发准备
本文介绍E-MapReduce开发的准备工作。准备工作如下：请确认您已经开通了阿里云服务，并创建了AccessKey ID和AccessKey Secret。请确认您已开通OSS。您已经对Spark、Hadoop、Hive和Pig具备一定的认识。文中不对Spark、Hadoop、Hive和Pig开发...
概述
数据组织 ZooKeeper的数据组织方式与标准文件系统类似，组织成类似文件树的结构，在ZooKeeper中使用znode（ZooKeeper node）来描述文件，与标准文件系统不同的是，znode并不区分目录或者文件的概念，每个znode都可以存储数据。ZooKeeper...
资源观测
您可以使用时间筛选器，筛选小时、天或自定义的时间段，图表将自动刷新以显示所选择的时间段内的数据。指标参数说明 指标名称 说明 Workspace CU Consumption 显示整个工作空间中所有Spark作业的CU消耗。Queue CU Consumption 显示特定队列...
概述
使用场景 典型的应用场景如下：近实时计算场景 时间序列数据的场景 预测建模 与存量数据共存 通常生产环境中会有大量的存量数据，数据可能存储在HDFS、RDBMS或Kudu中。如果您只是想访问和查询这些存量数据，可以使用Impala访问和查询，而...
授权信息
本文为您介绍 开源大数据平台 E-MapReduce（EMR）为RAM权限策略定义的操作（Action）、资源（Resource）和条件（Condition）。开源大数据平台 E-MapReduce（EMR）的RAM代码（RamCode）为 emr,emr-apm-server,ecm,emr-serverless-spark,dls...
Hudi概述
您可以实时摄取消息队列（Kafka）和日志服务SLS等日志数据至Hudi中，同时也支持实时同步数据库Binlog产生的变更数据。Hudi优化了数据写入过程中产生的小文件。因此，相比其他传统的文件格式，Hudi对HDFS文件系统更加的友好。近实时数据分析...
TSDB开源生态概述
时间序列数据库TSDB以其强大的功能和兼容性，对于当前的一些开源解决方案实现了较好的适配。以下是TSDB与一些开源组件或开源项目对接的方法。Grafana如何对接TSDB Quick BI如何接入TSDB
概述
Apache Druid是一个分布式内存实时分析系统，用于解决如何在大规模数据集下快速的、交互式的查询和分析问题。基本特点 Apache Druid具有如下特点：支持亚秒级的交互式查询。例如，多维过滤、Ad-hoc的属性分组和快速聚合数据。支持实时的...
计费项
云盘存储 您在StarRocks中使用云盘存储的数据量，包括实际的FE和BE节点用于数据存储的云盘数据量。BE规格 当您的 BE规格类型 为 高性能 或 大规格存储 时，会产生不同的计费费用。该计费项涵盖了BE的计算费用以及本地盘存储数据量费用。...
HUE指标
本文为您介绍HUE指标的详细信息。参数 指标 描述 Number of currently active requests hue_requests_active 当前活跃请求数。Number requests that resulted in an exception hue_requests_exceptions 当前异常请求数。Number of queries ...
JindoCache概述
JindoCache（原JindoFSx）是阿里云EMR提供的用于加速云原生数据湖的一个服务。他提供了数据缓存和元数据缓存等加速功能，并根据不同的CacheSet提供不同的读写策略，以满足数据湖在不同使用场景下对访问加速的需求。背景信息 CacheSet是...
JOIN语句
约束 当执行流数据的JOIN操作时，部分JOIN类型是不支持的，具体请参见 Spark官方文档说明。左表 右表 JOIN类型 是否支持 流式表 静态表 内连接 支持 左连接 支持 右连接 不支持 全连接 不支持 静态表 流式表 内连接 支持 左连接 不支持 右...
RSS指标
本文为您介绍RSS指标的详细信息。RSS指标包含以下部分：RssMaster RssWorker RssMaster 参数 指标 描述 RegisterShuffle rss_master_metrics_RegisteredShuffleCount_Value 当前RSS节点注册的活跃shuffle数量。BlacklistedWorkerCount rss_...
UNION ALL语句
UNION ALL语句将两个流式数据合并。两个流式数据的字段完全一致，包括字段类型和字段顺序。语法 select_statement UNION ALL select_statement;示例 测试数据 表1：test_source_union1 a（varchar）b（bigint）c（bigint）test1 1 10 表2：...
HDFS概述
HDFS（Hadoop Distributed File System）是一种Hadoop分布式文件系统，具备高度容错特性，支持高吞吐量数据访问，可以在处理海量数据（TB或PB级别以上）的同时最大可能的降低成本。HDFS适用于大规模数据的分布式读写，特别是读多写少的场景...
SPARK指标
本文为您介绍SPARK指标的详细信息。SPARK指标包含以下部分：SPARK-ThriftServer SPARK-HistoryServer SPARK-ThriftServer 参数 指标 描述 JVM Max Heap Memory spark_thrift_driver_jvm_heap_max JVM最大可用堆内存。单位：Byte。JVM ...
ListApmMetadata
DD6B1B2A-5837-5237-ABE4-FF0C8944*NextToken string 返回读取到的数据位置，空代表数据已经读取完毕。DD6B1B2A-5837-5237-ABE4-FF0C89568980 MaxResults integer 本次请求所返回的最大记录条数。20 TotalCount integer 本次请求条件下的...
SCAN语句
SCAN语法约束如下：SCAN语法定义的视图，仅能用作数据源表，不可以作为数据输出表。SCAN语法定义可以直接处理原始表，但仅能进行批式读。语法 CREATE SCAN tbName_alias ON tbName USING queryType OPTIONS(propertyName=propertyValue[,...
Hive连接器
该元数据存储在数据库（例如，MySQL）中，并通过Hive Metastore Service（HMS）访问。一种称为HiveQL的查询语言。该查询语言在分布式计算框架（例如，MapReduce或Tez）上执行。前提条件 已创建EMR-3.45.0及后续版本和EMR-5.11.0及后续版本...
其他漏洞汇总说明
ZKConfigurationStore是YARN CapacityScheduler调度器用于从ZooKeeper获取数据的模块组件，ZKConfigurationStore可以在未经验证的情况下，反序列化从ZooKeeper获得的数据。如果启用了ZKConfigurationStore，则攻击者可利用该漏洞执行任意...
PRESTO指标
本文为您介绍PRESTO指标的详细信息。参数 指标 描述 HeapMemory committed presto_Memory_HeapMemoryUsage_committed JVM堆内存分配量。HeapMemoryUsage Init presto_Memory_HeapMemoryUsage_init JVM初始堆内存。HeapMemoryUsageMax ...
实例类型
计算实例节点（Task）计算实例节点是专门负责计算的实例节点，不会保存HDFS数据，也不会运行Hadoop HDFS的Datanode服务，是一个可选的实例类型。如果核心实例的计算能力充足，则可以不使用计算实例。当集群计算能力不足时，您可以随时通过...
ListComponents
DD6B1B2A-5837-5237-ABE4-FF0C8944*NextToken string 返回读取到的数据位置，空代表数据已经读取完毕。DD6B1B2A-5837-5237-ABE4-FF0C89568980 MaxResults integer 本次请求所返回的最大记录条数。20 TotalCount integer 本次请求条件下的...
- 产品推荐
- 这些文档可能帮助您