数据建模诊断
分区字段合理性诊断 AnalyticDB MySQL版 在创建表时可以指定分区键来提高数据查询的性能，但是因为数据特征存在未知性或者随着业务特征变化发生变化，同时分区的合理性也与实例的规模相关，所以可能存在分区字段选择不合理的情况。分区字段...
功能特性
组管理 扩展字段 基础管理能力 新增、修改、删除等基础管理能力 扩展字段 修改扩展字段状态 启用/禁用扩展字段 扩展字段 查询扩展字段 基于字段显示名称查询扩展字段 扩展字段 字段类型配置 支持输入框/下拉框/勾选框等呈现方式、字符串/...
Impala概述
Impala为存储在Apache Hadoop中的数据，提供了高性能和低延迟的SQL查询。使用Impala，您可以通过SELECT、JOIN和聚合函数实时查询存储在HDFS或HBase中的数据。背景信息 Impala使用与Apache Hive相同的元数据、SQL语法（Hive SQL）和ODBC驱动...
概述
同一份数据以不同的格式保存，数据所占用的...数据采用高性能的列存储格式，提升数据查询性能。支持嵌套的数据模型。自带性能友好的统计元信息。减少53.3%560MB ORC Hadoop生态格式的数据。自带性能友好的统计元信息。高压缩比 减少80.4%235MB
Quick BI查询条件中下拉列表选择单个数据集时，需要...
产品名称 Quick BI 产品模块 可视化查询控件 概述 为您介绍设置查询控件时“查询字段值”、“显示名称字段”、“排序字段"的具体用法和意义。问题描述 客户发现在配置查询控件时，选择下拉列表形式，在点击单个数据集时需要配置“查询字段...
异构数据源访问
功能说明 外部数据源管理提供高性能的结构化和非结构化数据并行传输服务。其中，异构数据源访问支持通过 AnalyticDB PostgreSQL版 数据库以统一的SQL接口查询和分析存储在外部系统中的数据。提供以下功能：多种数据存储访问：支持多种数据...
使用高性能容器应用
通过高性能容器应用，您可以在E-HPC集群上通过高性能容器应用启动高性能计算作业，从而降低业务部署的复杂性。高性能容器应用在支持E-HPC全部原有能力（如弹性伸缩、性能监控等）的基础上，可为您提供更加高效和便捷的计算解决方案。本文...
Hudi
同时该框架还支持自动管理及合并小文件，保持指定的文件大小，从而在处理数据插入和更新时，不会创建过多的小文件，引发查询端性能降低，避免手动监控和合并小文件的运维负担。详情请参见 Apache Hudi。类别 详情 支持类型 源表和结果表 ...
基本概念
因为索引的主分片和副本分片都可以对外提供查询服务，所以副本能够提升系统的高可用性和搜索时的并发性能。但如果副本太多，也会增加写操作时数据同步的负担。Elasticsearch 7.0以下版本默认为一个索引创建5个主分片，并分别为每个主分片...
查看敏感数据血缘（公测）
关联但识别结果不一致的字段分析 帮助您识别出与查询字段有血缘关系，但敏感字段类型识别结果不一致的字段。例如，查询A字段，敏感数据类型为姓名，与其有血缘关系的字段有B（姓名）、C（省份），则识别结果不一致的字段是C。使用限制 仅...
入门概述
下文以创建集群，在集群中安装GROMACS软件并运行水分子算例进行高性能计算为例，介绍弹性高性能计算的使用流程，帮助您快速上手使用弹性高性能计算。使用流程如下图所示。创建集群 集群可为E-HPC计算提供计算资源，用于后续提交、调试、...
订单查询
产品code 2.2 定制筛选 当前默认筛选字段可以根据个人查询习惯设置，方法如下：定制筛选→勾选常用查询字段→点击 图标→拖动查询字段展示顺序→确定。“我的常用搜索项”内，点击勾选您常看的列表字段，可拖拽控制展示顺序；列表字段将...
什么是弹性高性能计算E-HPC
弹性高性能计算E-HPC（Elastic High Performance Computing）是阿里云提供的性能卓越、稳定可靠、弹性扩展的高性能计算服务。弹性高性能计算将计算能力积聚，用并行计算方式解决更大规模的科学、工程和商业问题，在科研机构、石油勘探、...
服务条款
请参见 弹性高性能计算（E-HPC）服务协议。
使用限制
产品功能 单个地域下，弹性高性能计算相关功能限制如下所示。限制项 配额值 提升配额方式 集群总数 3 提交工单。一个集群节点总数 500 提交工单。一次最多扩容的节点数 99 无 一个节点系统盘大小 500 GiB 提交工单。单个文件系统可以挂载...
产品优势
相较于其他HPC集群，阿里云弹性高性能计算E-HPC产品具有灵活部署、弹性资源、数据安全、高可用性、结果可视等特点。弹性高性能计算E-HPC的优势 灵活部署 您可以在E-HPC控制台快速创建高性能计算集群。一键部署需要的高性能计算环境和应用...
查询接口
函数原型 public QueryBlockHeaderResponse queryBlockHeader(Hash hash)请求参数 参数 必选 类型 说明 hash true Hash 区块 hash 返回字段 返回字段 字段类型 说明 response QueryBlockHeaderResponse 查询区块头的响应 ...
名词解释
文档包含一个或多个字段，但必须有主键字段，高性能检索版实例通过主键值来确定唯一的文档。主键重复则文档会被覆盖。字段 字段是文档的组成单元，包含字段名称和字段内容。插件 为了在导入过程中进行一些数据处理，系统内置了若干数据处理...
查询接口
函数原型 public QueryBlockHeaderResponse queryBlockHeader(Hash hash)请求参数 参数 必选 类型 说明 hash true Hash 区块 hash 返回字段 返回字段 字段类型 说明 response QueryBlockHeaderResponse 查询区块头的响应 ...
列级权限
在仪表板查询字段时，该用户仅可以查看规则范围内的字段值，从而保证数据安全。前提条件 已创建数据集，请参见 创建并管理数据集。禁止规则及效果展示 禁止规则 配置分析师A禁止查看 客户名称 字段。效果展示 在交叉表中，分析师A无法查看 ...
高性能
阿里云Elasticsearch支持的高性能特性如下：Analyticsearch检索分析：提升日志场景查询性能，实现Kibana Discover查询加速，降低查询耗时。通用物理复制，提高有副本索引的写入性能。详细信息，请参见 使用apack插件的物理复制功能。Bulk...
媒资搜索过滤说明
field=('value1','value2')' ' 单引号，指定的查询字段需要以单引号开始，单引号结束。field='value',逗号，多值查询使用。用于分隔多个查询值。field in('value1','value2')()[]开闭区间，范围查询时使用。()表示不包含边界值，[]表示包含...
名词解释
索引字段 在 query子句 中使用，需要定义索引字段，通过索引字段来做高性能的检索召回。属性字段 在 filter、sort、aggregate、distinct 子句使用，用来实现过滤、统计等功能。默认展示字段 用来做结果展示。可以通过API参数fetch_fields来...
共享
creator string 按共享者查询 owner string 按共享接收者查询 字段 类型 必选 说明 result IListRes 是 返回结果 IListRes 字段 类型 必选 说明 items IShareItem[]是 查询到的文件信息列表，items 中每一项的具体字段可查看下面关于 ...
测试SCC集群性能
超级计算集群SCC具有无虚拟化损耗、高带宽低延迟网络的优点，可以保证高性能计算和人工智能、机器学习等应用的高度并行需求。本文为您介绍如何创建SCC集群，并测试SCC集群的相关性能。背景信息 超级计算集群SCC（Super Computing Cluster）...
查询及分析日志
查询多字段 查询指定客户端 192.XX.XX.22 访问目的地址 192.XX.XX.54 的访问日志。src_ip:192.XX.XX.22 and dst_ip:192.XX.XX.54 查询字段是否存在 查询包含 cloud_instance_id 字段的日志。cloud_instance_id:*查询不包含 cloud_instance_...
查看作业结果
操作步骤 登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 作业与性能管理>作业。单击目标作业列表右侧 详情，可以查看作业详细信息。查看作业性能指标。在左侧导航栏，选择 作业 与性能 管理>E-HPC优化器...
优化建议
分布式数据库的高性能依赖于底层数据库的高性能，而对底层数据库性能来说，建立需要的索引是重要的环节；确保语句能正确使用到索引，例如查询条件能被索引完全覆盖到，保证分区键上有索引等；查询尽量在单机完成，最为简单的方式就是在分区...
通过SQL模式创建API（服务单元）
命令格式 select max(<返回参数1>)as<别名c>,sum(<返回参数1>)as<别名b>,min(<返回参数1>)as<别名d>,count(*)as<别名e>from<服务单元A>where<请求参数名1>like${请求参数值1} 使用示例-在服务单元A中查询字段c%like%id_card时，返回字段a的...
在线多表join快速搭建
具体详见 数据源配置：通过手动创建应用结构，快速测试接入时使用，这里以该方式为例，创建2张表：字段类型的选择的可参考 OpenSearch-高性能检索版表结构。注意：说明 表总数不能超过系统最大限制8个；索引结构配置，不同的表需要单独配置...
BI分析模式数据面板功能介绍
查询结果面板 BI分析模式组件数据面板最下方的 查询结果 区域，可以查询字段映射绑定后的数据内容。具体功能操作如下：功能 说明 设置返回数据量 单击 查询结果 输入框，自定义输入从数据集中获取并返回的数据条数，即可设定可查询数据的...
默认展示字段
控制台——>OpenSearch 高性能检索版 ——>功能扩展—->搜索结果展示，添加默认展示字段 2.不配置默认展示字段，在控制台搜索测试，仍然可以使用如下方法展示字段：注：fetch_fields参数设置时，使用 分号 分割。SDK/API配置 fetch_fields...
Spark使用JindoSDK查询OSS-HDFS服务中的数据
相对于Hadoop社区OSS客户端，Spark使用JindoSDK查询OSS-HDFS服务中的数据时，可以获得更好的性能。前提条件 已创建ECS实例。具体步骤，请参见 选购ECS实例。已创建Hadoop环境。具体步骤，请参见 创建Hadoop运行环境。已部署Apache Spark。...
自定义日志查询与分析
查询语法 日志服务查询语法支持全文查询和字段查询，查询框支持换行显示、语法高亮等功能。全文查询 不需要指定字段，直接输入关键字查询。可以用双引号（""）包裹关键字，多个关键字之间以空格或 and 分割。以下是全文查询的常用示例：多...
常见问题
如果设置固定查询字段进行HASH分区，则查询时只需要扫描某一个或某几个分区。因此，当分区数量较多时，设置固定字段会带来明显的RT和QPS提升。说明 为提升查询性能，建议设置为HASH分区的字段的值尽量丰富，同时避免同一个分区键下的数据...
场景化建表调优指南
如果您的表需要兼顾多个场景，如有不同的查询过滤条件或有不同的JOIN字段，则需要综合考虑这些场景的查询频率与性能需求，从而设置最优的表属性。场景1：超高QPS点查 场景 如果您的查询场景为万级及以上QPS的点查，以TPC-H Orders表为例，...
基本概念
本文汇总使用弹性高性能计算E-HPC过程中涉及的基本概念，方便您查询和了解相关概念。使用弹性高性能计算涉及的相关概念如下表所示。概念 说明 集群 集群指运行高性能计算的节点集合，可以提供单节点不能提供的强大计算能力，拥有高性能、...
使用限制
TEXT、SHORT_TEXT类型单字段索引个数 4个 8个 LITERAL类型单字段索引个数 256个 INT类型构建关键字分析索引个数 256个 向量索引个数 0个 2个 总数据源个数 20个 说明 高性能检索版-独享存储型相关限制说明：表总数不能超过系统最大限制8个...
日志服务与Elasticsearch的兼容性
ids ID字段查询。聚合相关的 DSL列表 类别 DSL 说明 分组统计 Date histogram 根据@timestamp 字段进行分组统计。Histogram 根据数值间隔进行分组统计。Range 根据数值范围进行分组统计。Terms 根据字段唯一值进行分组统计。Filter 根据...
创建索引
long、double类型的字段，可以使用字段查询语句、分析语句（SELECT）进行查询和分析。text类型的字段，可以使用全文查询语句、字段查询语句、分析语句（SELECT）。如果未开启全文索引，全文查询语句是从所有text类型的字段中查询结果。如果...
- 产品推荐
- 这些文档可能帮助您