技术分析函数
CHANDE_MOMENTUM_OSCILLATOR(/regular_expression/,2)返回使用CMO算法处理与正则表达式匹配的每个field key对应的field value后的结果，该算法中，period设为2，使用默认的hold period和warmup type。CHANDE_MOMENTUM_OSCILLATOR(*,2)返回...
关键词抽取
模块 实 现了 基于 自由 形状 变形 网格 变形 算法 遗传算法 差分 进化 算法 飞机 表面积 计算 算法 基于 矩 积分 飞 机 体积 计算 算法 开发 基于 VTK 数据 可视化 格式 工具 PAI命令 PAI-name KeywordsExtraction-DinputTableName=maple_...
LightGBM
它可以说是分布式的，高效的，有以下优势：更快的训练效率 低内存使用 更高的准确率 支持并行化学习 可以处理大规模数据 与常见的机器学习算法对比，速度是非常快的。计算逻辑原理 LightGBM 通过叶分裂(Leaf-wise)策略来生长树。每次从当前...
历史版本常见问题
处理建议 如果分库分表列是相同的，建议使用HASH（该哈希算法与上述几类算法的计算逻辑不同），可以减少此类问题。将实例迁移至PolarDB-X 2.0使用AUTO模式的HASH分区。版本范围 PolarDB-X 1.0 的所有版本及2.0的DRDS模式数据库。PolarDB-X ...
负载均衡
consistentHash 一致性 Hash 算法 服务请求与处理请求的服务器之间可以一一对应。weightRoundRobin 按权重负载均衡轮询算法 按照权重对节点进行轮询。性能较差，不推荐使用。设置负载均衡 要使用某种特定的负载均衡算法，可以按照以下的...
历史版本下载
修复了 QP 问题求解中预处理方法的bug。V1.0.1下载 发布时间：2023.11.14 Linux linux64x86 文件：mindopt-install-linux64x86-1.0.1.sh 同意协议并下载 linux64aarch 文件：mindopt-install-linux64aarch-1.0.1.sh 同意协议并下载 Windows...
什么是自动驾驶开发平台
能够解决的问题如下 海量非结构化数据快速预处理 利用数据管理并行计算框架，在阿里云上以云原生的方式分布式处理海量非结构化数据，采集到的感知数据处理效率提高10倍。感知数据多模态检索 无论是经过标注还是未经标注的传感器输出数据，...
V5.3.x系列实例版本说明
性能优化 优化MysqlDump兼容性问题处理，支持MySQL可执行HINT。优化MysqlDump兼容性问题处理，支持MySQL单行注释“—”。修复问题 修复存在HINT时，没有正确设置ThreadLocal变量导致NPE的问题。修复特殊场景下子查询条件上拉失败，导致全表...
PolarDB MySQL版8.0.1版本发布日志
修复并行查询将GROUP BY下推到Worker上去并行执行时，在有分区表的情况下，返回结果集中存在分组重复的问题。修复执行 EXCHANGE PARTITION 操作时，因索引顺序不同导致索引损坏，无法访问表数据的问题。修复主键不包含分区键的分区表在使用...
LightGBM算法
设计初衷是提供一个快速、高效、低内存、高准确度、支持并行和大规模数据处理的工具。LightGBM可以减少数据对内存的使用、减少通信代价以及提升多机并行时的效率，在数据计算上实现线性加速。使用场景 LightGBM是一个算法框架，包括GBDT...
申请证书时需要提交的信息
请确保您手动填写的CSR使用的加密算法与 密钥算法 中选择的算法相同，否则您将无法顺利提交证书审核。如果您不清楚CSR使用的加密算法，您可以通过 查看CSR 工具查看，具体操作，请参见 查看CSR详情。在制作CSR文件时请务必保存好您的私钥...
PolarDB并行查询
两个阶段没有重叠，这样就实现了全阶段的并行，但Parallel Hash join也有自身的问题，例如：共享Hash Table过大导致spill to disk问题，并行插入虽然无锁，但仍有“同步”原语带来的cache invalidation。Partition Hash join Partition ...
技术原理
针对这类在线数据库上复杂SQL的处理，PolarDB-X 1.0 额外扩展了单机并行处理器（Symmetric Multi-Processingy，简称SMP）和多机并行处理器（DAG）。前者完全集成在 PolarDB-X 1.0 内核中；而对于后者，PolarDB-X 1.0 构建了一个计算集群，...
V5.4.x系列实例版本说明
修复时间类型与函数的兼容性问题，提升对时间类型数据的处理效率。修复监控中的连接数显示不正确的问题。修复ALTER TABLE语句中CONVERT TO CHARACTER SET不能同时修改GSI索引表的问题。修复部分PARSER报错信息不明确的问题。优化性能 优化...
组件参考：所有组件汇总
条件随机场预测 该组件是基于linearCRF在线预测模型的算法组件，主要应用于处理序列标注问题。Split Word（生成模型）该组件基于AliWS（Alibaba Word Segmenter）词法分析系统，根据参数和自定义词典生成分词模型。词频统计 该组件是指输入...
PolarDB处理TPC-H查询的挑战和机遇
这是MySQL比较薄弱的一方面，在其优化逻辑中，经常会插入更多的用于最终结果计算的额外表达式，但这些表达式可能与已有表达式重叠，但它没有精细的区分与处理。PolarDB 中之前还修复过一个Bug：对于已计算完成的标量子查询，会在后续执行中...
兼容PostgreSQL 14版本公测结束，正式版上线
并行计算增强 PostgreSQL 14版本增加了许多并行查询功能，PL/pgSQL函数内的 RETURN QUERY 返回结果时支持QUERY的并行计算，REFRESH MATERIALIZED VIEW 命令也可以使用并行查询。并行顺序扫描支持chunk，提高大范围数据扫描的IO吞吐，接近块...
常见问题
[视觉计算服务]适用于哪些用户场景，解决哪些问题？序号 用户场景 解决问题 1 视频监控在民警侦查办案、治安防控中扮演着越来越重要的角色，但肉眼看视频费时费力，很多小案件因为看视频成本太高而被放弃 如何提升民警用视频侦查办案的效率...
时序引擎版本说明
Lindorm ML时序异常检测，修复以下算法参数未生效的问题：esd算法的 alpha 参数和 warmupCount 参数。nsigma算法的 direction 参数和 warmupCount 参数。Lindorm ML时序异常检测，修复STL类算法在切换时间线时报错的问题。优化Lindorm ML...
OOM常见问题排查指南
UnionALL 如下所示，当SQL中含有大量 union all subquery 时，执行器会并行处理每个 subquery，导致内存压力变大，从而出现OOM。subquery1 union all subquery2 union all subquery3.可以通过如下参数强制执行器串行，减少OOM情况，但查询...
2017年功能发布记录
2017年12月 功能名称 变更类型 功能描述 相关文档 与IoT产品的对接 新增 函数计算打通和IoT产品对接，通过IoT产品控制台可以配置函数计算作为后端处理，可以解决物联网、智能家居存在的问题：数据不能即时处理 较重的技术架构 无法实时弹性...
企业版和标准版功能对比
支持 支持 弹性并行查询（ePQ）弹性并行查询（Elastic Parallel Query，ePQ）目前支持单机并行和多机并行两种并行引擎，单机并行引擎等效于原有的并行查询，多机并行引擎支持集群内跨节点的自适应弹性调度。支持 支持 SQL引擎查询优化 ...
内置时空数据引擎Ganos
提供拓扑网络路径分析和大规模点云存储与查询支持 Ganos所包含的几何网络数据库引擎支持Node-Edge拓扑网络构建，支持Turn、U-Turn等概念，支持TSP（旅行商问题）、KSP（多条线路最短路径）、TRSP（转向限制的最短路径）等一系列路径规划...
什么是人工智能平台PAI
什么是机器学习 机器学习是一门多学科交叉专业，涵盖概率论知识、统计学知识、近似理论知识和复杂算法知识，它使用计算机作为工具并致力于真实、实时地模拟人类学习方式，并将现有内容进行知识结构划分来有效提高学习效率。机器学习对研究...
PolarDB PostgreSQL（兼容Oracle）2.0版本商业化公告
支持LZ4压缩算法及安全特性增强 PolarDB PostgreSQL版（兼容Oracle）2.0版本 引入了多项新功能，包括支持用户选择LZ4算法进行数据列压缩，以提高压缩性能，同时仍保留对原来pglz压缩方式的支持。此外，用户还可以通过使用 pg_read_all_data...
实践教程概览
通过后处理脚本实现自动挂载ossfs 设置后处理脚本后，E-HPC集群上后续扩容的节点均会自动执行指定的后处理脚本，可以满足计算节点预部署的需求。通过后处理脚本，您可以对计算节点做定制化操作，例如扩容的计算节点自动挂载ossfs、自动部署...
Python内置资源包
numpy 无 算法基础处理。pandas 无 算法基础处理。psycopg2>=2.7.4 连接操作PostgreSQL。pyhdfs>=0.2.1 Hadoop计算引擎下，使用PostgreSQL。pyhs2>=0.6.0 连接并操作HDFS。pyodps>=0.7.16 ODPS操作，适用ODPS。pyspark>=2.3.1 Hadoop计算...
Python内置资源包
numpy 无 算法基础处理。pandas 无 算法基础处理。psycopg2>=2.7.4 连接操作PostgreSQL。pyhdfs>=0.2.1 Hadoop计算引擎下，使用PostgreSQL。pyhs2>=0.6.0 连接并操作HDFS。pyodps>=0.7.16 ODPS操作，适用ODPS。pyspark>=2.3.1 Hadoop计算...
应用场景
如今，企业使用AI图像技术，将带有产品缺陷的5万多张图片上传到云计算平台，通过深度学习与图像处理技术进行算法训练。优化的AI算法，其识别准确度可达到95%以上，碎片率（瑕疵品）下降50%。不仅如此，从图像拍摄到数据接收、处理，然后到...
工作原理
针对以上问题，日志服务推出智能巡检功能，通过自研的人工智能算法，对指标、日志等流数据进行一站式整合、巡检与告警。使用智能巡检功能后，您只需要组织一下具体的监控项，算法模型就会自动为您完成异常检测、业态自适应、告警精细，让您...
并行网关
在拓扑任务中，您可以添加并行网关实现多个节点并行处理效果，满足业务存在多个独立任务需要并行处理的需求，以此提高整体处理性能。本文将快速引导您如何在拓扑任务中使用并行网关。操作步骤 创建拓扑子任务。创建两个或两个以上的简单或...
数据处理
数据处理类节点包括页面导航节点、并行数据处理节点、串行数据处理节点、序列执行节点和WebSocket节点。本文介绍在蓝图编辑器中，配置数据处理类节点的方法。页面导航节点 页面导航 节点，可用于实现页面跳转的功能，支持新开浏览器标签页...
查询流程和执行计划
本文介绍 AnalyticDB MySQL版 的查询处理流程和执行计划中的相关概念。查询流程 AnalyticDB MySQL版 使用SQL语言完成用户和系统内部存储数据之间的交互。SQL查询的执行计划生成流程如下：客户端将SQL语句提交到 AnalyticDB MySQL版 的前端...
内容审核常见错误码
问题诊断中心 使用 问题诊断中心 可帮助开发者更高效地诊断API使用过程中的问题。内容安全错误码 HTTP 状态码 错误代码 描述 403 AuthFailed 授权失败，请检查RAM权限配置。400 ClientError.IllegalArgument 请检查参数，如参数值所代表的...
并行查询性能
并行查询利用多核CPU的并行处理能力，以8核32 GB 独享规格 的集群为例，并行查询示意图如下所示。下文将介绍8.0.1和8.0.2版本并行查询参数取值分别设置为如下表所示时，PolarDB 集群负载 并行查询测试方法 与 执行结果。关于如何配置参数，...
使用Grafana进行异常检测算法调优
Lindorm Machine Learning提供了Grafana插件，支持以可视化的方式进行时序异常检测，您可以通过该插件调试出合适的异常检测算法与参数。操作流程 整体操作流程如下。步骤一：创建Grafana工作区 您可以在阿里云 应用实时监控服务ARMS 中快速...
使用Grafana进行异常检测算法调优
Lindorm Machine Learning提供了Grafana插件，支持以可视化的方式进行时序异常检测，您可以通过该插件调试出合适的异常检测算法与参数。操作流程 整体操作流程如下。步骤一：创建Grafana工作区 您可以在阿里云 应用实时监控服务ARMS 中快速...
服务下线通知
温馨提示 尊敬的阿里云用户您好，非常感谢您对阿里云自然语言处理产品的支持，由于 NLP基础服务1.0 所依赖的组件不再维护，为了提供更稳定与高性能的算法服务，提供更清晰简化的使用体验，我们于2020年12月正式发布了 NLP基础服务2.0，2.0...
离线异步任务场景
GPU实例规格 您可以在离线GPU任务应用场景下，根据业务需要，特别是算法模型所需要的CPU算力、GPU算力与显存、内存、磁盘，选择不同的GPU卡型与GPU实例规格。关于GPU实例规格的详细信息，请参见 实例规格。部署方式 您可以使用多种方式将您...
使用Grafana进行异常检测算法调优
Lindorm Machine Learning提供了Grafana插件，支持以可视化的方式进行时序异常检测，您可以通过该插件调试出合适的异常检测算法与参数。操作流程 整体操作流程如下。步骤一：创建Grafana工作区 您可以在阿里云 应用实时监控服务ARMS 中快速...
- 产品推荐
- 这些文档可能帮助您