AI加速概述
Rapidformer（Transformer训练加速）PAI-Rapidformer是PAI推出的一款PyTorch版的针对Transformer系列模型的训练优化工具，其可以通过加速开关的方式来组合部分或全部的优化技术，以优化PyTorch版Transformer模型的训练过程，有效提高模型...
常见退信内容分析
因为拒掉的原因很多，所以要从对方返还的信息来判断原因。我方服务器IP地址被对方拒掉。因为拒掉的原因很多，所以要从对方返还的信息来判断原因。请将退信在线提交我们检查核实。确定原因后，我们将联系对方解除屏蔽。Connection timed out...
功能发布记录
一款基于AI大模型的优化技术咨询服务机器人，通过"文字聊天”和“表格文件”来沟通业务中的问题，自动生成数学建模公式、代码、调用软件运行求解、结果解释。2023年8月 求解器SDK更新V0.25.x版本（V0.25.1下载）：提升内点法的性能 MILP...
广告流量分发-线性规划
业务调研、数据量化、数学建模 在使用优化技术的时候，需要更详细的调研业务的需求，整理相关的业务逻辑和数据，并量化表示它。然后采用数学规划的方法进行数学建模。此部分细节较多，可在案例 视频流量调控 中查阅细节，此处我们仅列出...
交通调度-网络流最大流问题
业务调研、数据量化、数学建模 在使用优化技术的时候，需要更详细的调研业务的需求，整理相关的业务逻辑和数据，并量化表示它。然后采用数学规划的方法进行数学建模。此部分细节较多，可在案例 交通调度 中查阅细节，此处我们仅列出数学...
营养搭配-线性规划
业务调研、数据量化、数学建模 在使用优化技术的时候，需要更详细的调研业务的需求，整理相关的业务逻辑和数据，并量化表示它。然后采用数学规划的方法进行数学建模。此部分细节较多，可在案例 营养搭配 中查阅细节，此处我们仅列出数学...
人员排班-任务分配(混合整数规划)
业务调研、数据量化、数学建模 在使用优化技术的时候，需要更详细的调研业务的需求，整理相关的业务逻辑和数据，并量化表示它。然后采用数学规划的方法进行数学建模。此部分细节较多，可在案例 人员排班 中查阅细节，此处我们仅列出数学...
物流运输-网络流问题最小化成本
业务调研、数据量化、数学建模 在使用优化技术的时候，需要更详细的调研业务的需求，整理相关的业务逻辑和数据，并量化表示它。然后采用数学规划的方法进行数学建模。此部分细节较多，可在案例 物流运输 中查阅细节，此处我们仅列出数学...
行业例：排产排程-采购和生产规划
业务调研、数据量化、数学建模 在使用优化技术的时候，需要更详细的调研业务的需求，整理相关的业务逻辑和数据，并量化表示它。然后采用数学规划的方法进行数学建模。此部分细节较多，可在案例 排产排程03 中查阅细节，此处我们仅列出数学...
优化器
AnalyticDB PostgreSQL版 针对HTAP场景进行了不同的优化，极大地提升了数据库性能。MagicSet下推 MagicSet下推是适用于OLAP的一个高效的优化器改写规则，其利用MagicSet提供的filtering能力，降低在大表上聚合的代价，并降低同聚合结果join...
常见问题
在分布式事务服务挂掉的情况下，事务是否能正常回滚？分布式事务的服务端会记录下事务的状态并持久化，即使服务挂掉，在服务重新启动后，事务仍然能够正常回滚。建表时，是否可以使用 SQL 的关键字作为列的名称？不可以，建表时列名不能...
推理加速（Blade）概述
PAI-Blade结合了多种优化技术，对训练完成的模型进行优化，从而达到最优的推理性能。同时，PAI-Blade提供的C++ SDK可以部署优化后的模型推理，帮助您快速的将模型应用于生产。本文介绍PAI-Blade的工作原理和使用流程。背景信息 PAI-Blade是...
SQL优化技术
本文介绍数据库自治服务DAS（Database Autonomy Service）的SQL优化技术。背景信息 作为数据库管理员或应用开发者，都有过SQL优化经历。数据库上执行的SQL千差万别，且伴随着业务快速迭代、数据分布特征变化、热点变化、数据库版本升级等...
混合负载HTAP
PolarDB-X 采用了基于代价的优化器技术，能够根据实际数据量、数据分布情况等，搜索到较优的执行计划，例如，对Join顺序进行调整、选择合适的Join或聚合算法，对关联子查询去关联化等。执行计划的好坏很大程度上决定了查询效率，查询优化...
深度解析PolarDB数据库并行查询技术
本文主要介绍基于代价进行并行优化、并行...对PolarDB也是如此，在设计和开发并行查询引擎时，我们充分利用现有优化器的技术积累和实现基础，不断改进，不断打磨，最终形成了一个持续迭代的技术方案，以保证新的优化器的稳定运行和技术革新。
DescribeAvailableAdvices-显示可用优化建议
alter table `schema1`.`table1` drop key col1_1_idx Reason string 生成优化建议的原因。15天未使用，历史使用统计概率小于1%Benefit string 建议的收益。节省0.4 GB的存储空间。TotalCount long 返回的建议总数，取值为：大于等于 0 且...
技术原理
PolarDB-X采用了基于代价的优化器技术，能够根据实际数据量、数据分布情况等，搜索到较优的执行计划，例如，对Join顺序进行调整、选择合适的Join或聚合算法、对关联子查询去关联化等。PolarDB-X优化器会基于代价估计将请求区分为TP与AP负载...
图解MySQL 8.0优化器查询解析篇
然而这种方式虽然入门简单，但是维护极难，而且通用性不强，即使不断进行软件架构设计或者抽象重构，仍然需要不断地变换应用，这也是为何非关系型数据库回头拥抱数据库SQL优化器的原因。SQL优化器本质上是一种高度抽象化的数据接口的实现，...
查询性能优化指导
收集统计信息 两种优化器的选择 使用索引加速查询 查看执行计划 数据倾斜的检查和处理 查看正在运行的语句状态 判断当前锁的状况 使用 Nest Loop JOIN 提升性能 收集统计信息 AnalyticDB PostgreSQL 的优化器在进行查询优化时，会根据统计...
版本发布说明
修复部分场景下子查询转semi-join的优化，可能导致查询报错的问题。发布日期：2023-09-22 大版本：V5.4.17 小版本：16952556 类别 说明 新增&优化 新增支持快速中断扩缩容过程中的校验任务。新增useAffectedRows支持。新增支持自动分区表下...
监控、诊断和故障排除
对于客户端网络断掉的情况，用户可以使用工具（如Wireshark）调查网络连接问题。客户端错误问题 客户端授权错误请求增加 当监控中的客户端授权错误请求数增加，或者客户端程序接收到大量的403请求错误，那么最常见的可能原因有以下几个：...
PolarDB MySQL版8.0.1版本发布日志
此时，查询结果中会返回不能使用列存引擎的原因。支持在Grouping字句中使用关联子查询，以及消除复杂关联子查询。多主集群的全局Binlog支持GTID（全局事务标识符）。优化Buffer Pool扩容功能，如自动取消前序缩容、及时扩容等。优化列存...
PolarDB处理TPC-H查询的挑战和机遇
本文深入分析了TPC-H查询中，可能存在的性能优化点和对应的优化思路，以及MySQL的现状和 PolarDB 做的一些改进工作。背景信息 TPC-H是世界上最为流行的OLAP workload的benchmark程序，只要是和查询处理过程相关的任务，大多会使用TPC-H作为...
查询报错问题
若SQL自身无法进行优化，但依旧触发该错误，可联系分析型数据库MySQL版技术支持对单个分析型数据库MySQL版的系统默认值进行调整，此操作可能会造成数据库性能下降。查询提示错误 META_COLUMN_NOT_EXIST 在分析型数据库MySQL版表新增字段后...
配置弹性伸缩（仅Hadoop集群类型）
开启抢占实例补偿后，在竞价实例被回收前5分钟左右，将主动替换掉当前竞价实例。当您不指定 组内最小按量节点数量、按量节点所占比例 和 最低价的多个实例规格 参数时，您创建的是普通成本优化伸缩组。否则，您创建的是成本优化混合实例...
计算资源优化
冷启动的优化用户和平台配合完成。函数计算已经对系统侧的冷启动做了大量优化。对于用户侧的冷启动，建议您从以下几方面优化：精简代码包：开发者要尽量缩小代码包。去掉不必要的依赖。例如，在Node.js中执行 npm prune 命令，在Python中...
PolarDB并行查询
本文介绍 PolarDB MySQL版 在并行查询这一企业级查询加速特性上做的技术探索、形态演进和相关组件的实现原理。并行查询背景 PolarDB 亚马逊在2017年发表的关于Aurora的这篇paper[1]，引领了云原生关系型数据库的发展趋势，而作为国内最早...
列存索引技术架构介绍
技术架构 行列混合优化器 PolarDB 有一套面向行存的优化器组件，引擎层支持列存功能之后，此部分需要进行功能增强。优化器需要能够判断一个查询应该被调度到行存执行还是列存执行。基于此，列存索引通过一套白名单机制和执行代价计算框架来...
PolarDB HTAP实时数据分析技术解密
In-Memory Column Index的技术架构 行列混合的优化器 PolarDB原生有一套面向行存的优化器组件。在引擎层增加列存功能后，此部分需要进行功能增强，优化器需要能够判断一个查询应该被调度到行存执行还是列存执行。通过一套白名单机制和执行...
FinOps成本管理服务内容说明
1.服务概述 阿里云成本管理服务基于FinOps理念，结合阿里云成本管理模型，成本运营平台以及顾问式培训指导，全方位赋能企业客户云成本分析，优化和运营能力，提升云支出的透明度、合理性和可预测性，充分发挥云计算的效能和价值。...
求解器用户手册
同时进行两个方法的优化，耗费的内存更多-更鲁棒-在求解新类别问题的时候，建议先用本方法来尝试求解，帮助分辨Simplex或IPM方法哪种更合适，辅助后续算法选取 计算设备需求 不同问题可能有明显差异，请以实测为准。以下实验室的测试值供...
MongoDB实例的CPU使用率高问题
关于审计⽇志的使⽤⽅法和语法参考：开通日志审计功能 CPU使用率高的常见原因和优化策略 CPU使用率高的常见原因及对应的优化策略如下：扫描⾏数过多 MongoDB为多线程应⽤，如果存在单个查询扫描⾏数过多，该查询所在线程的CPU占⽤时间会变...
2021年11月23日 产品更新动态
软电话可查看排队情况，以便坐席安排个人休息节奏 数据概览页增加by技能组排队数据的监控 录音批量下载时，【挂断原因】支持多选 双呼通话详单优化 三、技术优化：【跨迭代】云呼2.0支持同城双活 风险治理-明文AK/SK专项 应用接入安全防护...
列存索引如何实现高效数据过滤
Runtime filter Runtime filter是一种查询优化技术，它是在查询执行期间动态生成的过滤器。在查询执行过程中，Runtime filter可以根据已经扫描到的数据值或者其他信息，过滤掉不需要的数据，从而减少查询的数据量，提高查询性能。常见的...
2021年8月24日 产品更新动态
2021年8月24日 产品更新，核心内容包括打通阿里云智能语音导航、短信满意度收集模式优化、语音留言信箱统计及录音提取、IVR支持灵活配置挂断原因、通话质量实时监控、IVR封装可复用流程和大量数据下载逻辑优化等。产品功能 亮点解释 智能...
2021年
对分区表使用跨机并行查询 优化 基于RTO的crash recover时间改进 支持配置polar_crash_recovery_rto参数，指定实例期望的RTO时间，从而保证在发生crash recovery时，数据库可以在期望的RTO时间内完成崩溃恢复重启，恢复可用状态。...
Hash Clustering
Sort是可选项，但在大多数情况下，建议和Cluster Key一致，以便取得最佳的优化效果。命令语法 CREATE TABLE[IF NOT EXISTS][(<col_name><data_type>[comment],.)][comment][PARTITIONED BY(<col_name><data_type>[comment],.)][CLUSTERED ...
资源使用优化
通过工具辅助人工方式定期对云上整体资源进行梳理、调整和更新，将资源可视化，高效指导资源的优化方向，从而避免云资源在持续使用过程中由于各种原因产生不必要的浪费。如存在孤岛资源、闲置或低利用率资源、未绑定公网IP和网关的对外服务...
产品简介
服务内容 服务大类 服务类型 服务内容 大数据专家咨询服务 大数据技术架构方案咨询 为客户提供构建和优化大数据体系的技术架构方案咨询服务，覆盖离线/实时数仓体系建设管理、数仓建模管理，数据开发管理，数据安全管理、数据质量管理、...
Logview诊断实践
本文为您介绍导致出现慢作业的原因及如何查看慢作业并提供对应的解决措施。分析运行出错作业 作业运行失败时，通过Logview中查看 Result Tab 页可以查看出错信息，对于失败的作业，打开Logview默认会跳转到 Result Tab 页。常见失败原因...
- 产品推荐
- 这些文档可能帮助您