PolarDB MySQL版8.0.1版本发布日志
8.0.1.1.41 类别 说明 发布时间 新增功能和性能优化 列存索引中新增基于TopK下推的Left Join功能。支持为用户授予执行 SHOW_ROUTINE、FLUSH_USER_RESOURCES、FLUSH_TABLES、FLUSH_STATUS 和 FLUSH_OPTIMIZER_COSTS 命令的全局动态权限。...
控制面核心组件
性能优化离不开细节，其中部分优化是通用的，也有部分优化是面向业务场景定制的，接下来会介绍一下蚂蚁团队优化的一些细节点。首次请求优化：社区方案里 Pilot 是通过 Pod.Status 来获取 Pod 的 IP 信息，在小集群的测试中，这个时间基本秒...
DescribeAvailableAdvices-显示可用优化建议
用DescribeAvailableAdvices来显示可用优化建议。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限...
应用上云策略及决策流程
优化上云 通过使用云上PaaS产品及服务，对应用进行局部优化，提升性能或稳定性。重构上云 应用组件不适配云的架构，或者不符合成本效益，因此需要对应用进行重构，基于新的云平台构建云原生架构的应用。决策流程 根据业务调研阶段输出的...
核心自治技术案例解析
基于全局的Workload优化，基于Workload特征，例如SQL执行频率，读写比等进行优化，最大限度地消除局部优化的片面性弊端。下面是双11期间自动SQL优化一个实际案例：某自治服务接入实例，DAS于11月7日通过负载异常检测到因慢SQL引起的负载...
AliSQL内核小版本发布记录
AliSQL是RDS MySQL的内核，除了为用户提供MySQL社区版的所有功能外，还提供了企业级备份恢复、线程池、并行查询等类似于MySQL企业版的诸多功能，赋予了RDS MySQL安全、备份、恢复、监控、性能优化、只读实例等各项能力。本文介绍AliSQL的...
HTAP中的行列混存查询优化
在IMCI中使用了cascade优化器框架来进行查询优化，该框架能够很好地避免查询优化中可能存在的局部最优问题。但在这个框架之外，仍然使用了传统优化器的三个功能模块：plan enumeration、cardinality estimation 与 cost model，此处以join ...
求解器用户手册
用 mindoptpy.Model.addVar()来添加优化变量，并分别定义其下界、上界、目标系数、名称和类型；用 mindoptpy.Model.addConstrs()来添加约束。按列输入Python示例简述：用 mindoptpy.Model.modelsense=MDO.MAXIMIZE 将目标函数设置为最小化...
阿里云弹性预测 AHPA 助力厨芯科技降本增效
最初使用 CronHPA 设置各个时间段的容器数，再用 HPA 应对业务高峰的局部扩容，有一定的优化效果。但是，CronHPA 设置的时间段越多，运维成本越高，并且不够灵活；目标容器数的配置也比较困难，太少则无法保证应对业务高峰，太多又起不到...
DataV自定义组件性能优化
本文通过浏览器关键路径渲染、内存泄漏和资源优化三部分来介绍自定义组件性能优化的方法。关键渲染路径 浏览器关键渲染路径主要包括五部分：JavaScript、Style、Layout、Paint和Composite。JavaScript 对于JavaScript的优化，一般从缩减...
PolarDB并行查询
自适应执行策略 在早期版本中，串行优化和并行优化，并行优化和并行计划生成之间存在一定的耦合性，导致在开始并行优化后会无法退化回串行的问题，如果系统中这样的查询并发较多，会同时占用很多worker线程导致CPU打爆。新的并行优化器解决...
功能发布记录
云游、LHC 支持基线局部同步 云游、LHC 支持基线局部同步。支持 LHC 变更同步运维单 CAFE 触发运维单，HAS 支持同步完成。钉钉机器人通知方式优化 变更钉钉机器人通知方式为 Gotone。SQL 性能优化 优化定时拉取巡检执行任务的 SQL 性能。...
V5.4.x系列实例版本说明
发布日期：2024-02-18 大版本：V5.4.12 小版本：17082300 类别 说明 优化 优化metadata query的创建逻辑，减少依赖。缺陷修复 修复bka join高并发下偶现的报错问题。修复子查询大于等于三项关联项时，关联匹配错乱的问题。修复连接被KILL时...
UPDATE
标记文件主要用在DELETE、UPDATE、INSERT ON CONFLICT等有数据删除、更新的场景中。以如下SQL为例来介绍Hologres UPDATE原理。create table update_test(col1 text NOT NULL PRIMARY KEY,col2 text);UPDATE update_test SET col2='tom' ...
发布说明
播放状态和接口调用的调整（如前后台切换，页面切换）相比较3.5版本，3.6版本在内部对前后台切换和页面切换进行了处理，具体表现如下：(void)setActive弃用：viewWillAppear与viewWillDisappear的处理：viewWillDisappear时不需要stopEdit...
版本发布说明
发布日期：2024-03-20 大版本：V5.4.18 小版本：17108394 类别 说明 新增&优化 新增Online Modify Column 2.0功能。新增 show full binary logs、show full master status 等binlog相关运维指令。优化存储过程的创建和删除流程，避免出现...
如何优化数据全量抽取
说明 示例中，为了提高查询性能，在user_id和gmt_create上建立了联合索引，并在order by中加入user_id提示优化器可以通过索引来消除排序。由于Row Constructor Expression包含null值会导致表达式求值结果为null，当存在null值时需要使用OR...
使用EXPLAIN阅读查询计划
查询优化器使用数据库的数据统计信息来选择具有最小总代价的查询计划，查询代价通过磁盘I/O取得的磁盘页面数作为单位来度量。可以使用EXPLAIN和EXPLAIN ANALYZE语句发现和改进查询计划。EXPLAIN的语法如下：EXPLAIN[ANALYZE][VERBOSE]...
执行计划
InitPlan：预查询，被用在动态分区消除中，当执行时还不知道优化器需要用来标识要扫描分区的值时，会执行这个预查询。Sort：为另操作（例如Aggregation或者Merge Join）进行所有数据排序。Group By：通过一个或者更多列对行进行分组。Group...
PolarDB处理TPC-H查询的挑战和机遇
本文深入分析了TPC-H查询中，可能存在的性能优化点和对应的优化思路，以及MySQL的现状和 PolarDB 做的一些改进工作。背景信息 TPC-H是世界上最为流行的OLAP workload的benchmark程序，只要是和查询处理过程相关的任务，大多会使用TPC-H作为...
列存索引如何实现高效数据过滤
PolarDB IMCI属于列存表的模式，数据支持落盘，实现了更加多样化的方法来优化全表数据扫描。技术选型 特点 示例 列式HeapTable 写入无序（按时间插入顺序），更新速度快；全量scan速度快；不支持按order key进行小范围扫描。SQL Server和in...
偏分析场景的实践和优化
基于局部索引做过滤 很多分析场景都期望用时间做二级分区，这样做大数据扫描的时候可以把时间做过滤条件，过滤掉绝大多数历史数据。select a1,c2 from T1 where time>='2010-01-01 00:00:00';为了避免全部扫描，目前默认会在这个分区列上做...
术语表
局部索引 存储节点内，由MySQL维护的索引。又称二级索引。全局二级索引（Global Secondary Index，简称GSI）全局的二级索引，索引中的数据按照指定的拆分方式分布在各个存储节点上。聚簇索引 一种特殊的全局二级索引，默认覆盖列包含主表的...
SQL调优方法与实战
找出需调优的慢SQL后，先通过 EXPLAIN 查看执行计划，然后通过如下方法优化SQL：下推更多计算至存储层MySQL，适当增加索引，优化执行计划。下推更多的计算 PolarDB-X 1.0 会尽可能将更多的计算下推到存储层MySQL。下推计算能够减少数据传输...
Logview诊断实践
子查询 SELECT DISTINCT ds FROM t_ds_set 先执行，其结果需要被用来做分区裁剪，来优化主查询需要读取的分区数。这两次运行分别是两个Fuxi作业，Logview中体现的是两个 tab 页来显示：第一个 tab 页显示 job_0 全部成功，实际上第二个 tab...
功能发布记录（2018~2022年）
DescribePipeline DescribeApplicationInstances 健康检查优化 优化 优化健康检查状态显示优化、优化发布过程中实例版本信息、优化网关路由配置同步到SLB。设置健康检查 2021年01月26日 功能名称 变更类型 功能描述 相关文档 新手引导 新增...
功能和服务清单
数据分析及建议 数据分析及策略调整沟通 投放优化及提效 含广告优化、关键词优化、目标人群优化，精准度提效等，整体投放降本增效 长期赋能 投放培训、产品页面优化、产品策略优化等综合能力培训 基础建站服务清单 本服务由阿里云生态伙伴...
产品月度更新总览
【体验优化】合并请求增加合并后的操作反馈【功能优化】优化三方代码库本地导入工具【功能优化】企业内公开库评论支持提及企业内其他成员。【体验优化】代码加密无法获取密钥时的报错信息优化。【openapi】OpenAPI查询单文件，增加文件大小...
Hudi概述
Apache Hudi是一种数据湖的存储格式，在Hadoop文件系统之上提供了更新数据和删除数据的能力以及消费变化数据的能力。Hudi表类型 Hudi支持如下两种表类型：Copy On ...Hudi提供了一种消费HDFS变化数据的能力，可以用来优化现有的系统架构。
PolarDB MySQL版5.6版本发布日志
5.6.1.0.32 类别 说明 发布时间 新增功能和性能优化 支持热备节点功能，进一步优化高可用效率。2022-03-15 问题修复 修复 innodb_show_verbose_deadlock 取值为 ON（默认值）的前提下，执行 show engine innodb status 命令展示全量死锁...
PolarDB MySQL版5.7版本发布日志
支持热备节点功能，进一步优化高可用效率。2022-01-14 5.7.1.0.16 类别 说明 发布时间 问题修复 优化了手动触发checkpoint的策略。2021-12-14 5.7.1.0.15 类别 说明 发布时间 新增功能和性能优化 新增Fast Query Cache功能。具体请参见 ...
资源使用优化
资源使用优化是成本优化的必要手段也是有效手段。云资源利用率不佳往往由于用云经验和技术债务等原因，比如传统企业数字化程度不高且经验不足，在面对云原生架构的引入时，缺乏有效的成本洞察和成本控制的手段；也或者由于云原生技术的一些...
Insight 更新日志
优化「跨项目度量」、「敏捷项目度量」，根据专家实践经验，提取项目跟进过程需要观测的核心数据，形成拿来即用的报表模板，让你更好地跟进项目交付过程，保障项目交付质量和效率；专家解读：跨项目场景，我们度量什么？敏捷研发，我们如何...
读取优化
我们把优化分为：客户端优化、服务端优化、平台优化（ApsaraDB for HBase）客户端优化 get请求是否可以使用批量请求 这样可以成倍减小客户端与服务端的rpc次数，显著提高吞吐量。Result[]re=table.get(List<Get>gets)大scan缓存是否设置...
SparkSQL自适应执行
阿里云E-MapReduce 3.13.0及后续版本的SparkSQL支持自适应执行功能，可以用来解决Reduce个数的动态调整、数据倾斜和执行计划的动态优化问题。使用限制 本文针对SparkSQL自适应执行涉及到的参数适用于Spark 2.x。如果您使用的是Spark 3.x，...
功能发布记录（2018~2022年）
本文介绍了2023年之前EDAS每次发布涉及的新增功能、功能优化、重要问题修复及对应的文档，帮助您了解EDAS的发布动态。2022-11-14 功能名称 功能描述 功能类型 相关文档 API快速访问 云端服务接口通常只能在集群内部进行访问，不便于测试...
算子
AnalyticDB for MySQL 中的一个算子负责完成一个基本的数据处理逻辑，合理地组合算子、优化算子的顺序和执行方式，可以提升数据的处理效率。本文介绍 AnalyticDB for MySQL 中的常用算子及算子所对应的属性。背景信息 AnalyticDB MySQL版 ...
Range Clustering
又可以用组合键来精确定位某张表，示例命令如下：SELECT count(*)from mf_project.mf_tab WHERE project_name="xxxdw"AND name="adm_ctu_cle_kba_midun_trade_dd"AND type="TABLE;甚至可以用于区域查询，比如统计以 adm 开头的表：SELECT ...
新功能发布记录
数据库代理 数据库代理计费说明 自动扩缩容优化 针对存储空间的自动扩容机制进行了优化升级：支持客户根据实际业务需求自定义存储空间自动扩容步长。引入扩容上限提示与告警功能。展示系统对存储空间使用情况的监控频率。支持查看自动扩容...
关键词抽取
该算法基于TextRank，根据PageRank算法思想，利用局部词汇之间关系（共现窗口）构建网络，并计算单词的重要性，最终选取权重大的作为关键词。常用流程如下：原始语料 分词 使用词过滤 关键词抽取 组件配置 您可以使用以下任意一种方式，...
- 产品推荐
- 这些文档可能帮助您