LLM on DLC-Megatron on DLC最佳实践
常见的大模型训练技术包括：数据并行技术、模型并行技术（包括张量并行技术和流水并行技术）、优化器状态并行技术、序列并行技术、激活重算技术等：数据并行技术（Data Parallel）：在多个GPU组上有相同的模型参数副本，但读取不同的样本。...
产品月度更新总览
新增仓库规范设置，支持限制仓库的分支命名规则与分支合并方向规则，确保创建的分支和合并方向符合企业管控要求。代码库首屏相关信息中支持仓库贡献者列表展示。WebHook 支持兼容企业微信群机器人。优化合并请求首屏概览信息，增加文件变更...
错误码
说明：PolarDB-X 向后端数据节点异步创建连接时，如果在短时间创建大量连接，或者数据节点建立连接速度太慢，会出现等待超时。该问题通常是由于后端数据节点压力过大或异常导致的，建议使用 PolarDB-X 读写分离，或者升级更高规格，减轻后...
版本发布说明
优化存储过程的创建和删除流程，避免出现元数据残留问题。降低REPLACE/UPSERT语句在包含GSI或UGSI的表上执行时的CPU消耗。缺陷修复 修复包含clustered index的表在创建local索引时，部分旧的执行计划没有清理的问题。修复在DRDS模式数据库...
大版本升级最佳实践
在DTS低版本与高版本双向同步场景下容易出现异常，您需要使用MySQL 5.6、5.7和 PolarDB MySQL版 5.6、5.7版本默认的排序字符集，否则DTS反向同步的时候会出现异常。由于排序规则问题，创建视图时可能会报错 lllegal mix of collations，...
关于 Portal 和 Bundle 工程
非静态链接的 Bundle 必须填写 exportPackages，否则会出现类加载不到的问题。例如，如果所有的代码在 com.alipay.demo 和 com.alipay.bundle 下，那么在 exportPackages 中就可以写 com.alipay ，也可以写 com.alipay.demo 、...
即席分析概述
随时随地探索数据 业务针对各个方向场景进行定向数据探索，进行维度的合并拆分 例如，您在6月1日想要查看上个月华东区域的办公用品的销售金额，6月2日老板又需要您根据全国门店的库存情况来调货，确保重点区域门店618大促不会出现库存不足...
2023年
修复实例分时扩容表RENAME后会出现数据未重新分布的问题。修复创建带有GROUP BY和UNIONALL的实时物化视图场景下，执行INSERT时出现Coredump的问题。修复DROP TABLE报错 cache lookup failed for extension 18713194 的问题。修复向量...
库表数太多导致实例卡顿或异常
说明 库表数量多不一定会出现问题，是否出现问题与业务模型和负载等因素也有关系。例如以下两种业务场景，数据库规格相同且都有1万的库表数和10万的总文件数，但面临的问题完全不一样：会计软件系统：访问具备明显的聚集性特征，大多数库表...
MongoDB 分片集群介绍
MongoDB分片集群技术用于解决海量数据的存储问题，本文介绍MongoDB分片集群相关的常用知识。什么情况下使用分片集群？当您遇到如下问题时，可以使用分片集群解决：存储容量受单机限制，即磁盘资源遭遇瓶颈。读写能力受单机限制，可能是CPU...
表设计
假设数据分布不均匀，会出现以下问题：数据写入和读取能力受限于单个分区的能力，或者是单机能力，存在明显瓶颈。在某些数据处理场景下，热点或者数据分布不均会导致明显的长尾效应，拖慢整体速度。某个数据系统或者模块往往仅仅是整个业务...
ODC 常见问题
客户端版 ODC 安装问题 Q：客户端版 ODC 安装预检查时会检查哪些项目？A：客户端版 ODC 预检查项目如下所示：Windows 操作系统版本检查：仅支持 Windows 7 及以上版本。端口检查：查看 8989 是否被占用。在 ODC V2.3.0 后采用动态端口将...
导入与导出
本文介绍AnalyticDB MySQL中导入导出的常见问题及解决方法。说明 当常见问题场景中未明确产品系列时，表明该问题仅适用于 AnalyticDB MySQL 数仓版（3.0）。常见问题概览 如何停止异步导入导出任务？如何使用SQL查看当前库里RUNNING的导入...
MongoDB实例空间使用率高问题
db.grantRolesToUser("root",[{db:"local",role:"dbAdmin"}])use local db.runCommand({ compact:"oplog.rs",force:true })选择和使用分片不合理导致数据分布不均衡 sharding key类型选择不合理 在⼀个分⽚集群中，⽚键类型的选择⾄关重要...
版本及存储引擎
单节点实例（按量付费）副本集实例（按量付费）分片集群实例 TerarkDB（已下线）-分片集群实例 MongoDB 7.0版本说明 新推出可查询加密（Queryable Encryption）、分片元数据一致性校验、采样查询与分析分片键（analyzeShardKey）和自动合并...
T+1多库合并建仓
为保证业务可以继续使用RDS数据库，业务端通常会采用分库分表技术，将一个RDS数据库中的单张表数据拆分到多个数据库的多张表中。上述方案可解决因数据量大而导致的用户体验问题，但在对分库分表数据进行大数据分析时，逻辑上的一个表被拆成...
PolarDB MySQL版8.0.1版本发布日志
本文将详细介绍 PolarDB MySQL版 8.0.1版本的更新日志和全部的功能特性。8.0.1.1.41 类别 说明 发布时间 新增功能和性能优化 列存索引中新增基于TopK下推的Left Join功能。支持为用户授予执行 SHOW_ROUTINE、FLUSH_USER_RESOURCES、FLUSH_...
如何确认增加或删除Shard节点的进度
背景信息 当您对分片集群实例执行增加Shard节点或删除Shard节点操作后，可能会出现任务提交后很长时间都没完成的情况，以下内容将指导您如何检查上述问题。在进行操作前，您需要了解以下基本知识：了解MongoDB副本集实例和分片集群实例的...
集群负载不均问题的分析方法及解决方案
从结果可以看到查询请求都是普通的term查询，且主日志正常，可以排除ES集群本身出现问题以及存在消耗CPU的查询语句的情况。总结 通过以上分析，可以判断CPU负载不均主要是由于shard分布不均导致的。重新分配分片，确保主shard数与副shard数...
MongoDB小版本说明
修复多线程下并发、分发和合并模型命令（DescribeTable、BatchGetItem和BatchWriteItem）可能崩溃退出的问题。合并管道优化，更多信息，请参见 SERVER-42756$multiply operator may return with or w/o an error depending on whether ...
AliSQL内核小版本发布记录
修复Binlog in Redo和Binlog Parallel Flush在长时间高负载运行时，实例出现事务无法提交问题。20230610 Bug修复 修复执行COM_STATISTICS、COM_CHANGE_USER命令和SHOW PROCESSLIST语句时导致的死锁问题（表现为实例无法连接）。详情请参见 ...
杭州幻熊：从一周发版一次到每日交付
通过云效解决企业代码托管和软件集成发布问题，整体发布节奏由原来一周发版1次提升为每日交付；发布时长由原来一次发布30分钟提升为2分钟；现在各自项目组完成代码评审后自动集成发布，目前有30条生产环境流水线，单次发布节省20分钟的情况...
持续架构优化
通过分析后发现这些业务，随着业务的发展，新的业务场景也会出现，云厂商也会推出新的产品类型和产品规格，通过持续架构优化，适配业务需要，并优化云资源使用，降低用云成本。对应用架构进行云原生化改造 云原生架构是基于云原生技术的一...
PolarDB MySQL版8.0.2版本发布日志
2024-04-17 问题修复 修复Statement Outline和Concurrency Control等功能在执行Reload操作时，出现的内存泄漏的问题。修复左连接 INFORMATION_SCHEMA 库中的表时结果错误的问题。修复了当已创建DLM策略的表的表结构发生变更后，DLM策略仍能...
执行计划和基本算子
但当路由分发分到一个分片时，该算子也会出现在SELECT语句中。explain insert into sbtest1 values(1,1,'1','1'),(2,2,'2','2');PhyTableOperation(tables="SYSBENCH_CORONADB_1526954857179TGMMSYSBENCH_CORONADB_VGOC_0000_RDS.[sbtest1_...
如何将一棵LSM-Tree塞进NVM
数据一致性 PM到磁盘的合并涉及到数据库状态的改变，可能在系统宕机时出现数据一致性问题。针对该问题，本文通过在磁盘中维护描述日志（manifest log）的方式保证数据库状态改变的数据一致性。由于描述日志不在前端写入的关键路径中，因此...
数据营销
异常提醒：选填，可填写多个手机号满足给整个团队发送短信场景，一旦活动执行出现异常将会通过短信形式通知到用户，及时发现及时处理。2.1.3 活动设计 新建好活动后，点击查看计划，可进行活动设计。活动设计页面分为四块：地图区、工具区...
提交证书申请
申请协助和部署服务提供专属的技术支持，工作日内最快可在8小时内完成证书签发。更多信息，请参见 购买证书申请协助和部署服务。前提条件 已购买SSL证书。具体操作，请参见 购买SSL证书服务。如果您为.gov后缀的域名申请OV类型的证书，域名...
SyncQualityCheck-进行实时质检
接口说明 热线实时质检是在通话过程中，实时的将对话语音转写为对话文本，把文本传入到智能对话分析系统中进行实时质检，从而实时监测可能出现的潜在问题或风险，您可以实时的将对话文本及质检结果展示在客服人员工作台中（第三方系统）。...
3D环图
本文介绍3D环图的图表样式和配置面板的功能。图表样式 3D环图是饼图的一种，能够清晰智能地展示各类别在环圈内的占比情况。3D环图支持图表内外多位置的标签展示，支持指标卡样式展示，支持自定义多系列数据配置。配置面板 搜索配置：单击 ...
Event Time Column（Segment Key）
如果您需对大规模数据集使用基于主键的UPDATE或含范围过滤条件的查询，可以考虑为表设置Event Time Column（Segment Key），系统将数据文件基于Event Time Column范围排序后进行合并，减少文件之间的重叠，使得查询时能够过滤掉尽可能多的...
Quick BI用SQL创建数据集保存报错：“SQL导入错误”
问题描述 Quick BI用SQL创建数据集保存报错：“SQL导入错误”。问题原因 修改账号权限，导致创建数据集出现问题。解决方案 给相关无view权限的表赋予view权限。适用于 Quick BI
重启实例或节点
当云数据库MongoDB单节点实例、副本集实例、分片集群实例、分片集群实例中指定节点（任意一个Mongos节点或Shard节点）出现连接数满或性能问题时，您可以手动重启实例或指定节点。注意事项 重启实例期间会启停进程，系统会断开当前所有连接...
合并请求
典型的合并请求处理过程涉及如何提交合并请求、如何对合并请求进行评审以便确定是否接受请求、由谁来处理合并、合并后的通知机制等问题。通过 合并请求 功能，您可以：比较两个分支之间的变化。在线查看和评论代码修改，并 记录问题状态。...
数据库实时入仓快速入门
此时，如果您希望开发一个数据同步的作业，将这些表和数据都同步到Hologres中，其中user分库分表能合并到Hologres的一张表中，则可以按照以下步骤进行：步骤一：创建Catalog 步骤二：开发数据同步作业 步骤三：启动作业 步骤四：观察全量...
监控项说明
说明 由于副本集之间的心跳间隔是2s，故副本集实例、分片集群实例的Shard节点和ConfigServer节点的repl_lag取值在-2~2之间，均正常。Serverless实例 每次访问个数 sl_qps：实例的每秒访问次数。高级监控 说明 仅单节点、副本集和分片集群...
性能调优
在DLA中可以通过一系列的优化手段，自动打散分片、合并相邻分片、随机分发分片等优化逻辑，规避热点问题从而提高性能。合并相邻分片 在开启自动优化分片功能（ots-split-optimize=true）的基础上，通过 ots-split-size-ratio=0.5 合并相邻...
租户工作台
租户是一个逻辑概念，在 OceanBase 里是资源分配的单位，是数据...鼠标悬停在访问地址卡片上，可查看访问地址完整的私网地址及最大连接数，卡片右上角会出现设置和删除图标，单击设置图标可对访问地址进行编辑，单击删除图标可删除访问地址。
断点续传上传
在上传大文件（超过5 GB）到OSS的过程中，如果出现网络中断、程序异常退出等问题导致文件上传失败，甚至重试多次仍无法完成上传，您需要使用断点续传上传的方式。断点续传上传将需要上传的大文件分成多个较小的分片并发上传，加速上传完成...
业产技融合分层协作方案
第二个问题如果回答的不好，就会出现产品技术团队每天在不断的接需求、做需求，功能在不断增加和堆叠，但是产品的竞争力却没有提高，时间长了对产品的演进危害很大。如果您的公司已经发展出独立的业务、产品、技术的独立部门，技术部门一般...
- 产品推荐
- 这些文档可能帮助您