文档更新动态（2022年）
自定义掩码算法优化，新增自定义替换值的脱敏算法、自定义正则表达式的脱敏算法。更新说明 项目安全策略 脱敏算法 2022年07月19日 资产质量新增全局角色定义 新增系统管理员、数据源管理员、安全管理员、资产质量负责人等。更新说明 添加、...
核心自治技术案例解析
下面是双11期间自动SQL优化一个实际案例：某自治服务接入实例，DAS于11月7日通过负载异常检测到因慢SQL引起的负载异常，自动触发SQL优化闭环，SQL语句优化上线后，经过持续24小时优化效果跟踪完成优化收益评估，优化效果显著，如优化之前后...
行业算法模型介绍
五、向量召回算法 基于用户行为序列向量召回：当前算法会根据用户点击序列商品作为输入，计算物品向量，计算物品之间的相似度或者用户对于物品兴趣程度，较传统i2i算法有更好的泛化性。基于word2vec算法，共同用户行为越丰富，item间向量越...
Cost-based SQL诊断引擎
自动优化：自动优化服务自动识别业务数据库实例工作负载上的慢查询，主动完成诊断，生成优化建议，评估后编排优化任务，自动完成后续的优化上线操作及性能跟踪，形成全自动的优化闭环，提升数据库性能，持续保持数据库实例运行在最佳优化...
高可用架构部署方案
CLB可以同时配置四层和七层监听，及轮询、加权轮询、加权最小连接数等多种算法，合理分配后端ECS计算资源。使用云数据库RDS（Relational Database Service），针对高并发场景进行特殊优化，同时引入线程池、并行复制、隐含主键等功能保证...
实时算法编排
本文为您介绍如何使用智能制造平台AICS实时算法编排模块。实时算法编排流程 新建画布。算法流程搭建。算法试运行与调试。算法发布与周期运行。参数趋势查看。新建画布 登录 工业大脑智能制造平台AICS。左侧导航栏单击 实时控制优化>实时...
V5.4.x系列实例版本说明
优化查询优化器的算法，用于消除JOIN、FILTER、基于BKA（Batched Key Access）算法的IN条件中的重复条件。优化部分子查询的执行速度。V5.4.9-16142062 日期2021-02-25 类别 说明 新增特性 默认禁止执行未包含条件的UPDATE或DELETE语句。...
LLM-N-Gram重复比率过滤（DLC）
支持的 计算资源 DLC 算法说明 将文本中的内容按照字符或词语进行大小为N的滑动窗口操作，形成了长度为N的片段序列。每一个片段称为Gram，对所有Gram的出现次数进行统计。最后统计 频次大于1的Gram的频次总和/所有Gram的频次总和 两者比率...
配置动态内存优化
初始堆内存 小于最大堆内存设置 不符合，EDAS将按照一定算法优化应用Xms配置，详情请参见 默认参数优化。创建应用时开启动态内存优化 登录 EDAS控制台。在左侧导航栏，单击 应用管理>应用列表，在顶部菜单栏选择地域，并在页面上方选择微...
LLM-N-Gram重复比率过滤（MaxCompute）
算法简介 将文本中的内容按照字符或词语进行大小为N的滑动窗口操作，形成了长度为N的片段序列。每一个片段称为Gram，对所有Gram的出现次数进行统计。最后统计 频次大于1的Gram的频次总和/所有Gram的频次总和 两者比率作为重复比率进行样本...
求解器用户手册
关于LP求解，当前我们线性规划（LP）的求解提供了Simplex（单纯形法）、IPM（Interior Point Method，内点法）、Concurrent（并发优化）算法。在求解时候，执行流程如下文的“执行流程”图片所示，会默认选Concurrent，您可以通过设置...
组件参考：所有组件汇总
序列标注训练（MaxCompute）（即将下线）该组件是将输入序列的每个TOKEN作为一个多分类问题，采用Google原论文中的序列标注方法，实现对输入序列TOKEN进行分类，通常用于分词、词性标注和命名实体识别等。文本摘要训练 该组件旨在从冗长、...
云市场常见问题
本章节介绍阿里云OCR在云市场官方店铺（“阿里云计算有限公司”）的常见问题。产品功能相关问题 对图片的格式大小有怎样的要求？阿里云文字识别服务要求单张图片大小不超过10M,图片最长边不超过4096像素，最短边不小于15像素，当长边超过...
DAS Auto Scaling弹性能力
技术挑战 计算资源规格调整是数据库优化的一种常用手段，尽管计算资源规格只涉及到CPU和内存，但在生产环境中进行规格变配产生的影响不容忽视，涉及数据迁移、HA切换、Proxy切换等操作，对业务也会产生影响。在业务有突发流量时，通常计算...
JOIN优化和执行
通过如下Hint可以强制 PolarDB-X 使用Hash Join以及确定JOIN顺序：/*+TDDL:HASH_JOIN(table_outer,table_inner)*/SELECT.Lookup Join(BKAJoin)Lookup Join是另一种常用的等值JOIN算法，常用于数据量较小的情况。它的原理如下：遍历外表（左...
稳态数据挑选
因此，稳态数据挑选对设备性能评价、运行优化、系统辨识和故障检测均具有重要意义。具体的支持的方法有：滑动窗口检验法（Sliding window test，SWT）、组合统计检验法（Combination statistical test，CST）。计算逻辑原理 滑动窗口检验法...
Proxy小版本发布日志
7.0.7 LOW 2023-12-15 功能优化 优化故障恢复时间，DB故障的场景下能快速断连恢复服务。当发生阻塞时，优化同一连接在后续立刻发起的普通请求所记录的RT（Response Time）值，避免记录慢日志。支持TairSearch的TFT.EXPLAINSCORE命令。7.0.6...
Proxy小版本发布日志
7.0.7 LOW 2023-12-15 功能优化 优化故障恢复时间，DB故障的场景下能快速断连恢复服务。当发生阻塞时，优化同一连接在后续立刻发起的普通请求所记录的RT（Response Time）值，避免记录慢日志。支持TairSearch的TFT.EXPLAINSCORE命令。7.0.6...
版本说明
V2.6.12 2021年4月9日 设计优化 添加数据写入的审计日志（由于会对写入性能有影响，只接受提交工单开启，且仅支持后台运维查询）V2.6.11 2021年4月2日 新特性 api/mquery 和 api/query/mlast 增加 roffset 与 rlimit 查询接口,其语义与原有...
列存索引中TopK算子的实现
动态选择内存磁盘算法 内存算法和磁盘算法不同，如果使用一个固定的阈值来作为选择内存算法或磁盘算法的依据（比如K小于阈值时使用内存算法，否则使用磁盘算法），那么针对不同的可用执行内存就需要设置不同的阈值，带来了人工干预的开销。...
事件消息定义
该文档定义了云呼叫中心2.0版本的所有事件，并整理了常见场景下的事件序列。事件按功能分类 将事件按功能分成坐席事件、话务事件、督导事件、IVR轨迹事件、实时流事件、预测式外呼、其他事件七类，详细介绍各类事件的功能及发生场景。坐席...
通过消费组拉取指标数据进行智能巡检
例如，某个时间序列的观测点时间间隔为1分钟、周期为1天，则该时间序列2个周期有2880个观测点，建议观测长度的取值大于等于2880。敏感度 异常分数输出的敏感度。异常分数大于0.5表示异常，异常分数大于0.75则触发告警。敏感度设置越高，...
新功能发布记录
添加访问地址 租户规格下限变更 集群实例中的租户规格下限调整，V3.x 以上版本的租户最小规格从原有 2C5G 变更为 1C4G，同样的集群规模可以创建更多的租户数量，可降低用户使用成本。新建租户 备份恢复能力增强 支持按照备份集进行恢复，...
时序引擎版本说明
功能优化 更改数据最小时间校验逻辑。修复SQL负科学计数法写入报错的问题。修复InfluxDB行协议写入科学计数法报错的问题。修复连续查询操作执行失败的问题。修复 COUNT(1)在嵌套子查询操作中报错的问题。3.4.0~3.4.16 版本号 发布日期 类型...
压缩测试
本文选取了订单、车联网、日志和用户行为这四个在Lindorm中常见的场景，使用真实的数据集分别测试了Lindorm默认压缩、Lindorm开启字典压缩、HBase使用SNAPPY算法压缩、MySQL不开启压缩、MongoDB使用SNAPPY算法压缩和MongoDB使用ZSTD算法...
岭回归训练
岭回归（Tikhonov regularization）算法是对不适定问题进行回归分析时，最常用的正则化方法。岭回归训练组件基于该算法，支持稀疏、稠密两种数据格式，且支持带权重样本的训练。本文为您介绍岭回归训练组件的配置方法。使用限制 支持的计算...
DataHub成本节省攻略
在DataHub发布的最新版本中，DataHub序列化相关的模块进行了一次重大升级，在性能、成本、资源使用方面都有较大的优化，同时DataHub技术升级所带来的成本红利会辐射到每个用户身上，根据我们实际的调研发现，大部分用户的使用成本都可以...
图算法
图计算服务GraphCompute新增图算法分析功能，提供分析查询一体化解决方案，方便用户快速进行全图数据分析。功能介绍 图计算服务GraphCompute新增图算法功能，基于当前服务的数据进行算法执行，方便用户快速进行全图数据的分析。只需要开通...
功能发布记录
SDK下载与发布记录 推流SDK基础版本 升级 推流SDK基础版本V6.8.0稳定性优化。SDK下载与发布记录 升级 推流SDK基础版本V6.9.0稳定性优化。SDK下载与发布记录 2023-12 功能名称 变更类型 功能描述 相关文档 地址生成器 新增 新增直播封装地址...
机器学习
MADlib机器学习模块主要解决以下问题：分类/回归问题：提供一系列算法如K最近邻、MLP多层感知神经网络、SVM支持向量机、决策树等算法来解决二元分类/回归问题，集成最小二乘法、GLM广义线性回归、逻辑回归、多项式回归等模型来解决回归问题...
使用代码检测提升代码质量和安全
基于业界和学术界较为流行的缺陷检测手段，并分析和规避其局限性，云效代码管理的算法工程师们提出了一种新的算法，实现更加精准和高效的分析代码缺陷并推荐优化方案，该算法已被国际软件工程大会（ICSE）收录。代码补丁推荐服务目前应用于...
2024年
2024-01-25 全部地域 计算成本优化 控制台资源观测支持修改指标聚合算法 控制台资源观测为优化页面体验，每个指标至多支持展示60个时间点，因此当时间范围大于1h时，原先图表默认使用区间范围内（所选时间范围的分钟数/60）的平均值聚合...
光伏发电异常检测提效
而传统光伏运维基本上是通过人员巡检的方式发现问题，由此带来的不仅是人员成本的问题，还有故障不能及时被发现和解决隐患，进而导致电站长时间带故障运行，大大地降低了设备的寿命，也增加了设备折旧率，而影响到企业利润。因此，行业内...
配置算法实例
算法实例是根据算法模板创建的具体实例，可以根据您设置的检测参数结合算法模型，完成对相关数据中异常信息的检测及诊断，协助您更好地解读设备数据，监测设备运行状态，及时发现潜在故障。前提条件 已创建算法实例。具体操作，请参见 创建...
通用行业/教育行业算法版对比
教育行业算法版介绍 教育行业算法版基于最新算法功能，贴合搜题场景的痛点和需求，提供了教育行业专属的搜题智能语义理解能力、向量召回、排序算法，为在线教育行业搜题业务的搜索性能和效果准确性提供双重保障，并有效的解决了超大题库...
线性回归算法（Linear Regression）
本文介绍了线性回归算法（Linear Regression，以下简称LR）相关内容。简介 LR是利用线性回归方程的最小平方函数对一个或多个自变量和因变量之间关系进行建模的一种回归分析。使用场景 LR是一个回归模型，主要用于拟合数值。该模型简单，可...
XGBoost训练
XGBoost算法在Boosting算法的基础上进行了扩展和升级，具有较好的易用性和鲁棒性，被广泛用在各种机器学习生产系统和竞赛领域，该算法支持分类和回归。XGBoost训练组件在XGBoost算法的基础上进行了包装，使功能和PAI更兼容，更易用。本文为...
变点检测函数
ts_cp_detect 函数格式：若您无法确定窗口大小，可以使用如下格式的函数，该函数调用的算法默认会使用长度为10的窗口进行检测。select ts_cp_detect(x,y,samplePeriod)若您需要根据业务曲线进行效果调试，可以使用如下格式的函数，通过设置...
通用行业/游戏行业算法版对比
游戏行业算法版介绍 游戏行业算法版基于最新算法功能，贴合游戏搜索场景的痛点和需求，提供了游戏行业专属的智能语义理解能力、向量召回、排序算法，为游戏行业的搜索性能和效果准确性提供双重保障，并有效的解决了超大词库数据导致的搜索...
Beam使用（公测）
同时Beam会对指定的排序键和主键列收集最大（Max）或最小（Min）信息，从而加速包含排序键过滤条件的查询。例如，SQL语句中包含 sale_date='20230715' 的条件，则数据基于 sale_date 列排序会获得额外的性能收益。您可以在 ORDER BY 子句中...
- 产品推荐
- 这些文档可能帮助您