分析实例简介
云ClickHouse分析实例 云ClickHouse分析实例本质是云数据库ClickHouse实例，其通过MaterializedMySQL引擎将RDS MySQL实例中的数据同步到云数据库ClickHouse中，并利用其强大的分析性能解决多维聚合实时分析问题。详细创建步骤请参见 创建云...
机器学习
关联分析：提供Apriori算法实现关联分析，解决如“啤酒与尿布”的关联问题；时序分析：提供ARIMA自回归移动平均模型预测时间序列数据的未来值；其他：数据降维如通过PCA主成分分析模型来提炼主因子，文档分类与LDA文档主题建模。MADlib还...
转码常见问题
本文为您介绍视频点播转码相关的常见问题。转码失败时，如何自主排查？确认转码源文件能否在本地正常播放（非常重要），经统计大部分转码失败是因为源文件本身有问题（如：视频流缺失、metadata存在问题、帧错误、视频头部信息缺失等），会...
自媒体：易撰
PolarDB-X 专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题，历经各届天猫双十一及阿里云各行业客户业务的考验，助力企业加速完成业务数字化转型。本文介绍易撰如何通过 PolarDB-X 应对业务挑战。所属行业...
新功能发布记录
2022.06.25 所有用户 数据智能诊断 数据质量是做出推荐效果的基础，推出数据诊断功能辅助分析数据存在的问题、优化的空间，从而获得更优质的推荐效果：每日凌晨将自动触发数据诊断，结合服务可用性、数据逻辑合理性、算法链路是否奏效等多...
AIOps 解决方案专家服务内容说明
方案预期结果 智能故障发现解决方案 方案包括多指标多产品的链路性根因分析，本方案提供8种实时异常检测和根因分析算法场景，同时保障算法的通用性。定制化业务风险方案 方案包括各业务场景定制化巡检，本方案提供场景架构方案并提供2个...
金融大数据
满足了同时存在离线、在线、流数据的业务场景 解决了大数据平台的集成问题 为大数据平台的开发与管理提供了高效方案 金融风险控制方案 金融风险控制解决方案通过大数据画像、机器学习、知识图谱和复杂关系网络分析等手段，帮助金融机构建立...
通过Elasticsearch机器学习实现业务数据的智能检测和...
监督机器学习包括Regression和Classification等场景，使用分类和回归算法解决非常复杂的问题。该模式需要一定的数据训练预测任务，然后使用训练出来的任务来对未来的数据进行分类、预测。场景大类 场景 类别 说明 异常检测Anomaly ...
用户画像分析概述
漏斗留存分析：漏斗分析函数 漏斗分析是常见的转化分析方法，它用于反映用户各个阶段行为的转化率，广泛应用于用户行为分析和App数据分析的流量分析、产品目标转化等数据运营与数据分析。窗口漏斗函数（WindowFunnel）可以搜索滑动时间窗口...
设计方案
知识图谱：知识图谱是指通过将各种数据和知识进行关联和组织，建立一种知识库或知识图谱，以便在故障发生时快速定位和解决问题。在应急响应中，知识图谱可以指导故障排查和处理工作，提高效率和准确性。知识图谱可以使用各种工具和技术，如...
监控预警
结合预算计划监控数据和资源监控数据进行相关性分析 预算监控数据可以帮助我们观测资金的消耗，并关联到相关的云产品的具体使用情况，结合云资源的监控数据可以分析出资源消耗发生的时间点，事件，并采取相关的措施。设置预算计划之后，...
低成本历史库
云原生多模数据库Lindorm提供海量数据的低成本存储能力（0.12元/GB/月）、弹性伸缩按需付费、多模多端处理能力满足用户多种场景下的数据存储需求，同时可以无缝对接spark、hive、flink、presto等开源分析生态满足用户对数据的复杂分析需求...
DAS Auto Scaling弹性能力
面对这种情况，通常采用扩容数据库规格的方式来解决问题，而专业运维人员（DBA）在准备扩容方案时会至少思考如下三个问题：扩容是否能解决资源不足的问题？在数据库场景下，CPU打满只是计算资源不足的一个表征，导致这个现象的根因很多，...
低成本RDS历史库
Lindorm 提供海量数据的低成本存储能力（0.12元/GB/月）、弹性伸缩按需付费、多模多端处理能力满足用户多种场景下的数据存储需求，同时可以无缝对接Spark、Hive、Flink、Presto等开源分析生态满足用户对数据的复杂分析需求，最大程度挖掘...
应用场景：低成本历史库
Lindorm 提供海量数据的低成本存储能力（0.11元/GB/月）、弹性伸缩按需付费、多模多端处理能力满足用户多种场景下的数据存储需求，同时可以无缝对接spark、hive、flink、presto等开源分析生态满足用户对数据的复杂分析需求，最大程度挖掘...
电商行业
例如解决目前用户长尾query召回少、搜索词填写错误无法召回、输入拼音无法召回等问题，具体请参考 查询分析 和 相关性实战。配置一个查询分析：这里我们以拼写纠错为例配置一个查询分析：第一步：创建查询分析干预词典：1.1 依次单击控制台...
混合负载HTAP
PolarDB-X 是一款支持HTAP（Hybrid Transaction/Analytical Processing）的数据库，在支持高并发、事务性请求的同时，也对分析型的复杂查询提供了良好的支持。说明 分析型查询指的是涉及数据量较大、计算比较复杂的查询，例如对一定时间...
发现并处理大Key和热Key
该功能可帮助您掌握Key在内存中的占用、Key的访问频次等信息，溯源分析问题，为您的优化操作提供数据支持。离线全量Key分析 优点：可对历史备份数据进行分析，对线上服务无影响。缺点：时效性差，RDB文件较大时耗时较长。对 Tair 的RDB备份...
教育搜题
功能用途：Query丢词、改写、文本相关性分析；1）基于用户行为生成训练数据：2）词权重模型训练：序列标注模型；预测标签（7,4,1）,分值越⾼表⽰term的重要性越⼤，召回结果更准确；示例：query 35 的 因数 有(),100 以内 24 的 倍数 有()...
云上成本管理框架
一方面，由于云成本的可变性和多云环境的复杂性，云成本优化基于分析结果和优化策略之上并非所有操作都适合人工完成，企业通过工具可以有效提升对云成本的管理及优化水平。另一方面，成本优化往往是以项目方式实施，由项目制驱动转为体系化...
阿里云云上成本管理解决方案白皮书
一方面，由于云成本的可变性和多云环境的复杂性，云成本优化基于分析结果和优化策略之上并非所有操作都适合人工完成，企业通过工具可以有效提升对云成本的管理及优化水平。另一方面，成本优化往往是以项目方式实施，由项目制驱动转为体系化...
内核版本发布记录
Indexing Service稳定性增强：增加unfollow开关，支持在异常时临时停止unfollow流程，加速异常问题解决。unfollow提交follower master任务优化，避免follower集群索引unfollow时由于reopen等操作对master的压力。写入重试逻辑优化，解决...
深度解析Lindorm搜索索引（SearchIndex）特性
索引是加速数据库查询的重要手段，Lindorm除了提供高性能的二级索引外，同时支持搜索索引(SearchIndex)，主要面向复杂的多维查询场景，并能够覆盖模糊查询、聚合分析、排序、分页等场景。本文主要介绍SearchIndex的技术原理和核心能力。...
发现并处理Redis的大Key和热Key
该功能可帮助您掌握Key在内存中的占用、Key的访问频次等信息，溯源分析问题，为您的优化操作提供数据支持。离线全量Key分析 优点：可对历史备份数据进行分析，对线上服务无影响。缺点：时效性差，RDB文件较大时耗时较长。对Redis的RDB备份...
IDMapping在离线一体化解决方案
完成数源梳理后，大体解决了数据从哪里来的问题，该如何抽取的问题，接下来需要进行数仓架构、数据流程和初步模型的设计工作。3、数仓架构建设 主要涉及数据接入层和清洗层，需要将原始表信息接入并指定多种规则进行清洗。ID关系收集、特征...
智能异常分析概述
产品架构 智能异常分析应用围绕运维场景中的监控指标、程序日志、服务关系等核心要素展开，通过机器学习等手段产生异常事件，通过服务拓扑关联分析时序数据和事件，最终降低企业的运维复杂度，提高服务质量。产品架构图如下所示。各功能...
基本概念
二级索引是非主键索引，在非主键匹配的查询场景下，可以降低应用的开发复杂性、保证数据的一致性、提高写入效率。更多信息，请参见 二级索引。G Ganos时空引擎 阿里云推出的一款管理空间几何数据、时空轨迹的时空大数据引擎系统。该系统...
应用场景
多源联合分析 该场景需要解决云上企业构建数据仓库时配置数据同步链路繁杂的问题，以及分库分表所带来的数据分析复杂性问题，让用户可以更专注于业务逻辑。该场景可实现：支持多数据源接入 支持数据库（RDS、PolarDB-X（原DRDS）、PolarDB...
SQL优化技术
联动性：对于复杂的线上问题，有时需要综合治理，如突发的恶性慢SQL问题，DAS的自动SQL限流，自动SQL优化需要形成联动效应，实现问题的标本兼治。规模性：如何构建具备足够扩展性的服务架构，以支撑几十万级、百万级的大规模自动优化。实现...
内容社区行业
内容可以是广义的图文、音频、视频，也可以是通过社区找到解决问题的方法。优质的内容能提升用户的活跃度，为平台带来流量与时长，实现用户增长和留存，获得更多业务机会和收益。搜索"作为社区直接获取内容的最有效途径，每个社区都在不断...
内置时空数据引擎Ganos
提供拓扑网络路径分析和大规模点云存储与查询支持 Ganos所包含的几何网络数据库引擎支持Node-Edge拓扑网络构建，支持Turn、U-Turn等概念，支持TSP（旅行商问题）、KSP（多条线路最短路径）、TRSP（转向限制的最短路径）等一系列路径规划...
什么是推荐全链路深度定制开发平台PAI-REC
让用户能够轻松管理召回、排序组件、更新引擎参数 提供指标和报表管理后台，用户可自定义指标、按天和按小时了解实验效果 提供离在线特征一致性对比工具，避免因为一致性问题导致实验效果不符合预期 提供数据智能诊断，帮助开发者快速理解...
智能分析-异常根因定位分析利器
相比传统的告警和监控，可观测性能够以更加白盒的方式看透整个复杂系统，帮助开发者更好地观察系统的运行状况，快速定位和解决问题。可观测性主要依赖于Trace、Log和Metric数据。和传统监控相比，可观测性拥有诸多优势。传统监控只能去发现...
组件参考：所有组件汇总
IForest异常检测 该组件使用sub-sampling算法，降低了算法的计算复杂度，可以识别数据中的异常点，在异常检测领域有显著的应用效果。One-Class SVM异常检测 该组件与传统SVM不同，是一种非监督的学习算法。您可以使用One-Class SVM异常检测...
Presto FAQ
解决方案：您可以查看自己的OSS的数据是否正常同步。性能相关问题 如何解决查询报错：“Query exceeded distributed user memory limit of 2.00TB or Query exceeded per-node user memory limit of xxGB”？DLA Presto中一个查询能使用的...
米连科技
日志服务帮助米连科技解决了数据分散、问题排查效率低、数据分析手段少的问题，提升了IT运维、数据运营、风控等方面的能力。公司简介 伊对是北京米连科技有限公司旗下品牌，公司成立于2015年，是国家高新技术企业和北京中关村高新技术企业...
什么是人工智能平台PAI
阿里云人工智能平台PAI（Platform For AI），提供一站式的机器学习解决方案。本文为您介绍什么是人工智能平台PAI。什么是机器学习 机器学习是一门多学科交叉专业，涵盖概率论知识、统计学知识、近似理论知识和复杂算法知识，它使用计算机...
核心自治技术案例解析
外置式SQL自动优化 按照经验，约80%的数据库性能问题可通过SQL优化手段解决，但SQL优化一直以来都是一个非常复杂的过程，需要多方面的数据库领域专家知识和经验，另外，由于SQL工作负载不断变化，SQL优化还是一项非常耗时繁重的任务，这些...
应用场景
常常会存在“谁认识谁，谁上过什么学校，谁常住什么地方，谁喜欢什么餐馆”等查询，传统关系型数据库对于超过3张表关联的查询往往会很低效甚至无法支持，但图数据库从基因层面提供了解决方案，轻松应对社交网络的各种复杂存储和查询。...
设备数据存储和计算实践
解决方案 针对以上共性问题的抽象和思考，阿⾥云物联网平台逐步建设了⼀套物联⽹数据存储、计算的⽅案。物联网平台提供数据存储服务，包括数据分层存储，并且在数据存储上提供数据导出、变更通知订阅、及连接⼤数据产品的组件等必要的存储...
- 产品推荐
- 这些文档可能帮助您