构建审计日志的分析方案
为解决企业用户操作日志的保存与分析问题，联合ActionTrail+OSS+DLA+Quick BI，阿里云推出审计日志数据分析方案。将ActionTrail的审计日志定时同步到OSS进行长周期（超过90天）保存，利用Data Lake Analytics将日志数据标准化，利用Quick ...
AGS概览
在使用上，该方案用户无需关心基因数据处理过程中的计算资源、处理逻辑、数据缓存等细节，只需将下机数据（FASTQ文件）上传至OSS，以及授权Bucket给AGS服务，即可高效、快速完成整个数据分析流程，并将结果数据上传到用户期望的存储空间。...
常见问题
only问题的排查与处理方法 集群负载不均问题的分析方法及解决方案 通过手动迁移shard均匀分布热点数据的解决方案 指标含义与异常处理建议 fielddata内存使用率高问题的排查与处理方法 重启变更报错：集群状态不健康或存在close索引，不能...
事件管理
事件的处理与解决：事件处理人接受事件，并查看相应的告警详细信息，初步分析告警原因。在事件处理时，可查看、参考相似事件的处理方式，以便于快速解决。同时支持在处理事件时进行内容记录，便于后续的分析与参考。事件的完结与持续运营：...
如何对JSON类型进行高效分析
PolarDB 列存索引（In Memory Column Index，IMCI）功能推出了完备的虚拟列与列式JSON功能等，可以快速处理大数据和多种数据类型（包括结构化数据与半结构化数据等），并提供高效的数据分析、查询与流计算能力，适用于数据分析、数据仓库与...
产品简介
基于DLA无服务器化（Serverless）数据湖分析服务与内置的Spark计算引擎，DLA Ganos打通了阿里云各个存储系统，如PolarDB、Lindorm(HBase)、OSS等，通过统一的时空数据模型与计算接口，实现对多源异构数据的一体化管理与计算，并支持进行...
什么是网络智能服务
分析实时问题 追溯历史问题 覆盖多类场景 流量分析概述 使用公网流量分析 使用混合云流量分析 使用跨域流量分析 使用同域流量分析 网络洞察 分析业务单元流量的实时运行状况，帮助您及时感知业务网络异常，并提供网络质量评估数据和事件...
应用场景
数据实时分析 传输方式：数据订阅 数据分析在提高企业洞察力和用户体验方面发挥着举足轻重的作用，且实时数据分析能够让企业更快速、灵活地调整市场策略，适应快速变化的市场方向和消费者体验。DTS提供的数据订阅功能，可以在不影响线上...
版本发布记录
本文介绍云原生数据湖分析DLA的产品功能动态。2021年6月 类别 功能点 描述 相关文档 集群管理 监控报警 Spark集群支持监控报警。查看Spark监控 数据湖管理 从库读取 Lakehouse支持RDS、PolarDB MySQL从库读取。无 性能提升 Lakehouse支持DB...
测试分析方案报告
难点测试方案 缺陷管理 与项目组成员在缺陷处理问题上达成一致，避免测试执行时项目状态过于无序。例如XX缺陷必须在两天内修复，如果有拖延，则整个测试依次顺延。困难及风险 基于以上分析，判断项目内存在的风险与困难，并对这些风险和...
MaxFrame概述
背景信息 基于Python语言的易读性、高效开发及开放生态等优势，Python已经成为科学计算、机器学习以及AI开发领域的事实标准和主流编程语言，其整合了数据分析、机器学习等各类第三方包，如Pandas（数据处理与分析）、NumPy（数值计算）、...
金融大数据
满足了同时存在离线、在线、流数据的业务场景 解决了大数据平台的集成问题 为大数据平台的开发与管理提供了高效方案 金融风险控制方案 金融风险控制解决方案通过大数据画像、机器学习、知识图谱和复杂关系网络分析等手段，帮助金融机构建立...
功能特性
逻辑库 逻辑表 数据开发与分析 功能集 功能 功能描述 参考文档 SQL窗口 SQL窗口 可以非常便捷地执行各类SQL语句，同时支持以可视化的方式对目标数据库进行增、删、改、查等操作，适用于数据查询、数据开发等场景。SQL窗口介绍 SQL Console...
图片处理常见问题
本文主要介绍您在使用OSS图片处理时可能遇到的一些常见问题及处理方法。遇到问题时，如果有明显的参数超过显示等问题，可以使用OSS的?x-oss-process=image/info 参数查看原始图片中的信息是否超标。OSS单边长度不能超过4096，乘积不能高于...
EventHandle
代码分析 到这里可以去代码中定位具体有问题的代码了，因此又经过与此应用负责人沟通后，拿到了项目代码仓库的查看权限，查看 app/controller/home.js 文件，搜索 error，直接找到了出问题的地方，以下是问题最小化代码：module.exports=...
数据管理的审计事件
数据管理已与操作审计服务集成，您可以在操作审计中查询用户操作数据管理产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了用户通过Open...
Mesh 网关
对比去中心化网关的问题，我们来分析下 Mesh 网关所带来的优势：研发效能：接入方便：业务无需引入繁杂的依赖和配置，即可接入 Mesh 网关。版本容易收敛、新功能推广快：新版本在灰度验证通过后，即可全网推广升级，无需维护和排查多版本...
阿里云智能质检
智能对话分析服务会产生出匹配结果并通知质检结果处理人，支持处理人进行在线人工校验并保存复核结果，最后，智能对话分析服务支持定期对质检结果进行多维度的统计分析，发现潜在的业务机会、服务风险与舆情问题。创建质检规则 在使用智能...
SDK参考概述
在使用日志服务SDK过程中，您可能遇到日志采集、索引、查询和分析、加工等各类报错，您可以参考日志服务常见问题进行处理。更多信息，请参见 常见问题。使用日志服务SDK是否存在限制？日志服务对基础资源（例如Project个数、Logstore个数、...
确定需求
在基于Dataphin构建与管理企业数据中台之前，首先需要确定数仓构建的目标与需求，进行全面的业务调研。您需要了解真实的业务需求是什么，以及确定整个业务系统能解决什么问题。业务调研 充分的业务调研和需求分析是数据仓库建设的基石，...
步骤五：规范建模
在逻辑模型基础上,将业务分析问题转换为Dataphin特有的派生指标,并进一步提炼出原子指标和业务限定。步骤一：新建主题域 在Dataphin首页，单击顶部菜单栏的 规划。按照下图操作指引，选择 dataphin_tutorial 数据板块并进入在 新建主题域 ...
步骤五：规范建模
在逻辑模型基础上,将业务分析问题转换为Dataphin特有的派生指标,并进一步提炼出原子指标和业务限定。步骤一：新建主题域 在Dataphin首页，单击顶部菜单栏的 规划。按照下图操作指引，选择 dataphin_tutorial 数据板块并进入在 新建主题域 ...
实时分析链路数据
如果您的应用遇到流量不均、单机故障、慢接口治理、业务流量统计、灰度发布监控等问题，可以通过应用监控的调用链分析快速定位问题代码。本文介绍如何通过调用链分析快速定位五种经典线上问题，更直观地了解调用链分析的用法与价值。背景...
云服务集成简介
阿里云区块链服务的云服务集成为您提供了便捷的链上链下协同功能，帮您省去了区块链与其它云服务的集成开发成本。同时云服务集成也为您提供 REST API，其配置及开发过程相比区块链SDK更为简单，您可以直接通过 REST API 调用智能合约、查询...
产品简介
产品简介 阿里巴巴通义实验室千寻搜索算法，基于达摩院长期积累的自然语言处理技术，专注企业统一搜索场景，提供精准的多源异构搜索，以PaaS服务形式提供离线数据处理和搜索服务API。同时支持公有云、专有云、基于云原生的基础架构下混合云...
云服务集成
阿里云区块链服务能够集成其他云服务并提供链上链下协同的便捷功能，减少区块链底层与其它云服务集成的开发成本，帮助您快速完成系统构建。函数计算 当您希望区块链上的各种事件能自动触发链下业务逻辑时，您可以在阿里云函数计算服务中上...
常见问题
公共问题 崩溃分析如何...iOS Pod集成移动监控引入FBRetainCycleDetector的问题处理 崩溃分析手动集成报错 iPad获取不到数据 使用cocopods集成服务造成utdid依赖库与阿里巴巴依赖库冲突 iOS SDK同时集成数据分析&崩溃分析Pod进来framwork冲突
功能更新动态（2024年）
新建普通维度逻辑表 新建层级维度逻辑表 创建原子指标 创建业务限定 添加派生指标和衍生指标 实时研发 实时任务支持引用全局变量以解决DDL语句中明文密码的问题。实时任务研发优化：Flink计算源支持配置多级资源队列。实时任务详情与版本...
文档更新动态（2024年）
更新说明 新建普通维度逻辑表 新建层级维度逻辑表 创建原子指标 创建业务限定 添加派生指标和衍生指标 数据开发-编码研发 实时任务支持引用全局变量以解决DDL语句中明文密码的问题。实时任务研发优化：Flink计算源支持配置多级资源队列。...
概述
实时运营监控 通过DMS数据工厂把业务数据实时同步到ADB或RDS分析库，再基于分析库之上构建可视化，可实时观察运营状态，衔接各个环节流程，对比检测异常情况，处理关键环节问题。提供透视驱动与图表驱动两种图表配置模式，满足不同的应用...
SQL 诊断概述
诊断页面的 SQL 页签为您提供 TopSQL、SlowSQL、可疑 SQL的分析诊断功能。SQL 诊断 在诊断页面 SQL 页签下可分别查看 TopSQL、SlowSQL 和可疑 SQL 的基本信息。SQL 诊断类型的概念如下：TopSQL：在选定的时间范围内，整体响应时间最长的 ...
媒体处理常见问题
如果转码失败，可能是因为源文件本身问题导致，例如：视频流缺失、metadata存在问题、帧错误、视频头部信息缺失等。通过阅读本文，您可以了解转码异常、转码格式支持及其他常见问题及对应解决方案。转码异常问题 使用SubmitJobs API提交...
App端性能体验功能说明
已忽略的错误是否在错误列表展示，默认开启计入统计，如果关闭后，则在崩溃分析、ANR分析、自定义异常、卡顿分析、OOM异常、启动崩溃分析中标记为已忽略的错误就不会在错误列表中展示 性能评分 概述 对应用的性能情况进行量化分析，通过...
常见问题
本文汇总了ClickHouse使用时的常见问题。如何创建ClickHouse用户？数据丢失，如何处理？报错提示Memory limit(for total)exceeded时，该如何处理？报错提示Memory limit(for query)exceeded时，该如何处理？报错提示Memory limit(for user)...
数据服务概述
前提条件 已购买 数据服务 增值服务，开通Dataphin 常见数据应用问题 一般从需求提出到需求交付分为：需求提出-需求分析-产品设计开发文档-开发人员进行开发-功能测试-功能上线-需求交付，整个过程需要安排迭代、开发、测试，时间周期约为...
治理分析
治理分析针对所有项目空间进行问题诊断，同时对待治理问题点进行分析。本文为您介绍如何查看治理健康度、分数明细和项目治理明细。页面介绍 在Dataphin首页，单击 资产。在 资产 页面，按下图指引，进入 治理分析 页面。在 治理分析 页面，...
治理分析
治理分析针对所有项目空间进行问题诊断，同时对待治理问题点进行分析。本文为您介绍如何查看治理健康度、分数明细和项目治理明细。页面介绍 在Dataphin首页，单击 资产。在 资产 页面，按下图指引，进入 治理分析 页面。在 治理分析 页面，...
文档更新动态（2023年）
更新说明 标签工厂新手指引 创建行为统计标签 创建行为偏好标签 创建规则组合标签 离线视图概述 分析平台-基于分析平台创建SQL查询 新增SQL查询功能，支持保存、预编译、加速查询、运行、分享、参数配置、格式化、定位SQL查询任务；...
功能更新动态（2023年）
业务限定逻辑运算符优化，通过 与、或、非 三种逻辑运算符，组合出衍生的业务限定。查询逻辑表时支持使用max_pt获取最新的一级分区。新建普通维度逻辑表 创建业务限定 通用研发 离线物理表字段配置优化，可设置资产治理相关属性，如可为...
Hologres推荐的数仓分层
指标修正简单，与传统增量计算方式不一样的是，该方案将中间的状态也持久存储在Hologres中，提升了后续分析的灵活性，当中间数据质量有问题时，直接对表修正，重刷数据即可。方案缺点：大部分实时增量计算都依赖Flink，对使用者Flink的技能...
- 产品推荐
- 这些文档可能帮助您