使用前须知
日志服务联合云数据库PolarDB推出CloudLens for PolarDB，用于集中管理PolarDB MySQL集群以及采集PolarDB MySQL集群的慢查询日志、错误日志、审计日志和性能指标。本文介绍CloudLens for PolarDB的功能、资产、费用、使用限制等信息。产品...
云产品日志通用操作
操作 说明 查询和分析日志 查询和分析日志。具体操作，请参见 查询和分析日志。查询和分析时序数据 查询和分析时序数据。具体操作，请参见 查询和分析时序数据。查看原始日志 在查询和分析页面，查看原始日志。快速分析 快速分析日志字段。...
对接JDBC
背景信息 MySQL是当前流行的关系型数据库，很多软件支持通过MySQL传输协议和SQL语法获取MySQL数据。您只需要对SQL语法熟悉，即可完成对接。日志服务提供了MySQL协议查询和分析日志数据。您可以使用标准MySQL客户端连接到日志服务，使用标准...
开启数据采集功能
CloudLens for PolarDB支持一键开启数据采集功能，用于采集PolarDB MySQL集群的审计日志、慢查询日志、错误日志和性能指标。本文介绍开启数据采集功能的操作步骤及相关操作。前提条件 已创建PolarDB MySQL集群。具体操作，请参见 购买按量...
不同编程语言中如何开启客户端的PrepareStatement
AnalyticDB MySQL 数据库自身具备强大的查询计算能力和计划缓存功能，无需依靠服务器端预处理语句获得大部分性能优势。AnalyticDB MySQL 数据库不建议使用服务器端预编译。大部分开发语言中支持通过配置开启客户端预编译（PrepareStatement...
创建索引
倒排索引是一种数据存储结构，由关键词和指向实际数据的逻辑指针组成，记录了特定文本内容出现在哪些日志中，用于快速根据关键词定位到具体数据行，类似于数据的目录。创建索引后，您才能对日志数据进行查询和分析。本文为您介绍日志服务...
互联网行业实时BI分析
本文以某互联网公司为例，介绍如何将DB业务数据和日志数据实时同步到 云原生数据仓库AnalyticDB MySQL版 中，然后通过Quick BI进行实时可视化数据分析。相对于传统的关系型数据库，云原生数据仓库AnalyticDB MySQL版 只需要毫秒级时间，...
通过一键建仓同步至数仓版
数据库名称 从下拉列表中选择目标 AnalyticDB MySQL 数据库名。表名 从下拉列表中选择目标 AnalyticDB MySQL 表名。账号名称 目标 AnalyticDB MySQL 中创建的 数据库账号。账号密码 填写账号名称对应的密码。字段映射 系统自动提取日志服务...
数据存储
日志数据存储 日志数据主要包括审计日志、查询详情日志，经过多重的拆解、组合以及聚合后，目前主要存储在OLAP数据库中，进行后续的实时多维分析。其中审计日志单独存储在一个数据库表中，包括USER、DATABASE、RT、SQL、TYPE等明细信息；把...
MySQL数据库对外键和索引等名称的长度限制导致创建时...
问题描述 RDS产品的MySQL数据库创建索引报如下错误。Identifier name 'XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX' is too long 问题原因 因为 MySQL数据库 对外键和索引等名称的长度有限制，具体如下：Identifier...
查询改写功能
高级查询改写 若查询语句的结构和物化视图的结构不同，AnalyticDB for MySQL 会运用一系列改写规则，来依次检查物化视图和查询中的 Filter、Join、Aggregation 和 Group By 表达式，尝试用物化视图构建一个等价的查询表达式，来回答原始...
导入数据并查询
前提条件 通过以下步骤在OSS中创建存储 AnalyticDB for MySQL 数据的目录。开通OSS服务。详情请参见 开通OSS服务。创建存储空间。详情请参见 控制台创建存储空间。重要 OSS的存储空间与 AnalyticDB for MySQL 所属地域相同。创建目录。详情...
日志聚类
本文介绍日志聚类功能及其操作，包括开启日志聚类、查看聚类结果和原始日志、对比不同时间段的聚类日志数量等。前提条件 已创建Standard Logstore。具体操作，请参见 创建Logstore。已采集日志。具体操作，请参见 数据采集。已配置索引。...
备份原理
AnalyticDB MySQL版 支持周期性的全量备份和日志备份，可以有效防止数据丢失。全量备份采用了将集群全量数据快照压缩后存储在其它离线存储介质的方式。为了保证分布式集群元数据的一致性，在全量备份开始的约10分钟内，集群会短暂禁止DDL的...
解析Java报错日志
步骤三：分析错误日志数据 基于加工后的错误日志，可以进行错误日志数据分析。本文只对日志服务的Java错误日志做分析。在Project列表区域，单击目标Project。在 日志存储>日志库 页签中，单击目标Logstore。在搜索框中输入查询和分析语句。...
数据迁移方案概览
“数据传输”导入 事务引擎/分析引擎 使用数据传输（Data Transmission Service）将自建MySQL数据库或者RDS for MySQL数据库迁移到HybridDB for MySQL中。从MySQL批量导入导出 分析引擎 HybridDB for MySQL支持从自建MySQL中全量导入和导出...
存储层高可用
读写高可用 AnalyticDB使用Multi-Raft方式管理数据分片，每个数据分片由三副本组成，分片内基于Raft协议进行Leader选举、日志复制和状态机日志应用。三副本的多数派存活是保证数据读写高可用的关键，优势在于可允许1个副本所在节点发生宕机...
通过日志服务导入至数仓版
左边文本框为日志字段名称，右边为AnalyticDB MySQL数据库表中的字段。说明 Timestamp类型的字段映射精确到秒级别。例如日志时间为2022-01-05 10:12:13.145，投递到AnalyticDB MySQL后，投递结果为2022-01-05 10:12:13。投递开始时间 配置...
AnalyticDB MySQL助力Flowerplus业务高速发展
复杂数据查询性能 使用传统MySQL数据库对订单、商品流量、采购、业务转化率以及商品售罄报警等分析时速度较慢，数据达到千万级或者亿级时，复杂查询报表返回很慢或者根本无法返回，无法正常支撑报表和BI业务。数据实时性 部分报表对返回...
DBeaver
背景信息 DBeaver是一款免费、开源（GPL）的专门为开发人员和数据库管理员提供的通用数据库工具。DBeaver支持MySQL、PostgreSQL、Oracle、DB2、MSSQL、Sybase以及其他兼容JDBC的数据库。您可以通过DBeaver的图形界面查看数据库结构、执行...
通过Spark SQL访问MySQL数据
AnalyticDB MySQL 湖仓版（3.0）支持提交Spark SQL作业，您可以通过View或Catalog两种方式访问自建MySQL数据库或云数据库RDS MySQL、云原生数据库 PolarDB MySQL。本文以RDS MySQL为例，介绍如何通过Spark SQL访问RDS MySQL数据。前提条件 ...
LogAnalyzeResult
此处显示错误类型.EXCEEDED_QUOTA AppErrorLog string Spark 日志分析任务中找到的报错日志 exception:cpu is exceeded limits 12/10 AppErrorAdvice string 针对自动分析出的错误日志,给出的建议解决方案内容.Please increase cpu quota ...
数据采集
日志数据采集 内部的各类日志会被采集并发送到SLS日志服务系统中进行统一的存储和加工，日志数据主要包括：审计日志：用于记录用户的所有的操作行为，例如DDL操作和DML操作等。查询详情日志：用于记录一条查询在执行过程中的详细信息，包括...
通过一键建仓同步至数仓版
已创建PolarDB MySQL数据库。更多信息，请参见 数据库管理。PolarDB MySQL数据库中已存在表数据。计费 一键创建PolarDB MySQL数据仓库时，系统自动通过DTS同步数据，DTS计费规则，请参见 计费概述。注意事项 数据同步过程中，若在源实例...
通过日志服务同步ECS日志数据到AnalyticDB MySQL 2.0
数据库名称 目标AnalyticDB for MySQL数据库的名字。表组名 目标AnalyticDB for MySQL中的表组。表名 目标AnalyticDB for MySQL中的表名，投递过来的日志数据将存储在该表中。AccessKey ID 当前阿里云账号的AccessKey ID，请参见 获取阿里...
调优集群性能
语义错误 SQL符合 云原生数据仓库 AnalyticDB MySQL 版 官方对SQL语法的定义，但在语义检查时，发现数据库对象错误，在语义分析阶段报错。例如，表名错误、列不存在、GROUP BY字段缺失、函数参数类型错误等。集群内部问题导致查询失败 查询...
恢复原理
AnalyticDB MySQL版 支持全量恢复和时间点恢复。恢复使用实例克隆的方式，每次恢复会生产一个新的实例，同时恢复数据将被下载并导入到该实例中。全量恢复使用已完成的有效备份集进行，每个有效备份集都是备份时产生的一次全量数据快照。...
通过一键建仓同步至数仓版
已创建RDS MySQL数据库。更多信息，请参见 创建数据库。RDS MySQL数据库中已存在表数据。计费 一键创建RDS MySQL数据仓库时，系统自动通过DTS同步数据。DTS计费规则，请参见 计费概述。注意事项 数据同步过程中，若在源实例RDS MySQL中新增...
API概览
CheckSampleDataSet 检查内置数据集状态 DescribeUserQuota 查询用户可用配额 DescribeAllDataSource 枚举数据库列表 枚举实例下所有数据库列表、表列表和列列表。DescribeTables 枚举数据库的表列表 查询指定数据库的表列表信息。...
日志索引表
监控指标 CloudLens for OSS 访问明细日志 计量日志 监控指标 CloudLens for EBS 监控指标 数据库 CloudLens for PolarDB 审计日志 慢日志 错误日志 性能日志 CloudLens for RDS 审计日志 CloudLens for Redis 审计日志 慢日志 运行日志 ...
最佳实践
时序存储 使用Prometheus采集Kubernetes监控数据 查询与分析 查询和分析网站日志 查询和分析JSON日志 Data Explorer案例 关联Logstore与MySQL数据库进行查询分析 关联Logstore与OSS外表进行查询和分析 查询MNS日志 采集及分析Nginx监控日志...
功能概述
向量分析继承了分析型数据库MySQL版的MPP查询架构以及全索引结构，通过SIMD指令加速、高效索引算法、混合检索CBO策略以及低成本存储技术，帮助您实现高性能、低成本的非结构化数据近似查询和分析。典型应用场景 通过分析型数据库MySQL版...
应用场景
云原生数据仓库AnalyticDB MySQL版 为千万家企业级客户提供了数据处理ETL、实时在线分析、核心报表、大屏和监控能力，为广大商家和消费者提供稳定的离线和在线数据服务。本文介绍 云原生数据仓库AnalyticDB MySQL版 的五个使用场景：实时数...
同步数据
分析型数据库MySQL版支持多种数据加载方式，包括但不限于：通过阿里云数据传输服务DTS将MySQL/DRDS中的数据导入分析型数据库MySQL版，其中MySQL可为RDS for MySQL、其他云厂商或线上IDC的自建MySQL以及ECS自建MySQL。详细操作步骤请参见 ...
使用kettle将本地数据导入AnalyticDB MySQL 2.0
本文以Excel为例，介绍如何通过kettle将本地Excel数据迁移...相关信息 使用DTS同步RDS MySQL数据 使用数据集成迁移数据至分析型数据库MySQL版 使用kettle将本地数据导入分析型数据库MySQL版 在程序中通过AnalyticDB MySQL版Client高效写入数据
“数据传输”导入
源库与目标库 源库的实例类型可以是RDS实例，或者是您自建的MySQL数据库。以RDS实例为例，选择待迁移实例的ID，输入对应的数据库账号及密码。说明 DTS现已支持RDS/MySQL向HybridDB for MySQL的 全量及增量数据同步。目标库选择 PetaData，...
功能特性
PolarDB MySQL数据导入 PolarDB-X数据导入 自建MySQL数据源 AnalyticDB for MySQL支持通过外表将ECS自建MySQL数据库中的数据导入至数仓版集群，同时也支持将数仓版集群中的数据导出至自建的MySQL数据库。自建MySQL数据导入 导出至自建MySQL...
Logtail常见问题
分类 文档链接 基本概念说明 Logtail基本问题 日志采集Agent对比 心跳问题 Logtail机器组问题排查思路（主机场景）采集问题 通用场景 查询本地采集状态 如何查看Logtail采集错误信息 Logtail采集日志失败的排查思路 日志服务采集数据常见的...
聚合支付方案
解决方案 阿里云通过多款云数据库产品为利楚扫呗制定以下解决方案：方案解读：使用DRDS分库分表将数据库进行水平拆分，有效解决订单的存储上限及业务高峰时的高并发压力，借助了DRDS对MySQL语法的高度兼容能力，轻松从原来单体数据库升级到...
从OSS导入JSON数据文件
HybridDB for MySQL可以方便地通过外部表将存储在OSS中的JSON数据导入到HybridDB for MySQL数据库中。前提条件 资源和环境准备，执行操作前需提前准备OSS和HybridDB for MySQL的相关资源。包括：阿里云RAM账户，提前获取RAM账户的...
- 产品推荐
- 这些文档可能帮助您