通过数据同步功能同步SLS数据至数仓版
通过 AnalyticDB for MySQL 的数据同步功能，您可以将SLS中指定时间点之后产生的数据实时同步至 数仓版（3.0）集群，以满足日志数据实时分析的需求。前提条件 数仓版（3.0）集群与日志服务SLS的 Project和 Logstore位于同一地域。具体操作...
通过数据同步功能同步SLS数据至湖仓版
通过 AnalyticDB for MySQL 的数据同步功能，您可以将SLS中指定时间点之后产生的数据实时同步至 湖仓版（3.0）集群，以满足日志数据实时分析的需求。前提条件 湖仓版（3.0）集群与日志服务SLS的 Project和 Logstore位于同一地域。具体操作...
小查询自动识别与加速
操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台，在左上角选择集群所在地域。在左侧导航栏，单击 集群列表，在 数仓版（3.0）页签，单击目标集群ID。在左侧导航栏，单击 工作负载管理。单击 小查询加速 页签，打开 自动小查询加速 ...
数据服务入门
操作流程 步骤一：创建数据源并配置网络连通性 使用数据服务创建API前，需先将您的数据库或数据仓库添加为DataWorks数据源，以此作为数据服务API的数据来源。开发数据服务API时，数据服务将访问该数据源获取数据表的Schema信息，帮助您...
通过日志服务同步ECS日志数据到AnalyticDB MySQL 2.0
数据库名称 目标AnalyticDB for MySQL数据库的名字。表组名 目标AnalyticDB for MySQL中的表组。表名 目标AnalyticDB for MySQL中的表名，投递过来的日志数据将存储在该表中。AccessKey ID 当前阿里云账号的AccessKey ID，请参见 获取阿里...
分析平台设置
说明 是否允许数据结果下载、是否开启下载审批、审批模版 配置项，仅适用于 分析平台专用计算源 和 数据库SQL，在其他项目中运行的结果依照该项目的下载与审批规则。参数 描述 分析平台专用计算源 计算源 用于分析平台的任务计算。若您为...
库表结构优化
AnalyticDB MySQL版 提供的库表结构优化功能，为用户提供...说明 建议SQL下发后，需要数据表完成Build操作后方可完成应用，Build操作是数据库系统按一定规则自动触发的，未触发前，相应建议处于“运行中”的状态，触发后变为“已完成”状态。
一对一专家服务工作说明书
ECS自建SQL Server问题排查 服务器性能排查：CPU、内存、磁盘IO 服务器资源&配置排查：磁盘空间、带宽、安全组、系统防火墙 SQL Server服务状态排查 问题定位报告：数据库连接不上、数据库报错、数据库访问慢、用户权限问题；数据库不能...
Spark常见报错
例如：同时访问Hive和RDS MySQL数据源，JAR包中应包含Hive数据源和RDS MySQL数据源的JDBC驱动。CommunicationsException.*Communications link failure 报错出现日志：Driver日志。报错原因：Spark作业中配置的弹性网卡无法访问指定的数据...
表格存储（Tablestore）数据导入
数据类型映射关系 Tablestore支持的数据类型与 AnalyticDB MySQL 数据类型的映射关系如下：Tablestore支持的数据类型 映射到 AnalyticDB MySQL 的数据类型 INTEGER（8字节）BIGINT（8字节）STRING VARCHAR BINARY BINARY DOUBLE DOUBLE ...
任务调试流程
查看运行历史 您可进入数据开发（DataStudio）的 运行历史 页面，查看当前登录账号近三天在数据开发界面运行过的所有任务记录。任务在数据开发（DataStudio）运行后，将下发至对应引擎的服务执行，即使在任务运行过程中，您不小心将任务...
账号授权
前提条件 已创建 湖仓版（3.0）集群。详情请参见 创建集群。Spark作业权限说明 提交Spark作业，需要具备以下三种权限。AliyunADBFullAccess：管理 AnalyticDB MySQL 集群的权限。...相关文档 访问RDS MySQL数据源 访问OSS数据源
批量投递
步骤二：启动投递任务 配置应用模板的投递参数，其与 创建运行任务 基本一致，请参考 运行选项 部分。步骤三：选择实体数据 按照模板中的根实体定义，用户需要选择要分析的实体表格数据。待投递完成后，每个实体都将会自动解析生成一个对应...
基本概念
数据建模 数据模型：是数据特征的抽象，它从抽象层次上描述了系统的静态特征、动态行为和约束条件，为数据库系统的信息表示与操作提供一个抽象的框架，数据资源平台支持逻辑模型和物理模型。逻辑模型：反映的是系统分析设计人员对数据存储...
分析平台设置
说明 是否允许数据结果下载、是否开启下载审批、审批模版 配置项，仅适用于 分析平台专用计算源 和 数据库SQL，在其他项目中运行的结果依照该项目的下载与审批规则。参数 描述 分析平台专用计算源 计算源 用于分析平台的任务计算。若您为...
诊断报告
当RDS MySQL实例出现性能问题，或者进行日常巡检时，您可以通过数据库自治服务DAS的诊断报告功能，针对指定时间段的实例运行状况发起诊断，帮助您从慢日志、表空间、性能趋势等多方面评估实例的健康状况，快速定位实例的异常情况。...
Flink数据导入
步骤三：数据验证 登录 AnalyticDB MySQL 目标数据库，来查看并验证源数据是否成功导入。步骤一：数据准备 在其中一个Flink节点的root目录下，执行 vim/root/data.csv 命令来创建一个名为data.csv的CSV文件。文件中包含的数据如下（您可以...
释放实例
如果您不再使用已有的RDS MySQL实例，可以手动 释放 按量付费、Serverless实例或者 退订 包年包月实例。本文介绍通过控制台和API接口释放实例的方法、注意事项及常见问题。注意事项 按量付费、Serverless实例只能释放，包年包月实例只能...
Quick BI
Quick BI是一款专为云上用户和企业量身打造的新一代自助式智能BI服务平台，其简单易用的可视化操作和灵活高效的多维分析能力，让精细化数据洞察为商业决策保驾护航。您可以在Quick BI中添加 AnalyticDB MySQL版 数据源并通过Quick BI构建BI...
什么是RPA
产品介绍 阿里云RPA产品是一款新型工作流程自动化办公机器人软件，通过模拟人工操作进行自动流程执行处理。它可以将办公人员从每日的重复工作中解放出来，提高生产效率。具体而言，阿里云RPA是基于软件机器人和人工智能（AI，Artificial ...
Hive数据导入
本文介绍如何添加Hive数据源，新建Hive迁移链路并启动任务，以及数据迁移后如何进行数据分析和管理数据迁移任务。功能介绍 AnalyticDB MySQL版 湖仓版（3.0）支持新建Hive数据迁移任务，通过迁移任务将Hive元数据和数据一键迁移到OSS，或...
公共节点
RDS MySQL RDS MySQL节点运行于MySQL类型的云计算资源之上，可通过输入SQL语句对目标MySQL数据源进行数据开发，具体操作，请参见 新建RDS MySQL类型的公共节点。Elastic Job Elastic Job节点提供“调用一次，执行一次”的离线类任务型服务...
自动同步PolarDB-X元数据
当您需要 一站式完成 PolarDB分布式版 数据同步与管理时，可以在 PolarDB分布式版 实例中开通列存引擎并绑定目标 湖仓版（3.0）集群。相较于其他数据同步方案，一站式方案同步数据成本低、简单易用、能实时同步数据，可实现真正的实时分析...
访问MaxCompute数据源
本文介绍如何使用AnalyticDB MySQL湖仓版（3.0）Spark SQL读写MaxCompute数据。背景信息 大数据计算服务MaxCompute是一种快速、完全托管的TB/PB级数据仓库解决方案。您可以通过AnalyticDB MySQL湖仓版（3.0）Spark SQL读写MaxCompute数据。...
DataWorks On MaxCompute使用说明
例如，通用Shell节点，MySQL数据库节点等。虚拟节点 HTTP触发器节点 OSS对象检查节点 FTP Check节点 赋值节点 参数节点 do-while节点逻辑原理介绍 for-each节点逻辑原理介绍 分支节点 节点任务开发完成后，可根据需要执行如下操作：调度...
通过数据同步功能同步Kafka至湖仓版（推荐）
AnalyticDB for MySQL 湖仓版（3.0）支持新建Kafka同步链路，通过同步链路从指定时间位点，实时同步Kafka中的数据入湖，以满足近实时产出、全量历史归档、弹性分析等需求。本文主要介绍如何添加Kafka数据源，新建Kafka同步链路并启动任务，...
通过数据同步功能同步SLS至湖仓版（推荐）
AnalyticDB for MySQL 湖仓版（3.0）支持新建SLS同步链路，通过同步链路从指定时间位点将日志服务LogStore中的数据实时同步至 湖仓版（3.0），以满足近实时产出、全量历史归档、弹性分析等需求。本文介绍如何添加SLS数据源，新建SLS同步...
新功能发布记录
Spark应用访问公网配置说明 通过Spark SQL访问MySQL数据 湖仓版（3.0）支持通过Spark SQL访问自建MySQL数据库或阿里云MySQL系列的数据库。通过Spark SQL访问MySQL数据 通过Spark SQL读Lindorm数据 湖仓版（3.0）支持通过Spark SQL访问...
数据导入方式介绍
通过外表常规导入MaxCompute数据 通过外表常规导入HDFS数据 通过外表常规导入OSS数据 通过外表常规导入RDS MySQL数据 弹性导入 仅内核版本3.1.10.0及以上且已创建Job型资源组的 湖仓版（3.0）集群支持弹性导入数据。弹性导入可以大幅减少...
SQL Pattern
AnalyticDB MySQL版 的实时统计分析功能提供了SQL Pattern指标特性，有效提升智能诊断效率，能够对相似的SQL进行聚合，并呈现出聚合后的特性。背景信息 SQL Pattern是依托于全量且实时的SQL而产生的功能，通过对SQL进行分类诊断和分析，...
调优集群性能
云原生数据仓库 AnalyticDB MySQL 版 的监控信息功能提供了丰富的监控指标，您可以通过集群的各项监控指标，掌握集群的性能和运行状况。当您发现监控指标存在异常时，可以参考本文排查出现异常的原因。查看集群监控指标的方法，请参见 查看...
FineReport
方式二：在设计器中进行连接，mysql5.x版本可参考 MySQL数据连接，mysql8.x版本可参考 MySQL8数据连接插件。如果您需要通过外网连接 AnalyticDB MySQL版 集群，请参见 申请和释放公网地址。连接AnalyticDB 打开FineReport，在菜单栏中单击 ...
通过元数据发现导入至湖仓版
目标元数据配置 Schema名称 设置Schema名称，映射到 AnalyticDB MySQL 的数据库名称（默认每个发现任务会创建一个新的Schema）。数据库名称填写，需要注意如下两点：不能是 AnalyticDB MySQL 中已有的库名。不能与其他元数据任务的库名相同...
访问OSS-HDFS数据源
AnalyticDB for MySQL 湖仓版（3.0）Spark支持访问OSS-HDFS数据源，本文介绍如何使用Spark来操作OSS-HDFS数据。前提条件 AnalyticDB MySQL 湖仓版（3.0）集群与OSS存储空间位于相同地域。已在湖仓版（3.0）集群中创建Job型资源组。具体操作...
通过Spark Distribution SQL Engine开发Spark SQL作业
} } } 重要 启动Spark Distribution SQL Engine时，若设置了 spark.sql.hive.metastore.version=adb，则连接地址中的数据库必须为 AnalyticDB for MySQL 中已存在的数据库，否则会默认使用 default 数据库，造成连接失败。ThriftServer ...
产品系列
适用场景包含离线处理场景（数据清洗、数据规整等预处理操作）、多源聚合分析和拉宽场景、预测洞察（机器学习和AI）等业务场景。数仓版（3.0）弹性模式 数仓版（3.0）是基于计算存储分离架构打造的，支持海量数据实时写入可见及高性能在线...
文档修订记录
订阅成功后，账单数据会定时同步至MaxCompute，您可使用DataWorks的数据分析功能查询并分析账单数据，将分析结果生成可视化图表卡片及报告，同时，也可将您的阿里云消费分析报告分享给其他用户。账单数据订阅及查询分析 2024.2.21 新增功能...
逻辑表结构设计
前提条件 支持的数据库类型：MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、其他来源MySQL。OceanBase。实例的管控模式为 安全协同。更多信息，请参见 查看管控模式。已有一个开发环境类型的逻辑库作为设计阶段的基准库、一个生产环境...
使用Kettle调度MaxCompute
Kettle支持丰富的输入输出数据源，数据库支持Oracle、MySQL、DB2等，也支持各种开源的大数据系统，例如HDFS、HBase、Cassandra、MongoDB等。您可以在Kettle中通过创建Job的方式连接MaxCompute项目，并按照ETL流程调度作业。前提条件 在执行...
湖仓版作业调度
如果通过RAM用户（子账号）登录，使用作业调度功能需要满足以下三个条件：已配置 AnalyticDB MySQL 的AliyunServiceRoleForAnalyticDBForMySQL角色。配置方法，请参见 AliyunServiceRoleForAnalyticDBForMySQL介绍。已创建 AnalyticDB ...
- 产品推荐
- 这些文档可能帮助您