Spark计算引擎
0运维 用户只需通过 AnalyticDB MySQL Serverless Spark接口管理Spark作业，无需关心服务器配置以及Hadoop集群配置，无需处理扩缩容等运维操作。作业级弹性 Serverless Spark按照Driver和Executor粒度申请创建资源，支持秒级拉起，可以快速...
数据库运维
堡垒机 支持对MySQL、SQL Server、PostgreSQL类型的RDS和MySQL、PostgreSQL、PostgreSQL（兼容Oracle）的PolarDB以及MySQL、SQL Server、PostgreSQL、Oracle类型的自建数据库进行运维和审计，同时运维人员可开启SSH隧道，使用运维令牌进行...
数据库运维
堡垒机 支持对MySQL、SQL Server、PostgreSQL类型的RDS和MySQL、PostgreSQL、PostgreSQL（兼容Oracle）的PolarDB以及MySQL、SQL Server、PostgreSQL、Oracle类型的自建数据库进行运维和审计，同时运维人员可开启SSH隧道，使用运维令牌进行...
应用场景
在基于 MySQL 数据库的系统架构下，存放着设备信息的库表，往往需要使用分库分表和相应的数据分发技术才能承担业务流量。分库分表的设计不仅增加了数据库运维人员的管理难度，也让系统架构的扩展受到了很大的限制。HybridDB for MySQL的...
通过一键建仓同步至数仓版
数据库名称 从下拉列表中选择目标 AnalyticDB MySQL 数据库名。表名 从下拉列表中选择目标 AnalyticDB MySQL 表名。账号名称 目标 AnalyticDB MySQL 中创建的 数据库账号。账号密码 填写账号名称对应的密码。字段映射 系统自动提取日志服务...
功能特性
优势如下：数据库运维场景：支持RDS、自建数据库以及三方数据库的运维授权管控，包含MySQL、SQL Server、PostgreSQL、Oracle。混合运维场景：通过网络域代理模式实现、线下IDC、其它云以及跨账号下资产的统一运维管控。高业务稳定保障：...
管理运维事件
登录 消息中心，在 消息接收管理>基本接收管理 页面，开启 云数据库故障或运维通知 的通知开关并设置消息接收人（推荐设置为数据库运维人员）。查看待处理事件 登录 云原生数据仓库AnalyticDB MySQL控制台。在左上角选择集群所在地域。在...
通过DataWorks导入
操作步骤 配置同步的源端数据库读插件。具体操作，请参见 HDFS Reader。配置同步的目标端数据库写插件。具体操作，请参见 AnalyticDB for MySQL 3.0 Writer。配置同步任务。具体操作，请参见 通过向导模式配置离线同步任务。
通过DataWorks导入数据
操作步骤 配置同步的源端数据库读插件。具体操作，请参见 DRDS Reader。配置同步的目标端数据库写插件。具体操作，请参见 AnalyticDB for MySQL 3.0 Writer。配置同步任务。具体操作，请参见 通过向导模式配置离线同步任务。
通过DataWorks导入数据
操作步骤 配置同步的源端数据库读插件。具体操作，请参见 Kafka Reader。配置同步的目标端数据库写插件。具体操作，请参见 AnalyticDB for MySQL 3.0 Writer。配置同步任务。具体操作，请参见 通过向导模式配置离线同步任务。
功能特性
PolarDB MySQL数据导入 PolarDB-X数据导入 自建MySQL数据源 AnalyticDB for MySQL支持通过外表将ECS自建MySQL数据库中的数据导入至数仓版集群，同时也支持将数仓版集群中的数据导出至自建的MySQL数据库。自建MySQL数据导入 导出至自建MySQL...
无感数据集成（Zero-ETL）
数据库名称 RDS for MySQL 实例的 数据库名称。数据库账号 RDS for MySQL 实例的 数据库账号。数据库密码 RDS for MySQL 实例 数据库账号的密码。连接方式 连接 RDS for MySQL 的方式。包括非加密链接和SSL安全链接。说明 如果设置为 SSL...
产品和业务限制
限制项 描述 例外申请方式 购买分析型数据库MySQL版的限制 账户余额大于等于500元现金 请联系技术支持 开通分析型数据库MySQL版的用户限制 用户需实名认证 无 可创建的最大分析型数据库MySQL版数 3个 联系技术支持申请更多 单个分析型数据...
聚合支付方案
解决方案 阿里云通过多款云数据库产品为利楚扫呗制定以下解决方案：方案解读：使用DRDS分库分表将数据库进行水平拆分，有效解决订单的存储上限及业务高峰时的高并发压力，借助了DRDS对MySQL语法的高度兼容能力，轻松从原来单体数据库升级到...
应用场景
实时数仓 该场景需要在一个平台上提供统一的在线查询和离线计算的能力，简化数据架构，降低开发和运维成本。通过弹性伸缩支持更合理的资源配比，减少非高峰期的保有资源，优化成本，提高性价比。该场景可实现：在离线一体化 支持数据实时增...
统计信息
INSERT INTO、REPLACE INTO 等实时导入：AnalyticDB MySQL 需等到运维时间，或者Build完成后的增量收集周期时间触发增量收集任务，建议您在导入数据后手动收集一次基础统计信息。您也可以关闭自动收集统计信息的功能，手动执行 ANALYZE ...
导入与导出
由于 AnalyticDB MySQL 中不允许数据库名、表名或者列名中含有划线（-），为保证数据同步成功，系统会将中划线（-）映射为下划线（_）。如果在数据同步过程中遇到其他因数据库名、表名或者列名造成的同步失败（例如表名中含有空格、中文等...
DataWorks调度XIHE SQL
DataWorks是基于MaxCompute作为计算和存储引擎的用于工作流可视化开发和托管调度运维的海量数据离线加工分析平台，支持按照时间和依赖关系的任务全面托管调度。AnalyticDB MySQL 用户可以通过DataWorks强大的任务托管调度、任务依赖关系...
新功能发布记录
Spark应用访问公网配置说明 通过Spark SQL访问MySQL数据 湖仓版（3.0）支持通过Spark SQL访问自建MySQL数据库或阿里云MySQL系列的数据库。通过Spark SQL访问MySQL数据 通过Spark SQL读Lindorm数据 湖仓版（3.0）支持通过Spark SQL访问...
设置报警规则
您可以为 AnalyticDB MySQL版 集群设置报警规则，实时监控集群CPU使用率、磁盘使用率、IOPS使用率、查询耗时以及数据库连接数。系统在监控数据满足条件时，会通知报警联系组中的所有联系人。背景信息 云原生数据仓库AnalyticDB MySQL版 ...
整体架构
AnalyticDB MySQL版 是基于数据库大数据一体化的理念和趋势，在工程上深度打磨出的云原生数据仓库。技术架构 AnalyticDB MySQL版 采用云原生架构，计算存储分离、冷热数据分离，支持高吞吐实时写入和数据强一致，兼顾高并发查询和大吞吐批...
BUILD
在该过程中会构建索引、清理冗余数据、执行异步DDL任务等，将数据从写优化转变为读优化。注意事项 BUILD期间，不能执行 INSERT OVERWRITE SELECT 导入任务，需等待BUILD任务结束才能执行。功能说明 BUILD 命令可以对实时写入的数据及其涉及...
通过外表导入至湖仓版
在 AnalyticDB MySQL 中创建数据库，示例如下：CREATE DATABASE adb_demo;在 AnalyticDB MySQL 中创建表用于存储从MaxCompute中导入的数据，示例如下：说明 新表和步骤3中创建的外表的字段顺序和字段数量需要一致，字段类型兼容。CREATE ...
调优集群性能
云原生数据仓库 AnalyticDB MySQL 版 的监控信息功能提供了丰富的监控指标，您可以通过集群的各项监控指标，掌握集群的性能和运行状况。当您发现监控指标存在异常时，可以参考本文排查出现异常的原因。查看集群监控指标的方法，请参见 查看...
运维审计
堡垒机通过对堡垒机系统运维操作（系统登录日志、系统配置修改日志等）和资产运维会话（会话录像、字符命令等）等全方位审计，最大化保障企业运维安全。审计类型 对堡垒机系统的操作审计 堡垒机会记录用户登录堡垒机系统、修改堡垒机配置等...
查看监控信息
磁盘IO吞吐量 MB 监控如下信息：计算写吞吐 计算读吞吐 存储写吞吐 存储读吞吐 磁盘IOPS 数值 监控如下信息：计算写磁盘IOPS 计算读磁盘IOPS 存储写磁盘IOPS 存储读磁盘IOPS 存储节点磁盘IO使用率%监控磁盘的平均IO使用率。存储节点磁盘IO...
通过外表导入至数仓版
AnalyticDB for MySQL 支持通过外表读取并导入MaxCompute数据。通过外表导入数据可以最大限度地利用集群资源，实现高性能数据导入。您也可以进一步选择通过Tunnel方式和Storage API两种方式访问并导入MaxCompute数据，相较于Tunnel方式，...
DescribeMaintenanceAction-查询运维事件的详情
调用DescribeMaintenanceAction接口查询运维事件的详细信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以...
Spark
本文汇总了使用 AnalyticDB MySQL Spark的常见问题及解决方案。常见问题概览 如何查看Spark应用信息？如何解决提交Spark应用时，出现User%s do not have right permission[*]to resource[*]报错？如何解决运行Spark应用时，出现No space ...
BS运维
选择要操作的实例，单击 运维，进入Web运维界面。说明 RAM子账号需要先导入堡垒机，否则可能无法看到 运维 按钮，导入方法参见 用户管理。BS运维操作 使用RAM子账号登录云盾堡垒机运维页面后，可以看到该账号可以访问的服务器信息。说明 ...
设置事件报警
云原生数据仓库 AnalyticDB MySQL 版 数仓版（3.0）集群的运维事件和资源弹性计划接入了云监控系统，您可以为系统事件设置报警规则，通过短信、邮件接收通知或设置报警回调，使您及时收到报警通知，快速分析定位并处理问题，形成线上自动化...
CREATE TABLE
尽量 不要选择日期、时间和时间戳类型的列作为分布键，写入时容易发生倾斜，影响写入性能，且多数查询通常是限定了日期或时间段，如：查询最近一天或一个月的数据，可能会导致要查询的数据只存在于一个节点上，无法充分利用分布式数据库中...
API概览
运维管理 API 标题 API概述 ModifyDBClusterMaintainTime 修改可维护时间段 修改指定AnalyticDB MySQL湖仓版（3.0）集群的可维护时间段。查询链接 API 标题 API概述 DescribeApsActionLogs 查询实时数据接入任务的日志 查询AnalyticDB ...
DescribeDBClusterPerformance-查看集群性能数据
连接数 AnalyticDB_Connections：数据库连接数。写入 AnalyticDB_TPS：写入 TPS。AnalyticDB_InsertRT：写入响应时间。AnalyticDB_InsertBytes：写入吞吐量。更新 AnalyticDB_UpdateRT：更新响应时间。删除 AnalyticDB_DeleteRT：删除响应...
名称解释
在购买HybridDB for MySQL数据库时，需要搭配阿里云服务器ECS使用，目前HybridDB for MySQL只支持阿里云内网访问，在地域选择时需要与ECS相同。可用区 可用区（AZ）是指在同一地域下（如华东1（杭州）地域），电力、网络隔离的物理区域，...
其他SQL功能差异
数据库管理（Database Administration）插件和自定义函数（Plugin and User-Defined Function）SET 复合查询（Compound）数据备份（Replication）存储对象（Stored Objects）事务和锁定（Transactional and Locking）用户自定义函数（User-...
BS运维操作
Web运维配置 参照以下步骤进行Web运维配置：在Web运维页面左侧导航栏单击 运维>主机运维。在 主机运维 页面右上角单击 WEB运维配置。在 RDP 页面，设置 分辨率、连接模式、本地设备和资源、本地驱动器 并单击 保存。说明 本地驱动器只需...
基础版Spark全密态计算引擎使用示例
数据准备 本文示例的RDS MySQL数据库名为 adb，并在该库中创建了一张名为 customer 的表，示例如下：CREATE DATABASE IF NOT EXIST adb;CREATE TABLE IF NOT EXISTS adb.customer(id int,name varchar(1023),address varchar(1023),age int...
API概览
BindDBResourceGroupWithUser 将资源组与数据库用户进行绑定 调用BindDBResourceGroupWithUser接口为AnalyticDB MySQL数仓版（3.0）集群的资源组绑定数据库账号。UnbindDBResourceGroupWithUser 解绑资源组和用户 调用...
DMS调度XIHE SQL
背景信息 挑战和诉求：事件调度 传统的数据库事件调度（如MySQL的事件调度器Event Scheduler）虽然功能强大，但在使用过程中仍发现一些不足：门槛高：用户需要掌握事件定义的特殊SQL语法（CREATE EVENT、ALTER EVENT），无法通过简单的界面...
- 产品推荐
- 这些文档可能帮助您