访问OSS数据源
云原生数据仓库AnalyticDB MySQL版 数据库产品 编写Python程序，将Python程序上传至OSS。本文示例的Python程序名为 example.py，用于读取文本文件readme.txt的第一行内容。import sys from pyspark.sql import SparkSession#初始Spark ...
通过Spark SQL读写OSS外表
创建外表时选择的OSS路径需比创建数据库时选择的OSS路径至少多一层目录，且外表的路径需在数据库路径下。可以在tblproperties中配置 'auto.create.location'='true' 自动创建OSS路径。如果未指定该参数并且OSS中不存在该路径，请先创建对应...
JSON索引（2.0版）
背景信息 大数据时代结构化数据检索已经逐渐有了多元化的、丰富的解决方案。但是，事实上大多数的大数据都是半结构化的，并且半结构化数据的数据量仍旧急剧增长。理解和分析半结构化数据的难度比结构化数据大很多，急需成熟的解决方案来...
管理运维事件
配置周期时间 周期时间对 AnalyticDB MySQL 数仓版（3.0）所有集群生效，不影响其他数据库产品运维事件的切换时间。配置周期时间后，会在指定周期时间点，对计划内所有未执行且未设置计划切换时间的事件执行切换。例如配置周期时间为周二00...
设置白名单
为保障 云原生数据仓库 AnalyticDB MySQL 版 集群的安全稳定，系统默认禁止所有地址访问 AnalyticDB for MySQL 集群，因此，在使用 AnalyticDB for MySQL 集群前，需为集群设置白名单，以允许外部设备访问该集群。背景信息 集群默认的白...
申请和释放公网地址
云原生数据仓库AnalyticDB MySQL版 集群支持VPC地址和公网地址两种类型的地址，如果需要通过公网连接集群，您需要先申请公网地址。公网和VPC网络 网络类型 说明 VPC网络 一个VPC就是一个隔离的网络环境。VPC的安全性较高，推荐您使用VPC...
设置白名单
为保障 云原生数据仓库 AnalyticDB MySQL 版 集群的安全稳定，系统默认禁止所有地址访问 AnalyticDB for MySQL 集群，因此，在使用 AnalyticDB for MySQL 集群前，需为集群设置白名单，以允许外部设备访问该集群。背景信息 集群默认的白...
删除标签
操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角，选择集群所在地域。在左侧导航栏，单击 集群列表。在 数仓版（3.0）页签下，单击目标 集群ID。在 集群信息 页面的 集群属性 区域，单击 编辑标签。单击要删除的标签后...
基于AnalyticDB实现城市公交系统智能化
方案解读：启迪公交采用分布式关系型数据库DRDS（Distributed Relational Database Service）构建全部业务系统，具备海量大数据的处理能力，同时支持高并发、高可用和高度可扩展的弹性伸缩能力。票务管理工作台将用户检录的数据实时同步到 ...
通过Spark SQL读写Delta外表
如果已有数据库，可跳过本步骤。CREATE DATABASE if not exists external_delta_db location"oss:/<bucket_name>/test/;用于在该路径中创建表，请替换为自己的OSS路径。执行以下语句，创建Delta外表。CREATE TABLE if not exists external_...
数据查询最佳实践
经验总结 编写和优化SQL的经验总结如下：SQL编写原则为追求简单 一般情况下，数据库性能会随SQL复杂度而下降。例如，单表查询（冗余设计）优于表关联查询。SQL优化核心方法是减少I/O 尽可能少的进行列扫描，返回最小数据量，减少I/O同时也...
权限管理
权限模型 HybridDB for MySQL的权限管理是参照MySQL的权限实现，控制登录的用户具备哪些数据库操作权限。具体用法请参见 MySQL官方文档 支持的权限粒度 HybridDB for MySQL支持下面四种级别的权限控制，细化数据库权限控制的粒度。例如，...
自动同步PolarDB-X元数据
数据准备 本示例的PolarDB-X 2.0数据库名为 test_adb，并在该库中创建了一张名为 person 的表，示例如下：CREATE DATABASE test_adb MODE='AUTO' CREATE TABLE person(`id` bigint NOT NULL AUTO_INCREMENT,`age` int(11)NOT NULL DEFAULT ...
续费说明
AnalyticDB MySQL版 控制台手动续费 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角，选择集群所在地域。在左侧导航栏，单击 集群列表。在 湖仓版（3.0）或 数仓版（3.0）页签中，单击目标集群右侧的 续费。选择购买时长，阅读...
设置报警规则
您可以为 AnalyticDB MySQL版 集群设置报警规则，实时监控集群CPU使用率、磁盘使用率、IOPS使用率、查询耗时以及数据库连接数。系统在监控数据满足条件时，会通知报警联系组中的所有联系人。背景信息 云原生数据仓库AnalyticDB MySQL版 ...
创建标签
操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角，选择集群所在地域。在左侧导航栏，单击 集群列表。在 数仓版（3.0）页签下，单击目标 集群ID。在 集群信息 页面的 集群属性 区域，单击 编辑标签。在 编辑标签 页面，...
Tableau
本文测试了Tableau与 AnalyticDB MySQL 在列举数据库、查看表表等方面的兼容性，并给出测试结果图。测试环境 MySQL Tableau mysql Ver5.6.46 for osx10.13 on x86_64(Homebrew)Tableau Desktop 2019.4 测试范围 列举数据库 列举所有表 查看...
访问OSS-HDFS数据源
AnalyticDB for MySQL 湖仓版（3.0）Spark支持访问OSS-HDFS数据源，本文介绍如何使用Spark来操作OSS-HDFS数据。前提条件 AnalyticDB MySQL 湖仓版（3.0）集群与OSS存储空间位于相同地域。已在湖仓版（3.0）集群中创建Job型资源组。具体操作...
删除或退订集群
删除按量付费集群 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角，选择集群所在地域。在左侧导航栏，单击 集群列表。根据需要删除的集群版本，选择 数仓版（3.0）或 湖仓版（3.0）页签。单击目标集群右侧的 更多>删除。在 删除...
解密ADB高效基因检测系统
实验二结果 数据集 top1 top2 top3 top4 top5 top10 top20 病毒 0.846 0.954 0.960 0.976 0.98 0.982 0.99 21个细菌 0.884 0.961 0.968 0.973 0.973 0.989 1.0 实验三 目的：对比在ADB数据库和Blast数据库中的基因检测速度。结果：为得到...
通过DTS导入数据
操作方法 您可以选择数据同步或数据迁移任意一种方式，将RDS MySQL数据导入至 AnalyticDB MySQL 湖仓版（3.0）或 数仓版（3.0）。具体操作，请参见：RDS MySQL同步至AnalyticDB MySQL 3.0。RDS MySQL迁移至AnalyticDB MySQL 3.0。
查看资源弹性计划执行日志
操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角，选择集群所在地域。在左侧导航栏，单击 集群列表。在 数仓版（3.0）或 湖仓版（3.0）页签下，单击目标集群ID。数仓版（3.0）集群，在左侧导航栏，单击 资源弹性扩容。...
DML差异
MySQL 云原生数据仓库AnalyticDB MySQL 定义 CALL 不支持 调用存储过程。DELETE 支持，详情请参见 DELETE。从表中删除行。DO 不支持 执行表达式，但不返回任何结果。HANDLER 不支持 直接访问表存储引擎接口。INSERT 支持，详情请参见 ...
通过Spark SQL读Lindorm数据
AnalyticDB MySQL 湖仓版（3.0）支持通过Spark SQL访问Lindorm数据库。本文主要介绍如何通过Spark SQL访问Lindorm中的Hive表和宽表的数据。前提条件 已创建Lindorm单可用区实例。具体操作，请参见 创建实例。重要 Lindorm实例需开通宽表...
湖仓版（3.0）计费项
计费公式：存储空间费用=热数据存储费用+冷数据存储费用 冷数据存储空间费用=冷数据存储空间单价×冷数据存储量×时长 热数据存储空间费用=热数据存储空间单价×热数据存储量×时长 查询用量：您可以在 云原生数据仓库AnalyticDB MySQL控制...
设置报警规则（2.0版）
云原生数据仓库 AnalyticDB MySQL 版 集群支持通过云监控控制台为系统事件设置报警规则，当发生异常时，您可以通过短信、邮件及时接收报警通知或设置报警回调，快速分析定位并处理问题。本文介绍如何设置事件报警。背景信息 监控报警是通过...
访问Redis数据源
本文介绍如何使用AnalyticDB MySQL湖仓版（3.0）Spark通过ENI网络访问Redis数据。前提条件 已创建AnalyticDB MySQL湖仓版（3.0）集群。具体操作，请参见 创建湖仓版（3.0）集群。已创建数据库账号。如果您是通过阿里云账号访问，只需创建高...
管理资源弹性计划
操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角，选择集群所在地域。在左侧导航栏，单击 集群列表。在 数仓版（3.0）或 湖仓版（3.0）页签下，单击目标集群ID。数仓版（3.0）集群，在左侧导航栏，单击 资源弹性扩容。...
通过PySpark开发Spark应用
本文介绍了如何开发 AnalyticDB MySQL Spark Python作业，以及如何通过VirtualEnv技术打包Python作业的运行环境。前提条件 已创建 AnalyticDB MySQL 湖仓版（3.0）。具体操作，请参见 创建集群。已创建Job型资源组。具体操作，请参见 新建...
查看当天资源弹性计划
操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角，选择集群所在地域。在左侧导航栏，单击 集群列表。在 数仓版（3.0）或 湖仓版（3.0）页签下，单击目标集群ID。数仓版（3.0）集群，在左侧导航栏，单击 资源弹性扩容。...
使用XIHE BSP SQL进行作业开发
示例数据文件内容如下：001,Anna,99,London 002,Bob,67,USA 003,Cindy,78,Spain 004,Dan,100,China 步骤一：创建OSS外表 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角，选择集群所在地域。在左侧导航栏，单击 集群列表。在 湖...
创建数仓版集群
重要 如果您同时在使用阿里云上的其他云服务，例如云服务器ECS、云数据库RDS等，请确保AnalyticDB MySQL与其他云服务位于同一个VPC，否则它们无法通过内网互通，无法发挥最佳性能。选择产品系列，配置参数，在右下角单击 立即购买。快速...
通过外表导入至湖仓版
返回结果如下：+-+-+-+-+|id|name|age|dt|+-+-+-+-+|1|james|10|2023-06-15|2|bond|20|2023-06-15|3|jack|30|2023-06-15|4|lucy|40|2023-06-15|+-+-+-+-+4 rows in set(0.35 sec)在 AnalyticDB MySQL 中创建数据库。如果有已创建的数据库，...
设置事件报警
云原生数据仓库 AnalyticDB MySQL 版 数仓版（3.0）集群的运维事件和资源弹性计划接入了云监控系统，您可以为系统事件设置报警规则，通过短信、邮件接收通知或设置报警回调，使您及时收到报警通知，快速分析定位并处理问题，形成线上自动化...
调优集群性能
语义错误 SQL符合 云原生数据仓库 AnalyticDB MySQL 版 官方对SQL语法的定义，但在语义检查时，发现数据库对象错误，在语义分析阶段报错。例如，表名错误、列不存在、GROUP BY字段缺失、函数参数类型错误等。集群内部问题导致查询失败 查询...
DBeaver（2.0版）
本文介绍如何通过DBeaver连接和管理 云原生数据仓库AnalyticDB MySQL版 2.0集群。开始使用DBeaver之前，您需要先完成以下准备...成功连接至AnalyticDB for MySQL 2.0数据库后，您就可以通过DBeaver对AnalyticDB for MySQL 2.0数据库进行管理。
通过一键建仓同步至数仓版
数据库名称 从下拉列表中选择目标 AnalyticDB MySQL 数据库名。表名 从下拉列表中选择目标 AnalyticDB MySQL 表名。账号名称 目标 AnalyticDB MySQL 中创建的 数据库账号。账号密码 填写账号名称对应的密码。字段映射 系统自动提取日志服务...
访问Kafka数据源
本文介绍如何使用 AnalyticDB MySQL 湖仓版（3.0）Spark通过ENI网络访问消息队列Kafka版。前提条件 已创建 AnalyticDB MySQL 湖仓版（3.0）集群。具体操作，请参见 创建湖仓版（3.0）集群。已创建Job型资源组。具体操作，请参见 新建资源组...
Navicat（2.0版）
本文介绍如何通过Navicat连接和管理 云原生数据仓库AnalyticDB MySQL版 2.0集群。前提条件 开始使用Navicat for MySQL之前，需要先安装Navicat ...右键单击数据库名 打开数据库，打开数据库后，您就可以利用Navicat for MySQL进行数据管理。
使用Spark SQL进行作业开发
步骤一：创建OSS Hudi外表 登录 云原生数据仓库AnalyticDB MySQL控制台，在左上角选择集群所在地域。在左侧导航栏，单击 集群列表，在 湖仓版（3.0）页签，单击目标集群ID。在左侧导航栏，单击 作业开发>SQL开发。在 SQLConsole 窗口，选择...
- 产品推荐
- 这些文档可能帮助您