通过DataWorks使用Spark Distribution SQL Engine

重要 域名地址中的 {database name} 需替换为实际的数据库名。Metastore Hive Metastore地址。请填写步骤二中启动Spark Distribution SQL Engine后获取的域名连接地址。详情请参见 步骤二:获取域名连接地址。重要 域名地址中的 {database ...

通过数据同步功能同步Kafka至湖仓版(推荐)

目标库表配置 参数说明如下:参数名称 参数说明 库名 同步到 AnalyticDB MySQL数据库名称。如果不存在同名数据库,将新建库;如果已存在同名数据库,数据会同步到已存在的数据库中。库名命名规则,详见 使用限制。表名 同步到 ...

通过数据同步功能同步SLS至湖仓版(推荐)

AnalyticDB for MySQL 湖仓版(3.0)支持新建SLS同步链路,通过同步链路从指定时间位点将日志服务LogStore中的数据实时同步至 湖仓版(3.0),以满足近实时产出、全量历史归档、弹性分析等需求。本文介绍如何添加SLS数据源,新建SLS同步...

通过日志服务导入至数仓版

左边文本框为日志字段名称,右边为AnalyticDB MySQL数据库表中的字段。说明 Timestamp类型的字段映射精确到秒级别。例如日志时间为2022-01-05 10:12:13.145,投递到AnalyticDB MySQL后,投递结果为2022-01-05 10:12:13。投递开始时间 配置...

支持的数据

数据入仓 类别 数据源 导入方式 产品系列 文档链接 数据库 RDS MySQL 外表 数仓版(3.0)通过外表导入至数仓版 湖仓版(3.0)通过外表导入至湖仓版 DTS 数仓版(3.0)通过DTS导入数据 湖仓版(3.0)通过DTS导入数据 DataWorks 数仓版(3.0...

访问Redis数据

本文介绍如何使用AnalyticDB MySQL湖仓版(3.0)Spark通过ENI网络访问Redis数据。前提条件 已创建AnalyticDB MySQL湖仓版(3.0)集群。具体操作,请参见 创建湖仓版(3.0)集群。已创建数据库账号。如果您是通过阿里云账号访问,只需创建高...

SQL诊断功能介绍

例如,AnalyticDB MySQL版 集群中有3个数据库db1、db2、db3,而符合整体检索条件的查询仅涉及 db1 和 db2。此时查询列表右上角高级搜索中的 数据库 选择范围仅为 db1 和 db2。结果展示:高级检索的筛选结果仅在 SQL列表 中展示,而不会...

访问MaxCompute数据

本文介绍如何使用AnalyticDB MySQL湖仓版(3.0)Spark SQL读写MaxCompute数据。背景信息 大数据计算服务MaxCompute是一种快速、完全托管的TB/PB级数据仓库解决方案。您可以通过AnalyticDB MySQL湖仓版(3.0)Spark SQL读写MaxCompute数据。...

访问Kafka数据

本文介绍如何使用 AnalyticDB MySQL 湖仓版(3.0)Spark通过ENI网络访问消息队列Kafka版。前提条件 已创建 AnalyticDB MySQL 湖仓版(3.0)集群。具体操作,请参见 创建湖仓版(3.0)集群。已创建Job型资源组。具体操作,请参见 新建资源组...

同步数据

分析型数据库MySQL版支持多种数据加载方式,包括但不限于:通过阿里云数据传输服务DTS将MySQL/DRDS中的数据导入分析型数据库MySQL版,其中MySQL可为RDS for MySQL、其他云厂商或线上IDC的自建MySQL以及ECS自建MySQL。详细操作步骤请参见 ...

Spark计算引擎

AnalyticDB MySQL Serverless Spark是 AnalyticDB MySQL 团队基于Apache Spark打造的服务化的大数据分析计算服务,开通 AnalyticDB MySQL 服务后只需简单的配置,就可以提交Spark作业,无需关心Spark集群部署。方案架构图如下所示:...

Notebook开发编辑器

AnalyticDB MySQL 湖仓版(3.0)集群中的Notebook开发是 基于控制台的交互式数据分析开发平台,提供了作业编辑、数据分析、数据可视化等功能。Notebook开发 支持 Spark SQL和Python两种 编程语言编写Spark应 用程序。前提条件 已创建...

无感数据集成(Zero-ETL)

数据库名称 RDS for MySQL 实例的 数据库名称。数据库账号 RDS for MySQL 实例的 数据库账号。数据库密码 RDS for MySQL 实例 数据库账号的密码。连接方式 连接 RDS for MySQL 的方式。包括非加密链接和SSL安全链接。说明 如果设置为 SSL...

设置白名单

为保障 云原生数据仓库 AnalyticDB MySQL 版 集群的安全稳定,系统默认禁止所有地址访问 AnalyticDB for MySQL 集群,因此,在使用 AnalyticDB for MySQL 集群前,需为集群设置白名单,以允许外部设备访问该集群。背景信息 集群默认的白...

SQL审计

SQL审计功能可以实时记录数据库DML和DDL操作信息,并提供数据库操作信息的检索功能。使用限制 SQL审计日志不记录以下操作:INSERT INTO VALUES REPLACE INTO VALUES UPSERT INTO VALUES 开启/关闭SQL审计 登录 云原生数据仓库AnalyticDB ...

QlikView

完成上述参数配置后,单击 Test 测试连通性,测试通过后,单击 OK 添加 AnalyticDB MySQL 数据源。打开QlikView,单击 文件>编辑j脚本,选择步骤1中设置的数据库名称,进行连通性测试。说明 您也可以通过 ODBC CONNECT TO DATABASE_NAME;...

有数BI

您可以在 云原生数据仓库AnalyticDB MySQL控制台 的 集群管理 页面,复制公网地址。端口 3306 用户名 AnalyticDB MySQL版 集群中创建的账号:高权限账号 普通账号 您可以在 云原生数据仓库AnalyticDB MySQL控制台 的 账号管理 页面,查看...

设置白名单

为保障 云原生数据仓库 AnalyticDB MySQL 版 集群的安全稳定,系统默认禁止所有地址访问 AnalyticDB for MySQL 集群,因此,在使用 AnalyticDB for MySQL 集群前,需为集群设置白名单,以允许外部设备访问该集群。背景信息 集群默认的白...

管理运维事件

配置周期时间 周期时间对 AnalyticDB MySQL 数仓版(3.0)所有集群生效,不影响其他数据库产品运维事件的切换时间。配置周期时间后,会在指定周期时间点,对计划内所有未执行且未设置计划切换时间的事件执行切换。例如配置周期时间为周二00...

删除标签

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)页签下,单击目标 集群ID。在 集群信息 页面的 集群属性 区域,单击 编辑标签。单击要删除的标签后...

华为云云数据库RDS MySQL迁移到阿里云

本文介绍华为云云数据库RDS MySQL迁移到阿里云的步骤及注意事项。前提条件 源端及目标端 要求 相关参考 源端 华为云云数据库RDS MySQL实例 已开通公网访问,并获取外网连接地址及端口。已创建高权限账号。华为云云数据库RDS官方文档 目标端...

通过Logstash导入数仓版

Logstash是一个开源的服务器端数据处理管道,起初用于将日志类数据写入ES中。随着开源社区的不断发展,Logstash可以同时从多个数据源获取数据,并对其进行转换,然后将其发送到您需要的“存储端”。以日志数据为例,由于 AnalyticDB MySQL ...

AnalyticDB MySQL 2.0数据导入

参数 说明 database_name AnalyticDB for MySQL 2.0集群的数据库名称。catalog_name 数仓版(3.0)外部数据目录的名称。by pangu 对于MaxCompute中已经没有原始数据的场景,从 AnalyticDB for MySQL 2.0本地同步数据,需要在命令最后指定 by...

Oracle Golden Gate

Oracle Golden Gate数据类型AnalyticDB MySQL兼容性 源端 目标端 同步行为 Oracle MySQL AnalyticDB MySQL INSERT UPDATA DELETE number(3)bool或tinyint(1)boolean 支持 支持 支持 number(3)tinyint tingyint 支持 支持 支持 number(5)...

创建资源组

AnalyticDB MySQL 湖仓版(3.0)支持使用XIHE BSP SQL、XIHE MPP SQL、Spark SQL等不同方式进行作业开发。Job型资源组运行XIHE BSP SQL和Spark SQL,Interactive型资源组运行XIHE MPP SQL。开始作业开发前,需要先创建一个Job型和...

续费说明

AnalyticDB MySQL版 控制台手动续费 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 湖仓版(3.0)或 数仓版(3.0)页签中,单击目标集群右侧的 续费。选择购买时长,阅读...

创建标签

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)页签下,单击目标 集群ID。在 集群信息 页面的 集群属性 区域,单击 编辑标签。在 编辑标签 页面,...

自定义函数(邀测中)

AnalyticDB for MySQL 支持使用REMOTE_CALL函数远程调用函数计算服务(Function Compute,简称FC)中自定义的函数,以满足您在 AnalyticDB for MySQL 中使用UDF(用户自定义函数)的需求。前提条件 已提交Remote UDF功能的试用申请,并获得...

访问Elasticsearch数据

本文介绍如何使用 AnalyticDB for MySQL 湖仓版(3.0)Spark通过ENI网络读取Elasticsearch数据源。前提条件 已创建 AnalyticDB MySQL 湖仓版(3.0)集群。具体操作,请参见 创建集群。已创建Job型资源组。具体操作,请参见 新建资源组。已...

其他SQL功能差异

AnalyticDB MySQL不支持的MySQL 5.6功能 数据库管理(Database Administration)插件和自定义函数(Plugin and User-Defined Function)SET 复合查询(Compound)数据备份(Replication)存储对象(Stored Objects)事务和锁定...

作业投递

AnalyticDB MySQL 数仓版(3.0)的作业投递功能支持将资源组中满足一定条件的查询作业(通常为资源消耗大、耗时久的大查询)投递至指定一资源组中,避免影响资源组中其他查询作业。本文介绍如何开启并使用作业投递功能。前提条件 ...

删除或退订集群

删除按量付费集群 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。根据需要删除的集群版本,选择 数仓版(3.0)或 湖仓版(3.0)页签。单击目标集群右侧的 更多>删除。在 删除...

DBeaver(2.0版)

本文介绍如何通过DBeaver连接和管理 云原生数据仓库AnalyticDB MySQL版 2.0集群。开始使用DBeaver之前,您需要先完成以下准备...成功连接至AnalyticDB for MySQL 2.0数据库后,您就可以通过DBeaver对AnalyticDB for MySQL 2.0数据库进行管理。

查询数据库账号

AnalyticDB MySQL兼容MySQL数据库,AnalyticDB MySQL中也有一个名为MySQL的内置数据库,该数据库中存储的是AnalyticDB MySQL中的用户权限信息。您可以通过SELECT语句查询AnalyticDB MySQL中的用户信息。注意事项 AnalyticDB MySQL中,...

设置报警规则

您可以为 AnalyticDB MySQL版 集群设置报警规则,实时监控集群CPU使用率、磁盘使用率、IOPS使用率、查询耗时以及数据库连接数。系统在监控数据满足条件时,会通知报警联系组中的所有联系人。背景信息 云原生数据仓库AnalyticDB MySQL版 ...

查看资源弹性计划执行日志

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)或 湖仓版(3.0)页签下,单击目标集群ID。数仓版(3.0)集群,在左侧导航栏,单击 资源弹性扩容。...

Navicat(2.0版)

本文介绍如何通过Navicat连接和管理 云原生数据仓库AnalyticDB MySQL版 2.0集群。前提条件 开始使用Navicat for MySQL之前,需要先安装Navicat ...右键单击数据库名 打开数据库,打开数据库后,您就可以利用Navicat for MySQL进行数据管理。

Spark

本文汇总了使用 AnalyticDB MySQL Spark的常见问题及解决方案。常见问题概览 如何查看Spark应用信息?如何解决提交Spark应用时,出现User%s do not have right permission[*]to resource[*]报错?如何解决运行Spark应用时,出现No space ...

Scriptella

本文列出了Scriptella AnalyticDB MySQL 在连通性、创建表、查询表数据、写入数据、创建视图等方面的兼容性。测试环境 Java JDBC Scriptella Java版本1.8.0_231 JDBC版本5.1.48 Scriptella下载地址为 Scriptella,版本为1.2。测试范围 ...

管理资源弹性计划

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)或 湖仓版(3.0)页签下,单击目标集群ID。数仓版(3.0)集群,在左侧导航栏,单击 资源弹性扩容。...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 云原生数据仓库AnalyticDB MySQL版 云数据库 Redis 版 数据库备份 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用