数据存储

其中审计日志单独存储在一个数据库表中,包括USER、DATABASE、RT、SQL、TYPE等明细信息;把审计日志记录的简要明细信息进行多维的聚合后,生成实例的画像信息,存储在画像中。查询详情日志被分解为查询级别统计信息、子任务级别统计...

DataWorks调度XIHE SQL

本教程将使用 orders 作为测试数据,连接 AnalyticDB MySQL 数据库后,执行以下SQL创建测试数据。CREATE TABLE orders(o_orderkey bigint NOT NULL COMMENT'',o_custkey int NOT NULL COMMENT'',o_orderstatus varchar NOT NULL ...

数据传输”导入

源库与目标库 源库的实例类型可以是RDS实例,或者是您自建的MySQL数据库。以RDS实例为例,选择待迁移实例的ID,输入对应的数据库账号及密码。说明 DTS现已支持RDS/MySQL向HybridDB for MySQL的 全量及增量数据同步。目标库选择 PetaData,...

DBeaver

本文测试了DBeaver 6.1.2 Community Edition版本与 AnalyticDB MySQL 在连通性、列举数据库、创建等方面的兼容性,并给出测试结果图。测试环境 Java MySQL AnalyticDB MySQL DBeaver java version"1.8.0_161"Java(TM)SE Runtime ...

DBVisualizer

本文测试了DBVisualizer 10.0.24 版本与 AnalyticDB MySQL 在连通性、列举数据库、创建等方面的兼容性,并给出测试结果图。测试环境 Java MySQL java version"1.8.0_161"Java(TM)SE Runtime Environment(build 1.8.0_161-b12)Java ...

通过数据同步功能同步Kafka至湖仓版(推荐)

目标库配置 参数说明如下:参数名称 参数说明 库名 同步到 AnalyticDB MySQL数据库名称。如果不存在同名数据库,将新建库;如果已存在同名数据库,数据会同步到已存在的数据库中。库名命名规则,详见 使用限制。名 同步到 ...

使用XIHE BSP SQL进行作业开发

本文介绍如何使用XIHE BSP SQL作业开发方式,将ODS层表数据通过DWD层过滤后,写入ADS层。前提条件 已创建 AnalyticDB MySQL 湖仓版(3.0)集群,且集群至少有16 ACU的计算预留资源和24 ACU的存储预留资源。详情请参见 创建湖仓版集群。已...

创建湖仓版集群

重要 如果您同时在使用阿里云上的其他云服务,例如云服务器ECS、云数据库RDS等,请确保AnalyticDB MySQL与其他云服务位于同一个VPC,否则它们无法通过内网互通,无法发挥最佳性能。计算预留资源 计算预留资源用于数据计算。增加计算资源...

使用Spark SQL进行作业开发

本文介绍如何使用Spark SQL作业开发,将ODS层表数据通过DWD层过滤后,写入ADS层。前提条件 已创建 AnalyticDB MySQL 湖仓版(3.0)集群,且集群至少有16 ACU的计算预留资源和24 ACU的存储预留资源。详情请参见 创建湖仓版集群。已创建Job型...

Spark

本文汇总了使用 AnalyticDB MySQL Spark的常见问题及解决方案。常见问题概览 如何查看Spark应用信息?如何解决提交Spark应用时,出现User%s do not have right permission[*]to resource[*]报错?如何解决运行Spark应用时,出现No space ...

数据同步过程中源实例的数据库名、表名、列名是否可以...

概述 本文主要介绍数据同步过程中源实例的数据库名、名、列名是否可以包含横线(-)符号。详细信息 阿里云提醒您:如果您对实例或数据有修改、变更等风险操作,务必注意实例的容灾、容错能力,确保数据安全。如果您对实例(包括但不限于...

FineReport(2.0版)

配置项 说明 数据库 选择 MySQL。驱动器 选择 MySQL jdbc驱动。URL 分析型数据库MySQL版的连接地址,格式为:jdbc:mysql:/hostname:port。用户名 AccessKey ID。密码 Access Key Secret。完成上述参数配置后,单击 测试连接 测试连通性,...

Navicat Premium

本文测试了Navicat Premium 12.1.27版本与 AnalyticDB MySQL 在连通性、列举数据库、创建等方面的兼容性,并给出测试结果图。测试环境 Java MySQL Navicat Premium java version"1.8.0_161"Java(TM)SE Runtime Environment(build 1.8.0_...

通过外表导入至湖仓版

在 AnalyticDB MySQL 中创建数据库,示例如下:CREATE DATABASE adb_demo;在 AnalyticDB MySQL 中创建用于存储从MaxCompute中导入的数据,示例如下:说明 新和步骤3中创建的外表的字段顺序和字段数量需要一致,字段类型兼容。CREATE ...

数据导入性能优化

单进程无法完全利用系统资源,且一般客户端需要处理数据、攒批等操作,难以跟上数据库的导入速度,通过多并发导入可以加快导入速度。导入并发受攒批、数据源、客户端机器负载等影响,没有最合适的数值,建议通过测试逐步计算合适的并发能力...

永洪BI

AnalyticDB MySQL 支持通过永洪BI连接数据库、建等操作。操作方法 永洪BI试用地址,请参见 登录永洪BI。

数据导入性能优化

单进程无法完全利用系统资源,且一般客户端需要处理数据、攒批等操作,难以跟上数据库的导入速度,通过多并发导入可以加快导入速度。导入并发受攒批、数据源、客户端机器负载等影响,没有最合适的数值,建议通过测试逐步计算合适的并发能力...

通过外表导入至数仓版

返回结果如下:+-+-+-+-+|id|name|age|dt|+-+-+-+-+|1|james|10|202207|2|bond|20|202207|3|jack|30|202207|4|lucy|40|202207|+-+-+-+-+在 adb_demo 数据库中创建 test 用于存储从MaxCompute中导入的数据。CREATE TABLE IF NOT EXISTS ...

HybridDB for MySQL设计和实践优化建议

大小分开 为提升系统整体的性能和稳定性,用户应合理地将大和小拆分到不同的数据库中,HybridDB for MySQL适合存储大,而将小交给RDS for MySQL存储,大可以使用sharding分区技术合理利用资源,而不影响小。分区键高并发执行...

创建集群

重要 如果您同时在使用阿里云上的其他云服务,例如云服务器ECS、云数据库RDS等,请确保AnalyticDB MySQL与其他云服务位于同一个VPC,否则它们无法通过内网互通,无法发挥最佳性能。时区 设置集群时区,设定后会按照所选时区处理时间相关的...

数据导出到Redis

insert overwrite into export_redis_test_external_table select*from hybrid_export_redis_test 注意事项 要求两张的DDL定义完全一致(HybridDB for MySQL数据表、HybridDB for MySQL外表)。请谨慎使用OVERWRITE导出,会清空整个db,...

通过MySQL分析实例同步至数仓版

您可以登录 AnalyticDB MySQL版 控制台,查看实例的运行状态以及RDS MySQL数据的同步状态。登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)中,单击 集群类型...

如何查看客户端的IP

数据库的SQL命令窗口中运行如下命令,查询客户端的IP地址。show processlist;查询结果的Host字段即为客户端的IP地址。在HybridDB for MySQL控制台中,将白名单 0.0.0.0/0 删除,输入上个步骤查询到的IP地址,即可正常访问数据库

Java访问(2.0版)

不带重试的JDBC连接示例 您可以在业务系统的Java代码中添加以下代码,通过MySQL JDBC连接AnalyticDB for MySQL数据库。Connection connection=null;Statement statement=null;ResultSet rs=null;try { Class.forName(...

账号类型

您可以通过阿里云账号或者RAM用户创建和管理 AnalyticDB MySQL 集群,通过数据库账号连接数据库、创建数据库以及创建等。账号类型 作用范围 可进行的操作 阿里云账号 AnalyticDB MySQL 集群 阿里云账号用于 创建 和管理集群,例如登录...

从OSS批量导入导出

这一步是要确定HybridDB for MySQL数据导出到OSS后要存储到哪个存储目录下,HybridDB for MySQL的导出会根据并发度来动态地确定要导出到指定存储目录下的数据文件数目。在HybridDB for MySQL中建立一张外表映射到MySQL的数据。这一步的...

应用场景

在基于 MySQL 数据库的系统架构下,存放着设备信息的库,往往需要使用分库分表和相应的数据分发技术才能承担业务流量。分库分表的设计不仅增加了数据库运维人员的管理难度,也让系统架构的扩展受到了很大的限制。HybridDB for MySQL的...

快速入门综述

快速使用AnalyticDB MySQL版2.0服务 AnalyticDB MySQL版 2.0 全面兼容MySQL协议和SQL 2003,成功购买 AnalyticDB MySQL版 2.0 后,您就可以像使用MySQL数据库一样快速使用 AnalyticDB MySQL版 2.0。创建组是一系列可发生关联的数据...

概述

创建PolarDB for MySQL数据库集群 设置集群白名单 创建数据库账号 创建数据库 连接数据库 创建数据 本示例在-PolarDB中创建 test_ads 数据库和 login_info ,login_info 存储5条数据。CREATE TABLE `login_info`(`id` int(11)NOT ...

API概览

数据库 API 标题 API概述 DescribeTables 获取信息列表 调用DescribeTables接口枚举实例指定数据库下所有列表。DescribeAllDataSource 枚举数据库列表 枚举实例下所有数据库列表、列表和列列表。DescribeSchemas 枚举实例下所有数据...

通过Spark SQL读写Delta外表

Delta是一种可以基于OSS对象存储的数据格式,支持UPDATE、DELETE和INSERT操作。AnalyticDB for MySQL 湖仓版(3.0)和Delta表格式进行了整合,您可以通过Spark SQL读写Delta外表。本文主要介绍如何通过Spark SQL读写Delta外表。前提...

为什么HybridDB for MySQL 数据库刚创建时就有磁盘...

HybridDB for MySQL 数据库在初创时,会初始化一些系统文件,也会为空间预分配一些空白磁盘页面,因此会使用一定的磁盘空间,这些磁盘空间在用户有真实数据写入时,会被重新利用起来。

客如云精准营销方案

方案解读:将原系统中分散使用Hive、HBase、kylin、TiDB处理的各类分析业务集中更换为 分析型数据库MySQL(AnalyticDB MySQL)中,确保实时输出分析报表。将业务库数据实时同步到 AnalyticDB MySQL 中,商户运营报表每5分钟更新一次。通过 ...

Spark SQL创建C-Store

支持 db_name.table_identifier 格式,区分不同数据库下相同名字的名的命名规则,请参见 命名约束。column_name 列名。列名的命名规则,请参见 命名约束。column_type 列的数据类型。Spark SQL支持的数据类型,请参见 数据类型映射。...

导出至RDS MySQL

本文介绍如何通过 AnalyticDB MySQL 数仓版(3.0)的外表导出数据至云数据库RDS MySQL。前提条件 RDS MySQL实例需与 AnalyticDB MySQL 集群位于同一个VPC,即所在专有网络的VPC ID相同。说明 登录 RDS控制台,单击实例ID,在 数据库连接 ...

导出至自建MySQL

TABLE_PROPERTIES AnalyticDB MySQL 访问自建MySQL数据库的访问方式。url ECS实例的 主私网IP(即VPC地址)和目标库名(本文示例中为 test_adb)。查看步骤如下:登录 ECS管理控制台 并找到目标实例。在 实例详情 页签的 网络信息 区域,...

ALTER TABLE

云原生数据仓库AnalyticDB MySQL版 支持通过 ALTER TABLE 修改结构,包括修改名、列名、列类型、普通索引、聚集索引、外键索引、分区函数的格式、冷热分层存储策略。本文介绍 ALTER TABLE 语法。语法 ALTER TABLE table_name { ADD ANN...

通过联邦分析功能同步至湖仓版

联邦分析使用 AnalyticDB MySQL 的免费高速数据管道服务(APS)将 PolarDB MySQL中的 数据实时同步至 AnalyticDB MySQL 湖仓版(3.0)集群中,帮助您一站式完成数据同步与管理。本文介绍如何通过联邦分析将 PolarDB MySQL中的数据同步至 ...

SQL WorkBench/J

本文测试了SQL WorkBench/J与 AnalyticDB MySQL版 在连通性、列举数据库、创建等方面的兼容性,并给出测试结果图。测试环境 MySQL JDBC Driver SQL WorkBench/J MySQL JDBC Driver 5.1.48(Platform Independent),下载地址为 MySQL JDBC ...

DTS同步数据到AnalyticDB MySQL时出现“modify ...

对于修改字段类型的报错提示,可以通过以下两种方式解决问题:如果同步任务是整个数据库的同步操作,可以在AnalyticDB MySQL中新建一张名不同于报错的结构和源结构保持一致,通过使用 Insert Into Select SQL语句将报错...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云原生数据仓库AnalyticDB MySQL版 云数据库 RDS 云数据库 Redis 版 数据库备份 DBS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用