通过日志服务导入至数仓版
左边文本框为日志字段名称，右边为AnalyticDB MySQL数据库表中的字段。说明 Timestamp类型的字段映射精确到秒级别。例如日志时间为2022-01-05 10:12:13.145，投递到AnalyticDB MySQL后，投递结果为2022-01-05 10:12:13。投递开始时间 配置...
将日志服务数据投递到AnalyticDB MySQL
左边文本框为日志字段名称，右边为AnalyticDB MySQL数据库表中的字段。说明 Timestamp类型的字段映射精确到秒级别。例如日志时间为2022-01-05 10:12:13.145，投递到AnalyticDB MySQL后，投递结果为2022-01-05 10:12:13。投递开始时间 配置...
导入MySQL数据
您可以将自建MySQL数据库或RDS MySQL数据库中的数据导入到日志服务，实现数据的查询分析、加工等操作。本文介绍导入MySQL数据的操作步骤。使用限制 目前仅支持：华东1（杭州）、华东2（上海）、华北1（青岛）、华北2（北京）、华北3...
从RDS MySQL数据库获取数据进行数据富化
说明 日志字段的值和RDS MySQL数据库表字段的值进行等值匹配时，如果RDS MySQL数据库表字段存在多个相同的值（例如RDS MySQL数据库表有多个值为 1 的 cid 字段。e_table_map函数只获取匹配到的第一行数据。e_table_map函数只支持单行匹配，...
创建索引或约束支持的字段类型
MySQL 数据库字段类型 是否支持 OceanBase 数据库 MySQL 租户字段类型 是否支持 INT 支持 INTEGER 支持 TINYINT 支持 TINYINT 支持 SMALLINT 支持 SMALLINT 支持 MEDIUMINT 支持 MEDIUMINT 支持 BIGINT 支持 BIGINT 支持 BOOL 支持 BOOLEAN...
使用RDS内网地址访问RDS MySQL数据库
field 为匹配字段，Logstore中的日志和RDS MySQL数据库表中数据存在共同字段，且字段的值相同，才能匹配成功。output_fields 为输出字段，字段匹配成功后，返回输出字段，生成一条新的日志。高级参数配置 通过RDS内网地址访问RDS MySQL数据...
云数据库 RDS MySQL 版的decimal字段过大导致查询不...
问题原因 云数据库 RDS MySQL 版的 decimal 字段过大查询不准的情况，这是MySQL数据库的BUG引起。解决方法 可以通过添加索引进行优化解决，优化SQL语句如下。create table mlgtestdecimal(`campaign_id` decimal(24,0)NOT NULL,name ...
云数据库 RDS MySQL 版的decimal字段过大导致查询不...
问题原因 云数据库 RDS MySQL 版的 decimal 字段过大查询不准的情况，这是MySQL数据库的BUG引起。解决方法 可以通过添加索引进行优化解决，优化SQL语句如下。create table mlgtestdecimal(`campaign_id` decimal(24,0)NOT NULL,name ...
删除有约束的列
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于删除不同约束下字段的不兼容场景。说明 本文表格中，对比类型空白表示相应约束下不支持该类型。删除主键（PRIMARY KEY）约束下的列 如果删除的 主键列 中包含下表中的字段类型...
数据源常见问题
您可以排查MySQL数据库字段类型是否为 TINYINT 类型。TINYINT(1)默认处理为BOOLEAN类型。新建计算字段时，建议您使用 CAST([XX]AS SIGNED)将 TINYINT(1)类型转换成一个普通整数即可。直连数据库时，每次刷新仪表板的图表都去查询数据库吗？...
方案选择
全量数据：将全量的订单数据存入MySQL数据库，订单ID之外的数据整体存为一个字段。该全量数据作为持久化存储，也用于非索引字段的反查。查询数据：仅将需要检索的字段存入Elasticsearch（基于Lucene分布式索引数据库），借助于...
库表
在 AnalyticDB MySQL 中建表时，需要注意以下几点：分布字段的选择。AnalyticDB MySQL 是分布式数据库，数据需要根据分布字段均匀地分布在各个后台节点才能保证尽可能高的利用资源。分布字段选择不合理，会导致写入时存在热点，降低写入...
有约束的列修改类型
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改不同约束下的列的字段类型的不兼容场景。说明 本文表格中，对比类型空白表示相应约束下不支持该类型、短横线（-）表示没有、all 表示全部类型。主键（PRIMAEY KEY）约束下...
使用kettle将本地数据导入AnalyticDB MySQL 2.0
本文以Excel为例，介绍如何通过kettle将本地Excel数据迁移到 云原生数据仓库AnalyticDB MySQL版 2.0集群。背景信息 Kettle是一款非常受欢迎的开源ETL工具软件，主要用于数据整合、转换和迁移。Kettle除了支持各种关系型数据库，HBase ...
产品和业务限制
限制项 描述 例外申请方式 购买分析型数据库MySQL版的限制 账户余额大于等于500元现金 请联系技术支持 开通分析型数据库MySQL版的用户限制 用户需实名认证 无 可创建的最大分析型数据库MySQL版数 3个 联系技术支持申请更多 单个分析型数据...
数据库常见问题
本文以MySQL数据库为例，操作步骤如下所示：登录 云虚拟主机管理控制台。查看云虚拟主机数据库空间的使用情况。站点信息 页面：在 站点信息 页面的 网站信息 区域查看空间使用情况。数据库信息 页面：单击左侧的 数据库信息，在 数据库信息...
“数据传输”导入
源库与目标库 源库的实例类型可以是RDS实例，或者是您自建的MySQL数据库。以RDS实例为例，选择待迁移实例的ID，输入对应的数据库账号及密码。说明 DTS现已支持RDS/MySQL向HybridDB for MySQL的 全量及增量数据同步。目标库选择 PetaData，...
有约束的列修改长度
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改不同约束下的列的字段长度的不兼容场景。说明 本文表格中，对比类型空白表示相应约束下不支持该类型、短横线（-）表示没有。主键（PRIMARY KEY）约束下字段长度的修改 ...
配置MySQL输入
MySQL输入基于Binlog实时订阅的方式，实时读取您配置的MySQL数据库表数据。本文为您介绍，如何配置MySQL输入，以及配置输入之前需要准备的网络环境及账号权限。前提条件 配置MySQL输入之前，请确保已完成以下规划与准备工作。已配置同步...
在DMS中为MySQL建立索引时出现“Specified key was ...
问题描述 在阿里云DMS中为InnoDB引擎的MySQL数据库建立索引时，出现类似以下报错。Specified key was too long;max key length is 767 bytes 问题原因 以MySQL的varchar、char等字符串类型字段作为索引时，单个索引字段存储长度超过了767...
通过一键建仓同步至数仓版
数据库名称 从下拉列表中选择目标 AnalyticDB MySQL 数据库名。表名 从下拉列表中选择目标 AnalyticDB MySQL 表名。账号名称 目标 AnalyticDB MySQL 中创建的 数据库账号。账号密码 填写账号名称对应的密码。字段映射 系统自动提取日志服务...
MySQL整库同步Kafka
本文为您介绍如何将MySQL整库同步Kafka，从而降低多个任务对MySQL数据库造成的压力。背景信息 MySQL CDC数据表主要用于获取MySQL数据，并可以实时同步数据表中的修改，经常用在复杂的计算场景。例如，作为一张维表和其他数据表做Join操作。...
通过Spark SQL访问MySQL数据
AnalyticDB MySQL 湖仓版（3.0）支持提交Spark SQL作业，您可以通过View或Catalog两种方式访问自建MySQL数据库或云数据库RDS MySQL、云原生数据库 PolarDB MySQL。本文以RDS MySQL为例，介绍如何通过Spark SQL访问RDS MySQL数据。前提条件 ...
FineBI
检查外接MySQL数据库是否使用utf8（– UTF-8 Unicode）编码为字符集排列规则，或新建一个utf8编码的数据库 create database finedb character set utf8。配置外接数据库为AnalyticDB，连接失败 处理方法：外界数据库需要配置本地MySQL，而...
通过Kettle导入至数仓版
在 表输出 的 数据库字段 选项卡中，单击 获取字段 和 输入字段映射，可以设置Excel中的列与 AnalyticDB MySQL版 表中列名间的映射关系。单击白色三角箭头运行转换，观察运行日志和运行状态。本地Excel数据成功同步至 AnalyticDB MySQL版 ...
采集MySQL查询结果
在MySQL数据库中，设置白名单为Logtail所在服务器的IP地址。例如RDS MySQL数据库的白名单设置，请参见 设置IP白名单。原理 Logtail根据Logtail采集配置定期执行指定的SELECT语句，将查询结果作为数据上传到日志服务。Logtail获取到查询结果...
查询数据库账号
AnalyticDB MySQL兼容MySQL数据库，AnalyticDB MySQL中也有一个名为MySQL的内置数据库，该数据库中存储的是AnalyticDB MySQL中的用户与权限信息。您可以通过SELECT语句查询AnalyticDB MySQL中的用户信息。注意事项 AnalyticDB MySQL中，...
没有约束的列修改长度
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改没有约束的列的字段长度的不兼容场景。如果列中包含下表中的字段类型，通过 ALTER TABLE table_name MODIFY/CHANGE COLUMN DDL 对该列进行字段长度修改操作，MySQL 数据库...
使用数据集成迁移数据到AnalyticDB MySQL 2.0
支持的数据源类型 数据集成提供丰富的数据源支持，如下所示：文本存储（FTP/SFTP/OSS/多媒体文件等）数据库（RDS/DRDS/MySQL/PostgreSQL等）NoSQL（Memcache/Redis/MongoDB/HBase等）大数据（MaxCompute/云原生数据仓库AnalyticDB MySQL版 ...
自定义RDBMS数据库及同步数据
操作流程 自定义并应用MySQL数据库组件的流程如下：步骤 描述 步骤一：配置网络和创建数据表 在您开始自定义并应用RDBMS数据库组件前，需要配置RDS MySQL实例和Dataphin间的网络，及创建同步数据的源表和目标表。步骤二：创建自定义数据源 ...
自定义RDBMS数据库及同步数据
操作流程 自定义并应用MySQL数据库组件的流程如下：步骤 描述 步骤一：配置网络和创建数据表 在您开始自定义并应用RDBMS数据库组件前，需要配置RDS MySQL实例和Dataphin间的网络，及创建同步数据的源表和目标表。步骤二：创建自定义数据源 ...
没有约束的列修改类型
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改没有约束的列的字段类型的不兼容场景。如果列中包含下表中的字段类型，通过 ALTER TABLE table_name MODIFY/CHANGE COLUMN DDL 对该列进行字段类型修改操作，MySQL 数据库...
优化建议
分布式数据库的高性能依赖于底层数据库的高性能，而对底层数据库性能来说，建立需要的索引是重要的环节；确保语句能正确使用到索引，例如查询条件能被索引完全覆盖到，保证分区键上有索引等；查询尽量在单机完成，最为简单的方式就是在分区...
日志字段详情
db_name 数据库名称 db_type 数据库类型，包括MySQL、PostgrepSQL。db_version 数据库版本 instance_id 集群ID lock_time 锁等待的耗时，单位：秒。owner_id 阿里云账号ID query_sql 慢日志SQL语句 query_time 查询耗时，单位：秒。region ...
数据表管理
根据实际业务需求，填写数据表名称、更新时间列信息，选择数据源和物理表等：数据源：即在知识中心>数据问答>数据源管理中创建的数据源，当前数据源类型仅支持为MySQL数据库。物理表：即数据库下的具体表格。更新时间列：即数据库的物理表...
读写MySQL数据（mysql_fdw）
RDS PostgreSQL提供mysql_fdw插件，可以读写RDS MySQL实例或自建MySQL数据库里的数据。前提条件 实例为RDS PostgreSQL 10或以上版本的云盘实例。说明 PostgreSQL 14需要内核小版本至少为20221030，如何查看和升级内核小版本，请参见 升级...
CreateOmsMysqlDataSource-创建 OMS MySQL 数据源
接口说明 注意 使用该接口需将 OceanBase 数据传输服务器的 IP 地址（请至 OMS 数据源添加页面查询）加入到您的阿里云数据库实例的白名单、ECS 的安全规则或自建数据库对应的安全设置（通常为您自建数据库的防火墙）中以确保 OceanBase ...
资源函数
例如 update_time_key="update_time"，其中 update_time 为MySQL数据库中数据更新的时间字段，该时间字段支持如下数据类型：Datetime、Timestamp、Int、Float、Decimal。需保证该时间字段的值随时间递增。说明 数据加工基于该时间字段做...
同步方案选取指南
当您在使用关系型数据库（RDS）遇到查询慢的问题时，可将RDS中的数据同步至阿里云Elasticsearch进行查询分析。阿里云Elasticsearch是一个基于Lucene的实时分布式的搜索与分析引擎，可近乎于准实时地存储、查询和分析超大数据集。您可以通过...
数据集成服务
迁移方案 说明 同步MySQL数据到表格存储 MySQL数据库中的数据只能迁移到表格存储的数据表中。迁移过程中会使用到MySQL的Reader脚本配置和表格存储的Writer脚本配置，具体数据源配置如下：源数据源：MySQL数据源 目标数据源：Tablestore数据...
- 产品推荐
- 这些文档可能帮助您