通过Spark SQL读写C-Store表数据

AnalyticDB MySQL 湖仓版(3.0)集群支持通过Spark SQL在线或离线读写C-Store表数据。本文主要介绍通过Spark SQL在线或离线读写C-Store表数据的具体方法。前提条件 湖仓版(3.0)集群的存储预留资源需大于0 ACU。详情请参见 创建湖仓版集群...

资源模型相关

分析型数据库MySQL版扩容/缩容是否需要停业务?分析型数据库MySQL版支持弹性扩缩容和升降配,可以做到用户无感知和业务无影响。可否只对内存进行扩容 分析型数据库MySQL版的实例规格有多种,C4、C8、S2n和S8n,不同的资源规格对应的实例在...

创建资源组

AnalyticDB MySQL 湖仓版(3.0)支持使用XIHE BSP SQL、XIHE MPP SQL、Spark SQL等不同方式进行作业开发。Job型资源组运行XIHE BSP SQL和Spark SQL,Interactive型资源组运行XIHE MPP SQL。开始作业开发前,需要先创建一个Job型和...

创建标签

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)页签下,单击目标 集群ID。在 集群信息 页面的 集群属性 区域,单击 编辑标签。在 编辑标签 页面,...

读写一致性

在 读的一致性 上,HybridDB for MySQL提供两种数据可见性模式:最终一致性读 最终一致性读默认的读一致性模式,是高吞吐高性能写入模式,正常情况下可以做到毫秒级别的读延迟。强一致性读 日常不建议使用该读模式,除非对一致性有特殊要求...

从OSS导入JSON数据文件

HybridDB for MySQL可以方便地通过外部表将存储在OSS中的JSON数据导入到HybridDB for MySQL数据库中。前提条件 资源和环境准备,执行操作前需提前准备OSS和HybridDB for MySQL的相关资源。包括:阿里云RAM账户,提前获取RAM账户的...

删除或退订集群

删除按量付费集群 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。根据需要删除的集群版本,选择 数仓版(3.0)或 湖仓版(3.0)页签。单击目标集群右侧的 更多>删除。在 删除...

连接

本文介绍 AnalyticDB MySQL 中连接的常见问题及解决方法。说明 当常见问题场景中未明确产品系列时,表明该问题仅适用于 AnalyticDB MySQL 数仓版(3.0)。常见问题概览 如何解决白名单设置问题导致的连接失败?当查询过程中关闭了JDBC连接...

通过DTS导入数据

操作方法 您可以选择数据同步或数据迁移任意一种方式,将RDS MySQL数据导入至 AnalyticDB MySQL 湖仓版(3.0)或 数仓版(3.0)。具体操作,请参见:RDS MySQL同步至AnalyticDB MySQL 3.0。RDS MySQL迁移至AnalyticDB MySQL 3.0。

DML差异

MySQL 云原生数据仓库AnalyticDB MySQL 定义 CALL 不支持 调用存储过程。DELETE 支持,详情请参见 DELETE。从表中删除行。DO 不支持 执行表达式,但不返回任何结果。HANDLER 不支持 直接访问表存储引擎接口。INSERT 支持,详情请参见 ...

通过Spark SQL读Lindorm数据

AnalyticDB MySQL 湖仓版(3.0)支持通过Spark SQL访问Lindorm数据库。本文主要介绍如何通过Spark SQL访问Lindorm中的Hive表和宽表的数据。前提条件 已创建Lindorm单可用区实例。具体操作,请参见 创建实例。重要 Lindorm实例需开通宽表...

数据迁移方案概览

“数据传输”导入 事务引擎/分析引擎 使用数据传输(Data Transmission Service)将自建MySQL数据库或者RDS for MySQL数据库迁移到HybridDB for MySQL中。从MySQL批量导入导出 分析引擎 HybridDB for MySQL支持从自建MySQL中全量导入和导出...

湖仓版扩缩容

扩容 登录 云原生数据仓库AnalyticDB MySQL控制台,在页面左上角选择集群所在地域。在左侧导航栏,单击 集群列表,在 湖仓版(3.0)页签下,单击目标集群右侧的 扩容。在 变配 页面,设置 计算预留资源 和 存储预留资源。扩容会增加剩余可...

通过联邦分析功能同步至湖仓版

联邦分析使用 AnalyticDB MySQL 的免费高速数据管道服务(APS)将 PolarDB MySQL中的 数据实时同步至 AnalyticDB MySQL 湖仓版(3.0)集群中,帮助您一站式完成数据同步与管理。本文介绍如何通过联邦分析将 PolarDB MySQL中的数据同步至 ...

通过PySpark开发Spark应用

本文介绍了如何开发 AnalyticDB MySQL Spark Python作业,以及如何通过VirtualEnv技术打包Python作业的运行环境。前提条件 已创建 AnalyticDB MySQL 湖仓版(3.0)。具体操作,请参见 创建集群。已创建Job型资源组。具体操作,请参见 新建...

使用XIHE BSP SQL进行作业开发

示例数据文件内容如下:001,Anna,99,London 002,Bob,67,USA 003,Cindy,78,Spain 004,Dan,100,China 步骤一:创建OSS外表 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 湖...

调优集群性能

语义错误 SQL符合 云原生数据仓库 AnalyticDB MySQL 版 官方对SQL语法的定义,但在语义检查时,发现数据库对象错误,在语义分析阶段报错。例如,表名错误、列不存在、GROUP BY字段缺失、函数参数类型错误等。集群内部问题导致查询失败 查询...

查看与升级版本

随着 AnalyticDB for MySQL 集群内核版本的迭代,新的内核版本能够为您提供更多的新功能,以及更好的使用体验。您 可以参考本文档自助升级集群内核版本。前提条件 集群为 数仓版(3.0)集群。重要 湖仓版(3.0)集群升级内核版本请 提交工...

Job型资源组的优先级队列

本文介绍设置 湖仓版(3.0)Job型资源组的作业优先级和查看优先级的方法。...查看Spark Batch作业优先级 登录 云原生数据仓库AnalyticDB MySQL控制台,在 作业开发>Spark Jar开发 页面的 应用列表 页签中查看作业的优先级。

通过外表导入至数仓版

AnalyticDB for MySQL 支持通过外表读取并导入MaxCompute数据。通过外表导入数据可以最大限度地利用集群资源,实现高性能数据导入。您也可以进一步选择通过Tunnel方式和Storage API两种方式访问并导入MaxCompute数据,相较于Tunnel方式,...

账号类型

例如登录阿里云产品控制台、设置白名单、创建数据库账号、申请和释放公网地址、设置可维护时间段、扩容集群、恢复新集群以及 删除集群 等。RAM用户从属于阿里云账号,并且这些子账号下不能拥有实际的任何资源,所有资源都属于阿里云账号。...

高性能版Spark全密态计算引擎使用示例

AnalyticDB MySQL 湖仓版(3.0)高性能版的Spark全密态计算引擎,在基础版Spark全密态引擎能力的基础上,支持Parquet模块化加密功能,且兼容社区版Spark、Hadoop、Hive等计算引擎,在保证数据传输与存储过程安全的同时,提升了数据处理效率...

Tableau(2.0版)

参数 说明 服务器 分析型数据库MySQL版的连接地址。端口号 连接地址对应的端口号。用户名 AccessKey ID。密码 Access Key Secret。完成上述参数配置后,单击 确定 连接分析型数据库MySQL版。使用Tableau 在Tableau Desktop上,用户可以看到...

小查询自动识别与加速

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台,在左上角选择集群所在地域。在左侧导航栏,单击 集群列表,在 数仓版(3.0)页签,单击目标集群ID。在左侧导航栏,单击 工作负载管理。单击 小查询加速 页签,打开 自动小查询加速 ...

永洪BI

完成上述参数配置后,单击 测试连接 进行连通测试,系统提示测试成功后,即可连接至指定的 AnalyticDB MySQL 数据库。使用永洪BI 通过永洪BI连接 AnalyticDB MySQL 集群后,您就可以获取 AnalyticDB MySQL 中的数据,然后通过永洪BI制作...

GrantOperatorPermission-为集群服务账号授权

访问级别 资源类型 条件关键字 关联操作 adb:GrantOperatorPermission Write DBCluster acs:adb:{#regionId}:{#accountId}:dbcluster/{#dbclusterId} 无 无 请求参数 名称 类型 必填 描述 示例值 DBClusterId string 是 AnalyticDB MySQL ...

数据集成”导入

您可以通过 数据集成(Data Integration)向 HybridDB for MySQL 中进行数据的全量导入或带过滤条件的导入。具体操作请参见 配置HybridDB for MySQL数据源。

PHP

AnalyticDB MySQL 集群的数据库名称。ads_database="db_name;AnalyticDB MySQL 集群的连接端口号。ads_port=3306;连接 AnalyticDB MySQL。ads_conn=mysqli_connect($ads_server_name,$ads_username,$ads_password,$ads_database,$ads_port)...

湖仓版作业调度

如果通过RAM用户(子账号)登录,使用作业调度功能需要满足以下三个条件:已配置 AnalyticDB MySQL 的AliyunServiceRoleForAnalyticDBForMySQL角色。配置方法,请参见 AliyunServiceRoleForAnalyticDBForMySQL介绍。已创建 AnalyticDB ...

查看连接信息

通过控制台查看连接数 登录 云原生数据仓库AnalyticDB MySQL控制台,在左上角选择集群所在地域。在左侧导航栏,单击 集群列表,在 数仓版(3.0)页签,单击目标集群ID。在左侧导航栏,单击 诊断优化。单击 连接信息 页签。您可以查看连接 ...

ListTagResources-查询标签列表

调用ListTagResources查询一个或多个AnalyticDB MySQL集群已绑定的标签列表,或者查询一个或多个标签绑定的AnalyticDB MySQL集群列表。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI ...

数据导出到MongoDB

insert overwrite into export_mongo_mongo_external_table select*from hybriddb_export_mongo_test 注意事项 要求两张表的DDL定义完全一致(HybridDB for MySQL数据表、HybridDB for MySQL外表)。目前只支持导出到MongoDB,不支持从...

使用DataWorks完成数据同步

您可以使用DataWorks完成HybridDB for MySQL间的同步,具体操作,请参见 配置HybridDB for MySQL数据源。

使用Stage和Task详情分析查询

AnalyticDB for MySQL 在前端接入节点接收到查询请求后,会将查询切分成多个Stage,在存储节点(Worker节点)和子任务执行节点(Executor节点)分布式进行数据的读取和计算。部分Stage可以并行执行,但部分Stage之间存在依赖关系,只能串行...

Node.js

password:'account_password',/AnalyticDB MySQL集群的数据库名称。database:'db_name',/建立连接的超时时间,默认10000毫秒。connectTimeout:10000 });connection.connect(function(err){ if(err){ throw err;} console.log("Connection ...

配置SQLServer数据

此连接串中的Database为本数据源的默认数据库,但在配置同步任务时,您可以使用相应RDS实例下所有的数据库。用户名 登录数据库的用户名。密码 登录数据库的密码。选择 资源组连通 类型为 数据集成。在资源组列表,单击相应资源组后的 ...

Tableau

本文测试了Tableau与 AnalyticDB MySQL 在列举数据库、查看表表等方面的兼容,并给出测试结果图。测试环境 MySQL Tableau mysql Ver5.6.46 for osx10.13 on x86_64(Homebrew)Tableau Desktop 2019.4 测试范围 列举数据库 列举所有表 查看...

使用限制

搭建数据库复制 HybridDB for MySQL本身提供主备复制架构的双节点集群,无需用户手动搭建。其中主备复制架构集群的备(slave)实例不对用户开放,用户应用不可直接访问。用户、密码和数据库管理 HybridDB for MySQL默认需要通过管理控制台...

术语说明

张三的HybridDB for MySQL实例 DBName 数据库名,同实例下不能重复 用户填写,便于用户记忆使用的有意义的名字。填写之后不支持修改。mydb2 DBId 数据库的唯一标识 由InstanceId#DBName构成,一旦生成不能修改。用于提供给阿里云其他业务...

Python

db是AnalyticDB MySQL集群中的数据库名。db=MySQLdb.connect(host='am-bp*.ads.aliyuncs.com',port=3306,user='account_name',passwd='account_password',db='db_name')#使用cursor()方法获取操作游标。cursor=db.cursor()#使用execute方法...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云原生数据仓库AnalyticDB MySQL版 云数据库 RDS 数据库备份 DBS 云服务器 ECS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用