PolarDB HTAP实时数据分析技术解密

用户可以根据负载特征,灵活的使用纯行存表、纯存表、行列混合表、+存索引等多种模式。IBM在2013年发布的10.5版本(Kepler)中,增加了DB2 BLU Acceleration组件,通过数据存储配合内存计算以及DataSkipping技术,大幅提升...

存索引技术架构介绍

微软在SQL Server 2016 SP1上,开始提供Column Store Indexs功能,用户可以根据负载特征,灵活的使用纯行存表、纯存表、行列混合表以及+存索引等多种模式。IBM在2013年发布的10.5版本(Kepler)中,增加了DB2 BLU Acceleration...

行列转换

行转列 方法一:通过CASE WHEN语句 SELECT username,max(CASE WHEN subject='语文' THEN score END)AS `语文`,max(CASE WHEN subject='数学' THEN score END)AS `数学`,max(CASE WHEN subject='英语' THEN score END)AS `英语` FROM pivot ...

Unpivot 转行

month))'select distinct se_month from tbl_sellers_info order by 1')as-crosstab 输出格式(js jsonb,-第一个参数SQL内对应的order by对应的字段(1个或多个)Jan numeric,-第一个参数SQL内对应导数第二个字段的枚举值,(行转列)feb ...

行转列及列转行最佳实践

数据开发、分析的过程中,您可能需要在不同维度下展示数据或为了符合某些数据表格式要求,此时需要对数据行转列或列转行。本文以一个具体示例为您介绍在MaxCompute中实现行转列、列转行的SQL。背景信息 行转列与列转行的示意图如下。行转...

创建数据库

若要使用云数据库RDS,您需要在实例中创建数据库。...如果您使用 一键上云 等迁移方式将本地自建数据库迁移上云时,空间将与本地自建数据库表空间名称相同,支持将数据库空间修改为 pg_default。下一步 连接PostgreSQL实例。

创建账号和数据库

如果您使用 一键上云 等迁移方式将本地自建数据库迁移上云时,空间将与本地自建数据库表空间名称相同,支持将数据库空间修改为 pg_defult。常见问题 创建的账号在只读实例上可以用吗?答:主实例创建的账号会同步到只读实例,...

更改数据存储格式

当命令返回为空时,说明当前数据库已经没有需要切换的、或者所有需要切换的都已经在后台切换当中,无需进一步处理,可以继续处理下个数据库。如果命令返回类似 continue to call hg_convert_segment_orc()if you want to convert all ...

ACL权限体系

以下出AnalyticDB for MySQL 2.0的权限对象和各对象权限:Database(库),即 db_name.*或*(默认数据库),指定数据库数据库上所有/组。TableGroup(组),即 db_name.table_group_name 或 table_group_name,特定组。Table...

数据库存储

} }/*数据库更新时的回调函数*@param database 数据库*@param connectionSource 连接*@param oldVersion 旧数据库版本*@param newVersion 新数据库版本*/Override public void onUpgrade(MPSQLiteDatabase database,ConnectionSource ...

多租户管理使用说明

本文介绍了 PolarDB MySQL版 提供的租户管理简介以及使用说明等内容。简介 PolarDB MySQL版 提供的多租户...例如,在租户 t2 下,用户 u1 在 db3 数据库内执行的SQL语句被记录在审计日志中,数据库列将显示为 db3@t2,用户将显示为 u1@t2。

MySQL数据库账号权限管理

REFERENCES 数据库 外键权限。LOCK TABLES 数据库权限。EVENT 数据库 查询、创建、修改、删除MySQL事件的权限。ALTER 、视图 更改或视图权限,比如添加字段、索引、修改字段等。DELETE 删除数据权限。INDEX 索引...

快速入门

Ganos FDW提供了对于多种空间数据类型的统一访问,会自动将几何空间数据类型映射为Geometry字段类型,从而允许与数据库内部进行统一地访问与查询。操作步骤 创建时空引擎FDW插件。您可以通过以下两种方式创建扩展。直接创建Ganos_FDW扩展...

快速入门

Ganos FDW提供了对于多种空间数据类型的统一访问,会自动将几何空间数据类型映射为Geometry字段类型,从而允许与数据库内部进行统一地访问与查询。操作步骤 创建时空引擎FDW插件。您可以通过以下两种方式创建扩展。直接创建Ganos_FDW扩展...

Tomcat 连接池连接 OceanBase 数据库示例程序

本文将介绍如何使用 Tomcat 连接池、OceanBase Connector/J 和 OceanBase 数据库构建一个应用程序,实现基本的数据库操作,包括创建、插入、删除、更新和查询数据等。点击下载 tomcat-mysql-client 示例工程 前提条件 您已安装 OceanBase...

管理访问控制权限

数据管理DMS提供了全方位细粒度的数据安全管理功能,支持对实例、数据库、数据数据行、元数据等进行访问控制权限管理。本文对DMS提供的访问控制权限进行介绍。权限类别说明 权限分类 权限类别 权限说明 实例是否开启安全托管 操作...

管理访问控制权限

数据管理DMS提供了全方位细粒度的数据安全管理功能,您可以对实例、数据库、敏感等进行权限管理。本文介绍不同的用户角色进行权限管理的方法。注意事项 未开启安全托管的实例,仅支持申请或授予登录实例权限。已开启安全托管的...

库表列名映射

若您需要使用名或名映射:源数据库类型为 MongoDB 时,任务对象的选择粒度需为集合;源数据库类型为 Tair/Redis 时,任务对象的选择粒度需为Redis DB;源数据库为其他类型的数据库时,任务对象的选择粒度需为。如果使用了库表列名...

Db2 for LUW同步至云原生数据仓库 AnalyticDB ...

注意事项 说明 在库结构同步过程中,DTS会将源数据库中的外键同步到目标数据库。在全量同步和增量同步过程中,DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作,可能会导致数据不一致。...

Hive数据

数据库 SelectDB 版 目前支持Ranger的库、权限,不支持加密、权限等。​ 环境配置 连接开启Ranger权限校验的Hive Metastore需要进行如下设置。创建Catalog时,需增加配置:"access_controller.properties.ranger.service.name"=...

从自建Db2迁移至RDS MySQL

本文介绍如何使用数据传输服务DTS(Data Transmission Service),将自建的Db2数据库迁移至RDS MySQL。DTS支持结构迁移、全量数据迁移以及增量数据迁移,同时使用这三种迁移类型可以实现在自建应用不停服的情况下,平滑地完成Db2数据库的...

从ECS上的自建SQL Server同步至云原生数据仓库...

DTS将以数据同步实例ID>:<源数据库名>.<源Schema名>.<源名>的格式写入值用于区分的来源,例如 dts*:dtstestdata.testschema.customer1。多归并功能基于任务级别,即不支持基于级别执行多归并。如果需要让部分执行多归并,...

从PolarDB MySQL版同步至云原生数据仓库 AnalyticDB ...

术语/概念对应关系 PolarDB MySQL版 云原生数据仓库AnalyticDB MySQL 数据库 云原生数据仓库AnalyticDB MySQL(2.0):组 云原生数据仓库AnalyticDB MySQL(3.0):数据库 云原生数据仓库AnalyticDB MySQL(2.0): 云原生数据仓库...

库表列映射

对于MongoDB数据库,仅支持库名映射和集合名(名)映射。库表列名单个映射 在配置数据迁移任务的设置 迁移类型及列表 环节中,将要迁移的对象移动到 已选择 区域框中,然后将鼠标指针放置在要修改库或名上,并单击对象后出现的 编辑。...

使用DTS同步RDS MySQL数据到AnalyticDB MySQL 2.0

同步对象的选择粒度可以为、列,您可以根据需要同步某几个的数据,或者只同步中的某几列数据。数据同步支持、列名映射,您可以进行不同库名之间的数据或两个不同名之间的数据同步。注意事项 配置同步链路 过程中,如果...

API概览

CheckSampleDataSet 检查内置数据集状态 DescribeUserQuota 查询用户可用配额 DescribeAllDataSource 枚举数据库列表 枚举实例下所有数据库列表、列表和列表。DescribeTables 枚举数据库列表 查询指定数据库列表信息。...

从RDS同步到云原生数据仓库 AnalyticDB MySQL 版

术语/概念对应关系 MySQL 云原生数据仓库AnalyticDB MySQL 数据库 云原生数据仓库AnalyticDB MySQL(2.0):组 云原生数据仓库AnalyticDB MySQL(3.0):数据库 云原生数据仓库AnalyticDB MySQL(2.0): 云原生数据仓库AnalyticDB ...

自建SQL Server同步至云原生数据仓库 AnalyticDB ...

全量初始化会并发执行INSERT操作,导致目标数据库产生碎片,因此全量初始化完成后目标实例的空间比源实例的空间大。在DTS同步期间,不允许有除DTS外的数据写入目标库,否则会导致源库与目标库数据不一致。例如,有除DTS外的数据...

自建HBase迁移至云原生数据仓库 AnalyticDB MySQL 版 ...

由于全量数据迁移会并发执行INSERT操作,导致目标数据库产生碎片,因此全量迁移完成后目标数据库存储空间会比源实例的存储空间大。DTS会尝试恢复七天之内迁移失败任务。因此业务切换至目标实例前,请务必结束或释放该任务,或者...

二级索引简介

基本概念 名词 描述 索引 对数据中某些列数据的索引。索引只能用于读取数据,不能写入数据。预定义列 在创建数据时预先定义一些非主键列以及其类型,作为索引的索引列或者属性列。说明 表格存储为Schema-free模型,原则上一...

DescribeColumns-查询数据资产数据

接口说明 本接口一般用于敏感数据资产信息列数据的查看,便于用户准确的对敏感数据进行分析。注意事项 DescribeColumns 接口已修订为 DescribeColumnsV2。建议您在开发应用程序时使用较新的版本 DescribeColumnsV2。QPS 限制 本接口的...

从ECS上的自建SQL Server同步至云原生数据仓库...

DTS将以数据同步实例ID>:<源数据库名>.<源Schema名>.<源名>的格式写入值用于区分的来源,例如 dts*:dtstestdata.testschema.customer1。多归并功能基于任务级别,即不支持基于级别执行多归并。如果需要让部分执行多归并,...

Teradata迁移至云原生数据仓库 AnalyticDB PostgreSQL...

由于全量数据迁移会并发执行INSERT操作,导致目标数据库产生碎片,因此全量迁移完成后目标数据库存储空间会比源实例的存储空间大。请确认DTS对数据类型为FLOAT或DOUBLE的的迁移精度是否符合业务预期。DTS会通过 ROUND(COLUMN,...

从自建Db2迁移至RDS MySQL

本文介绍如何使用数据传输服务DTS(Data Transmission Service),将自建的Db2数据库迁移至RDS MySQL。DTS支持结构迁移、全量数据迁移以及增量数据迁移,同时使用这三种迁移类型可以实现在自建应用不停服的情况下,平滑地完成Db2数据库的...

从RDS SQL Server同步至云原生数据仓库AnalyticDB ...

DTS将以数据同步实例ID>:<源数据库名>.<源Schema名>.<源名>的格式写入值用于区分的来源,例如 dts*:dtstestdata.testschema.customer1。多归并功能基于任务级别,即不支持基于级别执行多归并。如果需要让部分执行多归并,...

DescribeColumnsV2-查询数据资产数据V2

说明 根据资产列数据命中的敏感数据识别规则的 ID,查询数据安全中心连接授权的数据资产中列的数据,敏感数据识别规则 ID 可调用 DescribeRules 接口获取。11122200 ProductCode string 否 数据资产列数据所属产品名称。取值:...

实施步骤

通过DTS实时同步PolarDB for MySQL数据到分析型数据库MySQL版...如果需要同步的数量较少且分析型数据库MySQL版结构与源差异较大,可以在分析型数据库MySQL版中提前 创建,配置同步链路 时需要把步骤7中的中 结构初始化 选项去掉即可。

RDS MySQL同步至AnalyticDB for PostgreSQL

注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较大的情况下(例如源库有大量慢SQL、存在无主键或目标库存在死锁等),可能会加重数据库压力,...

从RDS MySQL同步至云原生数据仓库AnalyticDB ...

注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较大的情况下(例如源库有大量慢SQL、存在无主键或目标库存在死锁等),可能会加重数据库压力,...

数据管理DMS逻辑同步至云原生数据仓库 AnalyticDB ...

全量初始化会并发执行INSERT操作,导致目标数据库产生碎片,因此全量初始化完成后目标实例的空间比源实例的空间大。对于级别的数据同步,请勿对源库的同步对象使用pt-online-schema-change等类似工具执行在线DDL变更,否则会导致...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 MongoDB 版 云数据库 RDS 数据库备份 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用