Delta Lake 快速开始二
创建数据库 不指定路径创建数据库，创建的数据库会存储在当前集群hive路径中%pyspark#创建数据库目录，你也可以选择自定义目录 database="db_test"spark.sql("DROP DATABASE IF EXISTS {} CASCADE".format(database))spark.sql("CREATE ...
资产全景
本文为您介绍数据资产全景的全局、流动和结构化模式。资产全景介绍 资产全景页面仅为您展示生产环境中的元数据及加工所得的应用数据，包括以下三种模式：全局模式：以星球形式为您展示存储数据量大于0的业务板块及其概要信息。流动模式：...
资产全景
本文为您介绍数据资产全景的全局、流动和结构化模式。资产全景介绍 资产全景页面仅为您展示生产环境中的元数据及加工所得的应用数据，包括以下三种模式：全局模式：以星球形式为您展示存储数据量大于0的业务板块及其概要信息。流动模式：...
JSON索引
参数说明 参数 说明 db_name 数据库名称。table_name 表名称。index_name JSON索引名称。重要 索引名称唯一，不能相同。column_name|column_name->'$.json_path' column_name：JSON索引的列。column_name->'$.json_path'：JSON索引的列及其...
初始化向量数据库
在使用 AnalyticDB PostgreSQL版 向量数据库前，需按照本文操作初始化向量数据库以及全文检索相关功能，每个实例仅需执行一次即可。所有的向量数据都存放在固定的库knowledgebase中，因此每个实例需执行一次初始化。初始化向量数据库的作用...
定制管理
当前支持功能包括：地址结构化、物流面单信息提取、门址标准化、地址归一、地址补齐、行政区划识别、邮编识别。1.打开地址 标准化控制台。2.在左侧菜单选择“定制管理”。3.点击“创建实例”可以新建一条实例干预修正。4.下拉选择项目并且...
通过 Go 客户端连接 OceanBase 数据库
为您介绍使用 Go 客户端通过代理模式连接数据库的操作。前提条件 在使用 GO 客户端时，尽量使用最新版本的客户端，最新版本客户端请详见 GitHub go 客户端仓库。引入 obkv-table-client-go 依赖，在本地 GO 仓库上执行以下命令，获取最新 ...
AUTO模式数据库与DRDS模式数据库
方法一：从5.4.16版本开始，内核提供了 create database like/as 语法，可以一键将DRDS模式数据库切换为AUTO模式，使用方法请参见 将DRDS模式数据库转换为AUTO模式数据库；方法二：在目标实例创建对应的AUTO模式数据库，在AUTO模式数据库下...
地址元素标签定义
地址结构化元素标签及其对应含义。标签 注释 prov 省级行政区划，省、自治区、直辖市 city 地级行政区划，地级市、地区、自治州等 district 县级行政区划，市辖区、县级市、县等 town 乡级行政区划，镇、街道、乡等 community 社区、行政村...
无锁结构变更
背景信息 为解决变更数据库表结构时的锁表问题，ODC V4.2.0 版本提供了无锁结构变更功能，该功能可以较好地规避因锁表以致于阻塞业务。本文档旨在介绍如何通过提交无锁变更工单实现数据库无锁结构变更。ODC 支持的在线结构变更 分类 操作 ...
DLF+EMR之统一权限最佳实践
创建数据库和表 create database db_a;create table db_a.table1(col1 string,col2 string,col3 string);create table db_a.table2(col1 string,col2 string,col3 string);create database db_b;create table db_b.table1(col1 string,col2...
无锁结构变更概览
DDL无锁变更能够有效解决结构变更时锁表的问题，较好地规避了因锁表导致业务阻塞的问题、避免了数据库原生Online DDL带来的主备延迟现象。您可在业务低峰期提交无锁变更。背景信息 在数据量大的情况下进行结构变更，需要考虑锁表的风险，锁...
什么是地址标准化
地址结构化 将地址切分23个不同地址元素，包括行政区划类、路网信息类、地点详情类、定位辅助词等非地址内容。将地址的每个要素剥离出来分类归纳，让地址清晰，有结构，更方便用于输出到应用层调用。如图所示：2.地址纠错 地址纠错是指对...
通过Kafka导入数据
默认是同步所有数据库和表 database.include.list=test table.include.list=test.test_table database.history.kafka.bootstrap.servers=localhost:9092#用于存储数据库表结构变化的 Kafka topic database.history.kafka.topic=dbhistory ...
管控模式
可视化数据查询结果呈现 Y Y Y SQL格式化 Y Y Y SQL智能提示 Y Y Y 表结构管理 表结构对比 Y Y Y 表结构编辑 Y Y Y 表结构同步 Y Y Y 数据字典导出 5个 无限制 无限制 表结构设计规范 N N Y 表结构研发流程 N N 支持跨云账号、跨数据库和自...
数据方案概览
空库初始化 支持将源数据库的表结构同步至空数据库中，实现快速同步数据库表结构。表一致性修复 用于对比不同表之间的表结构，找出差异并在目标表执行差异脚本，以保障不同表之间的表结构一致性 无锁结构变更 可以较好地规避因锁表以致于...
基于向量分析的个性化推荐系统
个性化推荐系统中数据库表结构设计 上图是个性化新闻推荐系统中分析型数据库MySQL版数据库表结构设计，包含了三张表 news、person、browses_history，分别存储新闻信息、用户基本信息、用户浏览记录。news 表 news 表存储新闻信息，包含...
添加兼容MySQL数据库的数据源
本文档介绍在DataV中添加兼容MySQL数据库数据源的方法，以及相关参数配置说明。通过兼容MySQL数据库的数据源，您可以使用旧版本的MySQL数据库作为组件的数据源。前提条件 已准备好待添加的兼容MySQL数据库数据源。操作步骤 登录 DataV控制...
订阅方案概览
源数据库 支持订阅的数据类型 配置文档 自建MySQL 5.1、5.5、5.6、5.7或8.0版本 RDS MySQL 所有版本 数据更新 结构更新 创建RDS MySQL数据订阅任务 PolarDB MySQL版 所有版本 数据更新 结构更新 创建PolarDB MySQL版数据订阅任务 PolarDB-X...
订阅方案概览
源数据库 支持订阅的数据类型 配置文档 自建MySQL 5.1、5.5、5.6、5.7或8.0版本 RDS MySQL 所有版本 数据更新 结构更新 创建RDS MySQL数据订阅任务 PolarDB MySQL版 所有版本 数据更新 结构更新 创建PolarDB MySQL版数据订阅任务 PolarDB-X...
添加兼容MySQL数据库的数据源
本文档介绍在DataV中添加兼容MySQL数据库数据源的方法，以及相关参数配置说明。通过兼容MySQL数据库的数据源，您可以使用旧版本的MySQL数据库作为组件的数据源。前提条件 已准备好待添加的兼容MySQL数据库数据源。操作步骤 登录 DataV控制...
基本概念
对于异构数据库之间的结构迁移，DTS会将源库的结构定义转换为目标库支持的结构定义，例如将Oracle数据库中的NUMBER数据类型转换为MySQL数据库中的DECIMAL数据类型。全量数据迁移 在全量数据迁移阶段，DTS会将源数据库的存量数据全部迁移到...
登录数据库
相关文档 您也可以通过其他客户端工具来登录图数据库GDB实例，更多方式如下：通过开源组件GDB Console可视化控制台登录图数据库，可视化界面，操作简单，并可根据业务需求对可视化界面进行二次开发。具体操作，请参见 通过开源组件GDB ...
功能特性
结构同步 空库初始化 支持将源数据库的表结构同步至空数据库中（数据库中不存在任何表），实现快速同步数据库表结构，适用部署多区域、多单元的数据库环境。空库初始化 表一致性修复 用于对比不同表之间的表结构，找出差异并在目标表执行...
迁移方案概览
源为TiDB的迁移方案 源为Db2 for LUW的迁移方案 源为Db2 for i（AS/400）的迁移方案 源为Teradata的迁移方案 源为自建HBase的迁移方案 源为第三方云的迁移方案 跨阿里云账号实例间迁移 说明 下表中各类自建数据库（例如自建MySQL、SQL ...
导出数据
本文将为您介绍如何导出表结构、SQL查询结果集、整个数据库。前提条件 数据库关联的安全规则已开启 结果集是否支持导出 规则（系统默认开启）。更多信息，请参见 SQL窗口-关系型数据库。具有目标数据库的查询、导出等权限。更多信息，请...
表结构发布流程化
Schema_Design-dev Schema_Design-test Schema_Design-product 环境类型 dev test product 数据库名称 dev_database test_database product_database 步骤一：配置研发规则 默认的研发流程为：设计结构（Dev）、生产发布（Product）。...
DB管理
本文为您介绍在交互式分析Hologres管理控制台的Database管理页面，如何创建并删除数据库，并为数据库选择对应的权限策略。授权数据库 您可以在DB管理页面，使用可视化方式创建数据库。登录 Hologres管理控制台，单击 前往HoloWeb，进入...
功能特性
数据库文件存储 功能集 功能 功能描述 参考文档 DBFS特性 原子写 支持DIRECT IO的原子写，需按4K，8K，16K对齐-共享读写 一份数据可共享式多点挂载并进行读写，读写可线性扩展-存储加密 通过对数据库文件存储实施加密，可以确保数据库文件...
多租户管理使用说明
技术原理如下图所示：术语 租户：租户（Tenant）为实现多租户模式所提出的概念，租户的层级结构在一个数据库实例之下，在数据库与用户之上。租户分为系统租户和普通租户：系统租户：系统租户是为了适配原有模式下用户的使用，原有数据库...
使用说明
示例：在RW1上创建一个数据库 db1 CREATE DATABASE db1 POLARDB_WRITE_NODE 1;如果需要在RW2上创建数据库 db1，把上述示例中的1换成2即可。删除在指定RW节点上创建的数据库 删除在指定RW节点上创建的数据库。语法结构如下：DROP DATABASE ...
分片集群实例连接说明
登录MongoDB数据库 获取如下信息：数据库连接地址，获取方法请参见 数据库连接地址。数据库账号，初始账号为root。重要 不建议在生产环境中直接使用root账号连接数据库。您可以根据业务需求创建用户并分配权限，详情请参见 使用DMS管理...
功能特性
结构初始化涉及的数据类型映射关系 异构数据库间的数据类型映射关系 数据校验 数据校验是DTS提供的用于监控源库与目标库数据差异的功能，支持在不停服的情况下对源库和目标库进行校验，帮助您及时发现数据和结构不一致的问题 功能集 功能 ...
副本集实例连接说明
云数据库MongoDB副本集实例分别提供了主从节点和只读节点的单独连接地址，以及用于应用程序连接的高可用ConnectionStringURI和ReadOnly ConnectionstringURI地址。本文介绍副本集实例连接地址的获取方式及连接说明。获取数据库连接地址 ...
将自建ClickHouse向企业版迁移
本文介绍如何将自建ClickHouse迁移到 云数据库 ClickHouse 企业版 集群，以及 云数据库 ClickHouse 企业版 集群之间迁移操作。Remote 函数在 SELECT 和 INSERT 查询中用于允许访问自建ClickHouse服务器，这使得迁移表只需要编写一个带有...
空库初始化
数据管理DMS 的空库初始化功能支持将源数据库的表结构同步至空数据库中（数据库中不存在任何表），实现快速同步数据库表结构，适用部署多区域、多单元的数据库环境。前提条件 支持的数据库类型如下：MySQL：RDS MySQL、PolarDB MySQL版、...
用户权限说明
目标端为 MySQL 数据库、OceanBase 数据库 MySQL 租户等数据库类型时，需要对源端待迁移数据库及 oceanbase 数据库具备 SELECT 权限。重要 仅 OceanBase 数据库 V4.0.0 及之后版本需要添加 oceanbase 数据库的 SELECT 权限。对于 VPC 内 ...
错误码表（2.0版）
18001 Not support CREATE DATABASE in db:schema 无法在该数据连接上进行CREATE DATABASE操作，请检查所用数据库连接是否正确。18002 非ADS user导致的失败信息。操作必须由ADS user进行，请确认当前使用的UMM账号是ADS用户账号。18003 NA...
支持的数据库
增量数据同步 单向同步 RDS MySQL同步至函数计算FC 云数据库SelectDB版 库表结构同步 全量数据同步 增量数据同步 单向同步 RDS MySQL同步至云数据库SelectDB版 源为PolarDB MySQL版的同步方案 重要 PolarDB-X 1.0中的数据库须基于RDS MySQL...
同步方案概览
源为自建SQL Server或RDS SQL Server的同步方案 源为自建MongoDB或云数据库MongoDB的同步方案 源为自建Redis或云数据库Tair/Redis的同步方案 源为MariaDB的同步方案 源为TiDB的同步方案 源为Db2 for LUW的同步方案 源为Db2 for i（AS/400）...
- 产品推荐
- 这些文档可能帮助您