连接全球数据库集群 各个地域的应用使用本地集群的集群地址连接到GDN,GDN会自动进行读写分离。关于如何连接数据库集群,请参见 连接数据库集群。相关API API 描述 DescribeGlobalDatabaseNetworks 查看账号下所有全球数据库网络(GDN)的...
DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力,本文以一个零售电商行业的数仓搭建实验为例,为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现,帮助您深入了解阿里云...
对于不带分区的Hudi格式,您也可使用单表离线同步方案,但无需在DataWorks数据开发模块创建离线同步任务,直接在DLF控制台中创建 关系数据库全量入湖 类型的任务即可,具体操作可参考 OSS数据进行格式转换入湖。单表离线同步 在DataWorks ...
全球数据库网络(Global Database Network,简称GDN)是由分布在同一个国家不同地域的多个 PolarDB 集群组成的网络,网络中所有集群的数据保持同步。当您的业务部署在多个地域时,利用GDN可以实现应用访问数据库的低延迟和高稳定性。本文...
同时支持接入不同引擎的云数据库、自建数据库等,均可以在DBS控制台的 数据源 中进行管理。备份完成后,您可以按需恢复数据库。说明 DBS支持接入的数据源,请参见 数据源。大型企业级备份 操作简单 管理方便 批量创建多个备份计划 方式一:...
云数据库 OceanBase 为您提供集群实例的数据库性能和主机性能监控功能,可在 OceanBase 管理控制台中查看监控数据,还支持自定义监控能力,您可按需配置常用监控指标作为自定义监控面板。查看监控数据 进入 OceanBase 管理控制台。在左侧...
更多关于GDN的文字说明,请参见如下文档:新建全球数据库和添加从集群 管理全球数据库
本文为您介绍如何在DataV中调用DataWorks的数据服务API,并将数据返回结果展示在DataV可视化应用中。前提条件 在开始本案例前,您需要首先完成 准备工作,并已经 生成了数据服务API。背景信息 警告 您必须使用HTTP协议进入DataV控制台,...
数据来源 在工作台中创建并发布的数据看板内容,会同步在此处展示,若数据看板仅编辑完成,但是未发布,则在此处不展示。如需编辑某一看板内容,请单击页面右上角的 前往可视化工作台,编辑并发布对应数据看板后,刷新当前页面即可。操作...
便于企业有效地执行数据安全管理任务,如自动发现敏感数据、数据分类分级、以及对潜在安全威胁的监测和报警。本文介绍如何使用多账号统一管理功能。使用须知 使用多账号统一管理功能的阿里云账号和被管理的阿里云账号必须同属于一个资源...
如果您需要对RDS实例中的敏感数据进行管控和脱敏,可以使用数据管理DMS提供的敏感数据保护功能。费用 请参见 敏感数据保护功能定价。功能介绍 数据管理DMS的敏感数据管理提供如下功能:提供敏感数据资产大盘,解决企业敏感数据分布的统一纳...
RemoveDBClusterFromGDN 从全球数据库网络(GDN)中移除从集群 从全球数据库网络(GDN)中移除从集群。SwitchOverGlobalDatabaseNetwork 切换全球数据库网络 切换全球数据库网络(GDN)中的主从集群。ResetGlobalDatabaseNetwork 重建GDN中...
在实时计算 Flink 版中使用 OceanBase 连接器的详细操作,请参见:什么是阿里云实时计算Flink版 在实时计算 Flink 版中使用 OceanBase 连接器 数据库管理 DMS 数据管理 DMS(Data Management)是一款支撑数据全生命周期的一站式数据管理...
本文档介绍在DataV中添加TableStore数据源的方法,以及相关参数配置说明。前提条件 已准备好待添加的TableStore数据源。添加TableStore数据源操作步骤 登录 DataV控制台。在 工作台 页面,单击 数据准备>数据源,进入 数据源 页面,单击 ...
需要注意的是,脱敏保护后的数据无法展示为原值,因此推荐用在临时查询等场景,不推荐在数据交换等场景中使用。加解密方案 Dataphin支持在数据集成中针对敏感数据进行加密或者解密。Dataphin支持常见的商密和国密,如AES、RSA、SM4等算法;...
需要注意的是,脱敏保护后的数据无法展示为原值,因此推荐用在临时查询等场景,不推荐在数据交换等场景中使用。加解密方案 Dataphin支持在数据集成中针对敏感数据进行加密或者解密。Dataphin支持常见的商密和国密,如AES、RSA、SM4等算法;...
本文档介绍在DataV中添加TableStore数据源的方法,以及相关参数配置说明。前提条件 已准备好待添加的TableStore数据源。添加TableStore数据源操作步骤 登录 DataV控制台。在 我的数据 页签中选择 数据源管理,单击 添加数据。从 类型 列表...
在Gartner 2020年全球数据库魔力象限评选中,阿里云成功进入“领导者”象限。知名市场研究机构Forrester在最新发布的数据库评估报告《The Forrester Wave™:Database-As-A-Service,Q2 2019》中将阿里云数据库列入“强劲表现者(strong ...
概述 您可以通过以下方式创建 OceanBase 开发者中心(OceanBase Developer Center,ODC)数据源:ODC 首页中创建数据源:进入 ODC 首页后,单击 新建数据源 按钮创建数据源。公有云实例中创建数据源:公有云的实例中,单击 登录数据库,...
数据域 数据域是一个较高层次的数据归类标准,是对企业业务过程进行抽象、提炼、组合的集合,是企业业务人员在使用数据时第一个分组入口,可以帮助企业业务人员快速的从海量的数据中快速圈定到自己的业务数据。数据域面向业务分析,一个...
本文介绍在DataV中添加并使用开源Elastic Search数据源的方法。前提条件 已准备好待添加的开源Elastic Search数据源。添加开源Elastic Search数据源 登录 DataV控制台。在 工作台 页面,单击 数据准备>数据源,进入 数据源 页面,单击 新建...
订阅DataHub数据进行实时计算,插入到RDS实例的目标表中。在RDS数据库中,按照源表结构创建相应的表。参考 数据存储配置白名单,配置RDS数据库白名单。由于本案例的RDS数据库位于华东1区,而流计算项目位于华东2区,所以需要在RDS数据库中...
在云数据库 OceanBase 控制台中创建集群实例之后,您可以查看名下的所有集群实例的详细信息。查看集群实例基础信息 在实例列表页面单击集群实例名称,可以进入集群实例工作台页面,您可查看指定集群实例的 付费类型、到期时间 等基本信息,...
本文介绍在DataV中添加并使用开源Elastic Search数据源的方法。前提条件 已准备好待添加的开源Elastic Search数据源。添加开源Elastic Search数据源 登录 DataV控制台。在 我的数据 页签中选择 数据源管理,单击 添加数据。从 类型 列表中...
复制 OMS 控制台 添加数据源 对话框中显示的 OceanBase 数据传输服务器的 IP 地址。在安全组详情页面的 访问规则>入方向 区域,单击 快速添加。您也可以选择 手动添加,手动输入 端口范围、授权对象 等信息。在 快速添加 对话框,粘贴复制...
点我查看示例 处,即可在面板中增加 江浙沪包邮区 层级树下钻示例内容,示例数据中包含了江浙沪的行政区域层级,具体到区县级。说明 您可以直接将该示例层级数据导出下载到本地。导入层级 单击层级树面板下方的 导入层级.json 按键,您可以...
复制 OMS 控制台 新建数据源 对话框中显示的 OceanBase 数据传输服务器的 IP 地址。在安全组详情页面的 访问规则>入方向 区域,单击 快速添加。在 快速添加 对话框中,粘贴复制的 IP 地址至 授权对象,任意选择一个 端口范围。单击 确定。
复制 OMS 控制台 添加数据源 对话框中显示的 OceanBase 数据传输服务器的 IP 地址。在安全组详情页面的 访问规则>入方向 区域,单击 快速添加。您也可以选择 手动添加,手动输入 端口范围、授权对象 等信息。在 快速添加 对话框,粘贴复制...
异地灾备与异地多活是全球数据库网络(Global Database Network,简称GDN)中两种典型的应用场景。本文介绍这两种典型场景的业务架构及部署流程。异地灾备 通过异地灾备实现跨地域高可用,提升数据安全性和系统可用性。当发生机房或数据...
通过Kettle将关系型数据库、Hbase等NoSQL数据源,以及Excel、Access中的数据导入分析型数据库MySQL版中,详细操作步骤请参见 使用kettle将本地数据导入分析型数据库MySQL版。通过 Logstash 插件将采集到的日志等数据等实时写入分析型数据库...
测试数据构建 测试数据结构可以在频繁的数据准备过程中确保数据安全、保障数据离散型、提高生产效率。数据库克隆 数据库克隆功能提供MySQL数据库的克隆功能。集成与开发(DTS)数仓开发 数仓开发以数据库为主要计算引擎,融合数据库生态中...
本文介绍如何调整RDS全球多活数据库集群中双向同步实例的链路规格。操作步骤 访问 全球多活数据库集群 页面。在全球多活数据库集群列表页面,单击目标集群右侧 操作 列中的 更多>DTS实例规格升降配。根据 RDS单元节点地域 定位至目标双向...
说明 以业务数据库数据同步到MaxCompute数据仓库为例,当有大量的数据存储在数据库系统里,需要将数据库中的全量及增量数据同步到MaxCompute进行数仓分析时,数据集成传统方式是通过全量同步或者依赖数据库表中的 modify_time 等字段进行...
数据库则使用来源数据update更新目标表已有数据行,在目标表存在多个数据约束的情况下,数据替换可能会失败并产生脏数据 如果写出数据和目标存储已有数据没有发生数据约束,数据库则将来源数据插入(和insert into行为限制一致)至目标存储...
数据库开发 结构设计 在新项目、新需求或者优化等业务场景中,一般会涉及到新建表、修改表等结构的变更操作,此时可以使用DMS的结构设计功能。库表同步 库表同步功能可以在多套不同环境之间(如测试环境、生产环境)进行表结构的对比,从而...
高效压缩存储 TSDB 使用高效的数据压缩技术,将单个数据点的平均使用存储空间降为1~2个字节,可以降低90%存储使用空间,同时加快数据写入的速度。时序数据计算能力 TSDB 提供专业全面的时序数据计算函数,支持降采样、数据插值和空间聚合...
在场景编辑器内配置数据面板时,您还可以使用 空间构建数据源 获取空间地图数据,具体步骤如下:在图层配置面板中选择 数据 页签,单击面板下方的 数据源类型 下拉框,选择 空间构建数据源。在面板下方的 数据项目 下拉列表中,选择一个...
主集群(Primary Cluster)全球数据库网络(GDN)中只有一个集群拥有读写权限,这个可读可写的集群叫做主集群。从集群(Secondary Cluster)全球数据库网络(GDN)中从主集群同步数据的从属集群。节点(Node)PolarDB 集群由多个物理节点...
支持的数据库部署位置(接入方式)阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...
在场景编辑器内配置数据面板时,您还可以使用 空间构建数据源 获取空间地图数据,具体步骤如下:在图层配置面板中选择 数据 页签,单击面板下方的 数据源类型 下拉框,选择 空间构建数据源。在面板下方的 数据项目 下拉列表中,选择一个...