同步数据

本文介绍了多种同步数据的方式。分析型数据库MySQL版支持多种数据加载方式,包括但不限于:通过阿里云数据传输服务DTS将MySQL/DRDS中的数据导入分析型数据库MySQL版,其中MySQL可为RDS for MySQL、其他云厂商或线上IDC的自建MySQL以及ECS自...

资源角色

可查询实例下所有数据中的数据(不包含敏感字段),提交各类数据方案与库表结构的工单。对应于审批节点中 动态计算 的DBA。实例Owner 每个实例可以设置3个实例Owner。云数据库资源默认主账号为实例Owner。非云数据库默认当前录入的云账号...

数据页面管理

在管理数据页面数据的类型分为 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六种。本文介绍数据页面各个数据功能的使用方法。数据页面分为两大模块,包括 我的数据分组 和 数据管理 页面。我的数据分组 在 我的数据分组 ...

数据页面管理

在管理数据页面数据的类型分为 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六种。本文介绍数据页面各个数据功能的使用方法。数据页面分为两大模块,包括 我的数据分组 和 数据管理 页面。我的数据分组 在 我的数据分组 ...

概述

业务挑战 大部分阿里云用户会将阿里云关系型数据库RDS、PolarDB for MySQL、MongoDB或者云服务器ECS自建数据库作为业务系统数据库,随着业务数据的增长,业务数据库存储的数据也越来越多。但RDS、PolarDB for MySQL、MongoDB或者ECS自建...

数据源和项目协同

背景信息 项目管理员创建一个项目成员后,项目成员可以创建数据源,并在项目中添加数据中的数据库后,即可进行数据库变更任务。系统管理员在 Web 版 ODC 中创建项目,并为该项目指定成员。系统管理员或者拥有新建数据源角色权限的项目...

Catalog概述

基本概念 内部数据:保存在StarRocks中的数据。外部数据:保存在外部数据源(例如,Apache Hive、Apache Iceberg和Apache Hudi)中的数据。Catalog StarRocks 2.3及以上版本支持Catalog功能,方便您轻松访问并查询存储在各类外部源的数据。...

入门概述

Web 版 OceanBase 开发者中心(OceanBase Developer Center,ODC)在提供工具能力的同时还提供了管控、协同...7 新建数据库变更 对数据中的数据进行变更。​ 完成上述步骤后,即可开始通过 Web 版 ODC 开发和管理您的 OceanBase 数据库。

Catalog概述

基本概念 内部数据:保存在StarRocks中的数据。外部数据:保存在外部数据源(例如Apache Hive、Apache Iceberg和Apache Hudi)中的数据。Catalog StarRocks 2.3及以上版本支持Catalog功能,方便您轻松访问并查询存储在各类外部源的数据。...

数据变更最佳实践

删除数据、分区、表 AnalyticDB MySQL版 有多种删除数据的方式,建议如下:数据删除频率低、基于主键为条件的删除,可通过 DELETE FROM WHERE PK='xxx' 删除数据。数据删除频率低、基于任意条件的删除,可通过 DELETE 删除数据。通过 ...

查看同步任务

DataHub DataConnector是把DataHub服务中的流式数据同步到其他云产品中的功能,目前支持将Topic中的数据实时/准实时同步到MaxCompute(ODPS)、OSS、ElasticSearch、RDS Mysql、ADS、TableStore中。用户只需要向DataHub中写入一次数据,并在...

配置同步任务中的数据来源和去向

数据过滤 同步数据的筛选条件,暂时不支持limit关键字过滤。SQL语法随着所选择的数据源不同而不同。切分键 选择SQLServer数据表中的主键作为切分键。数据去向(Writer)配置信息:配置项 说明 数据源 选择ADS,系统将自动关联 配置...

管理敏感数据

如果您需要对RDS实例中的敏感数据进行管控和脱敏,可以使用数据管理DMS提供的敏感数据保护功能。费用 请参见 敏感数据保护功能定价。功能介绍 数据管理DMS的敏感数据管理提供如下功能:提供敏感数据资产大盘,解决企业敏感数据分布的统一纳...

数据安全

SSL在传输层对网络连接进行加密,能提升通信数据的安全性和完整性,但会增加网络连接响应时间。详细介绍及使用说明,请参见 设置SSL加密。透明数据加密 云原生多模数据库 Lindorm 支持透明数据加密TDE(Transparent Data Encryption)功能...

概述

参见 入湖模板 章节,创建数据湖模板,定期将数据中的数据抽取到数据湖。参见 元数据管理 章节,定义数据湖的元数据库和表。控制台概览 控制台概览分为2个部分,左侧为主要功能区,右侧为产品主要信息,帮助用户快速上手产品。注册数据湖...

实例间的数据库复制

RDS SQL Server部分实例支持实例间复制数据库功能,您可以通过RDS控制台或者OpenAPI将一个实例中的数据库复制到另外一个实例中。前提条件 RDS实例必须满足以下条件:源实例和目标实例必须在一个阿里云账号下。源实例和目标实例的版本必须...

数据管理

在表列表中双击表名进入表管理页面,点击上方导航栏中的 数据 按钮进入数据页签,在该页签可对当前表中的数据进行查看、新增、修改和删除操作。重要 ODC 共享 Session,相同连接只有一个 Session。在 Oracle 模式下,ODC V2.3.2 之后版本...

创建元数据

使用限制 HBase、Elasticsearch或MongoDB数据中的一个数据表只能创建一个元数据。仅支持开发用户、服务项目管理员角色的用户创建元数据。元数据入口 在Dataphin首页,单击顶部菜单栏 服务。按照下图操作指引,进入 新建元数据 页面。创建...

创建元数据

使用限制 HBase、Elasticsearch或MongoDB数据中的一个数据表只能创建一个元数据。仅支持开发用户、服务项目管理员角色的用户创建元数据。元数据入口 在Dataphin首页,单击顶部菜单栏 服务。按照下图操作指引,进入 新建元数据 页面。创建...

透明数据加密概述

经过数据库身份验证的应用和用户可以继续透明地访问应用数据(不需要更改应用代码或配置),而尝试读取表空间文件中的敏感数据的OS用户以及尝试读取磁盘或备份信息的未知用户将不允许访问明文数据。透明:数据在使用过程中无感知,数据在...

添加用户和数据

单击左侧导航栏中的 数据平台。在 系统用户列表 区域,单击 添加用户。在 添加用户 面板,配置以下信息。配置 说明 授权用户 选择需要授权的阿里云账号或RAM用户。用户角色 选择授权用户的角色,该页面支持设置的角色如下:租户管理员:...

概述

DataHub数据同步功能 DataHub提供数据Sink/Source功能,即数据同步功能,DataHub支持将对应Topic中的数据 实时/准实时 的同步到第三方阿里云产品中,打通阿里云产品间的数据流通。目前支持MaxCompute(原ODPS)、分析型数据库MySQL(ADS)、...

备份恢复

云数据库MongoDB提供自动备份功能,以保证数据的完整可靠。备份功能 为保证数据的完整性和可靠性,数据库需要常规的自动备份来保障数据的可恢复性。MongoDB提供如下备份功能:快照备份:保留某一时间点磁盘的数据状态。能够做到在分钟级...

数据扫描和识别

在 DSC 扫描数据的过程,已经完成扫描的阶段性结果,会在 数据安全中心控制台 概览 页面展现。更多信息,请参见 控制台概览。DSC 对于非结构化数据源(OSS)的扫描机制是怎样的?DSC 对非结构化数据源存储的内容进行扫描,根据扫描结果...

常见问题

数据同步过程中如果源实例中的数据库名、表名或者列名中含有划线(-)会报错吗?由于ADB中不允许数据库名、表名或者列名中含有划线(-),为保证数据同步成功,系统会将中划线(-)映射为下划线(_)。如果在数据同步过程中遇到其他因数据...

云产品集成

您可以使用 DataWorks 添加 ApsaraDB For OceanBase 数据源,管理 OceanBase 数据中的数据,通过数据集成功能,实现在复杂网络环境下、丰富的异构数据源之间高速稳定的数据移动及同步能力。在 DataWorks 添加 ApsaraDB For OceanBase ...

数据标准

数据标准落标说明 数据标准落标的意义在于从源头进行数据的标准化生产,加速数据的融合与统一的效率,节省大量数据应用和处理的成本。完成以下操作实现数据标准落标:您可以在 字段编辑器 页面,编辑 中文名,输入拼音首字母即可快速检索出...

DataWorks数据服务对接DataV最佳实践

注意事项 DataWorks数据服务与DataV进行无缝对接后,无需使用DataV中的API数据源去填写一个URL调用API,直接新建一个DataWorks数据服务作为数据源,便可直接选用数据服务中的API。无需每个API都设置AppKey和AppSecret认证信息,且支持通过...

通用数据开发

数据分析与处理:完成数据的同步后,可以对MaxCompute中的数据进行加工(MaxCompute SQL、MaxCompute MR)、分析与挖掘(数据分析、数据挖掘)等处理,从而发现其价值。数据提取:分析与处理后的结果数据,需要同步导出至业务系统,以供...

功能简介

数据资产构建 数据同步 可实现离线、实时多源异构数据的便捷同步,系统提供完善的数据接入配置、任务运行监控等功能,有效保障数据接入的稳定性和可控性,满足各类平台、数据源及应用系统间的数据汇聚需求。数据查询 可探查 AnalyticDB ...

快速体验

DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力,本文以一个零售电商行业的数仓搭建实验为例,为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现,帮助您深入了解阿里云...

数据源管理常见问题

对于在跨域时遇到无法正常获取数据的情况,目前有两种解决方法:方法一:配置数据源时,勾选 服务器代理请求。说明 该方法需要您的接口可以通过外网访问并且返回时间在10s以内,因为服务器代理请求会有10s超时限制。方法二:在数据服务端...

数据源管理常见问题

对于在跨域时遇到无法正常获取数据的情况,目前有两种解决方法:方法一:配置数据源时,勾选 服务器代理请求。说明 该方法需要您的接口可以通过外网访问并且返回时间在10s以内,因为服务器代理请求会有10s超时限制。方法二:在数据服务端...

概述

脱敏方案 在数据库使用中,需要实时地从生产环境中的数据库(即生产库)获取最新的客户数据来进行报表生成、数据分析、开发测试等。但为了不泄露真实的客户个人信息(Personal Identifiable Information),需要将这些数据进行脱敏处理后...

订阅方案概览

数据订阅功能可以帮助您获取数据库的实时增量数据,您可以根据自身业务需求自由消费增量数据,并写入目标端,实现各类业务场景,例如缓存更新、业务异步解耦、异构数据数据实时同步及含复杂ETL的多种业务场景。数据订阅方案 说明 是否...

订阅方案概览

数据订阅功能可以帮助您获取数据库的实时增量数据,您可以根据自身业务需求自由消费增量数据,并写入目标端,实现各类业务场景,例如缓存更新、业务异步解耦、异构数据数据实时同步及含复杂ETL的多种业务场景。数据订阅方案 说明 是否...

管理数据分级

查看数据分级 在 数据分级 页面,查看系统中的数据分级及每个数据分级的详细信息。区域 描述 ① 搜索区 您可以根据数据分级的名称关键字,快速搜索数据分级。② 数据分类信息 为您展示数据分级、数据分级的名称、更新人、更新时间、分级...

管理数据分级

查看数据分级 在 数据分级 页面,查看系统中的数据分级及每个数据分级的详细信息。区域 描述 ① 搜索区 您可以根据数据分级的名称关键字,快速搜索数据分级。② 数据分类信息 为您展示数据分级、数据分级的名称、更新人、更新时间、分级...

数据归档

背景信息 ODC 支持定时将源数据中的数据归档至其它目标数据库中,以解决因线上数据增多影响查询性能与业务运作的问题。本文档旨在介绍如何通过提交数据归档工单实现归档数据。原理介绍 前提条件 归档的表中必须包含主键。注意事项 前置...

数据清理

背景信息 ODC 支持在源数据中的数据归档到目标数据库后,删除源数据中的数据,以提高数据库查询性能,降低在线存储成本。本文档旨在介绍如何通过提交数据清理工单实现归档数据。原理介绍 前提条件 清理的表中必须包含主键。注意事项 ...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 数据传输服务 云数据库 RDS 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用