数据迁移与同步FAQ
什么是数据迁移、数据同步？DTS的数据迁移与数据同步工作原理是什么？DTS的数据迁移与数据同步有什么区别？使用DTS遇到预检查报错，如何解决？什么是数据迁移、数据同步？数据迁移：将Redis数据库中的数据（即键值对）迁移至另一个Redis...
云产品集成
在 DataV 添加 OceanBase for MySQL 数据源的详细操作，请参见：什么是DataV数据可视化 配置数据库白名单 添加OceanBase for MySQL数据源 Quick BI 数据分析与展现 Quick BI 是一款全场景数据消费式的BI平台，秉承全场景消费数据，让业务...
A100售后支持相关问题
说明 RAM用户授权覆盖的范围是针对整个数据库审计服务的读写行为进行授权，暂不支持对已经配置到数据库审计服务里面的单个数据库（包括RDS数据库和自建ECS数据库）添加RAM用户授权。单个数据库是否为RAM用户授权，不影响该RAM用户使用数据...
A100使用指南
用户指南访问入口 功能模块 操作指南链接 管理数据库审计实例 启用数据库审计实例 配置数据库审计实例 管理数据库审计实例的标签 管理数据库 登录数据库审计系统 添加数据库实例 部署Agent程序 查看SQL语句存储空间用量 开启系统管理员和...
库表结构优化
库表结构优化功能的调优建议是根据用户数据和查询特征的历史数据分析得到的。当用户数据和查询特征稳定，则相关建议的有效性可持续；当用户数据和查询特征发生剧烈变化，则由历史数据分析得到的调优建议的参考价值明显下降。在使用该功能前...
新建用户标签数据集
用户标识是用户在该数据集中的唯一标志，可以唯一确定一个用户。用户标识类型为用户标识对应的ID类型，当受众圈选时，圈选的默认ID类型即为这里设置的用户标识类型。ID类型支持OneID、UnionID、手机号码、电子邮箱、淘宝ID、淘宝昵称、淘宝...
配置数据源网络
spark.dla.eni.enable":"true","spark.dla.eni.vswitch.id":"vsw-bp17jqw3lrrobn6y*","spark.dla.eni.security.group.id":"sg-bp163uxgt4zandx*",} } 说明 spark.dla.eni.enable 取值为 true 时，表示启用访问用户VPC功能，挂载用户数据源...
Dataphin智能数据建设与治理试用服务协议
协议版本生效日期：2022年11月22日 本协议是 Dataphin智能数据建设与治理（简称“Dataphin”）与您就 Dataphin 提供的免费试用服务的相关事项所订立的有效合约。1.免费试用内容说明 1.1 免费试用次数：每个 UID 仅可开通 1 次免费试用。1.2...
逻辑数仓
名词解释 名词 描述 逻辑数仓 逻辑数仓是架构在用户数据源基础上的一个虚拟数仓，由数据源、虚拟库和逻辑视图组成，并提供了虚拟库管理界面，以及视图的管理和查询界面。用户可在逻辑数仓中直接跨库查询数据，也可以创建和管理虚拟库并基于...
冷热分离
背景信息 在海量大数据场景下，一张表中的部分业务数据随着时间的推移仅作为归档数据或者访问频率很低，同时这部分历史数据体量非常大，比如订单数据或者监控数据，降低这部分数据的存储成本将会极大的节省企业的成本。因此，如何以极简的...
基本概念
概念 说明 地域 地域（Region）指的是用户所购买的云数据库MongoDB实例的服务器所处的地理位置。用户需要在开通云数据库MongoDB实例时指定地域，购买实例后暂不支持更改。在购买云数据库MongoDB实例时，需要搭配阿里云服务器ECS使用，云...
配置数据保护规则
授予用户临时完全访问权限 出于易用性考虑，为方便用户进行临时明文数据运维，全密态数据库为用户提供了授权用户 fullAccess 权限访问的选择，被授予该权限的用户将以明文方式访问数据库：此时数据保护规则对用户不生效，被授权用户可以在...
数据源权限管理
什么是私有模式的数据源？哪些用户能够收回数据源的分享权限？如何检查数据源分享关系的移除、关联情况？分享数据源后，其资源组的连通状态是否会被同步分享？分享数据源后，引用过该数据源的任务关联信息是否会被同步分享？哪些角色可以...
常见问题
云数据库Redis版与Redis是什么关系？云数据库Redis版是否存在CPU处理能力、带宽和连接数等限制？单个实例有多少个数据库？云数据库Redis版是否都有主从节点？云数据库Redis版能否配置从节点数量？云数据库Redis版是否开放了从节点？云数据...
冷数据归档常见问题
冷数据文件的格式是什么？目前支持CSV、IBD 和ORC格式。如何判断当前表或分区是否归档成功？归档完成后，您可以通过以下两种方式来查看表或分区是否归档成功：执行 SHOW CREATE TABLE table_name;命令查看表结构信息，以此来确认表或者分区...
数据库管理
以Database为粒度的时序数据管理功能 Database是时序表的集合，用户可以根据业务需求将拥有相同业务背景的时序表保存在一起，从而实现数据隔离。另一方面，Lindorm时序引擎的一系列功能也都是以Database为粒度提供给用户使用的。包括以下...
HTTP API 概览
API 描述/api/put 写入数据/api/query 查询数据/api/query/last 查询时间线最新数据点/api/mput 多值写入/api/mquery 多值查询/api/query/mlast 多值查询最新数据点/api/suggest 查询 Metric,Tagk,Tagv，Field/api/dump_meta 查询 Tagk 下...
oracle_fdw
您可以使用oracle_fdw插件与外部的Oracle数据库进行交互。前提条件 oracle_fdw依赖于Oracle Instant Client的动态链接库与Oracle数据库服务器进行交互。可以与oracle_fdw插件协同工作的Oracle Instant Client版本如下所示：11.2 12.1、12.2...
常见问题
支持的数据库部署位置（接入方式）阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...
我的数据
方式一：控制台转交数据表 在数据地图 我的数据>我拥有的数据 页面中，可以看到您当前拥有的数据表，在表格下方有对数据表的批量操作。若有多张数据表需要转交，可使用 批量转交 操作。选择需要转交的表，单击 批量转交。在 批量转交 ...
冷数据归档备份与恢复
而归档到OSS的冷数据和InnoDB热数据，都是用户的实例数据，所以无论数据以什么形式存在，整个数据库实例都应该被视为一个整体来做备份恢复方案，为此我们对归档OSS的冷数据设计了一套完整的备份与恢复方案。技术原理 针对于包含冷数据的...
DataV数据可视化服务协议
本服务协议是阿里云计算有限公司（简称“阿里云”）与您就DataV数据可视化服务（简称DataV服务）的相关事项所订立的有效合约。您通过盖章、网络页面点击确认或以其它方式选择接受本服务协议，或实际使用阿里云提供的DataV服务，即表示您与...
DataV数据可视化服务协议
本服务协议是阿里云计算有限公司（简称“阿里云”）与您就DataV数据可视化服务（简称DataV服务）的相关事项所订立的有效合约。您通过盖章、网络页面点击确认或以其它方式选择接受本服务协议，或实际使用阿里云提供的DataV服务，即表示您与...
配置MySQL输入
MySQL输入基于Binlog实时订阅的方式，实时读取您配置的MySQL数据库表数据。...前提条件 配置MySQL输入之前，请确保已完成以下规划与准备工作。...已开启MySQL Binlog服务，详情请参见 开启MySQL Binlog。...实时同步MySQL数据报错
概述
以下是常见的应用场景：数据存储与计算安全场景：在不可信环境中（如第三方平台），Spark全密态计算引擎 可以为关键的数据分析应用（如投资和财务分析）提供数据保护，保证用户数据在存储与计算过程中的安全，降低明文数据泄露风险。...
功能发布记录（2022年）
2022.7.2 华东1（杭州），华东2（上海），华北2（北京），华北3（张家口），华南1（深圳），西南1（成都），中国香港 所有DataWorks用户 数据开发概述 2022-6 功能名称 功能描述 发布时间 发布地域 使用客户 相关文档 数据治理中心全面开放...
数据管理
数据管理DMS是一种集数据管理、结构管理、用户授权、安全审计、数据趋势、数据追踪、BI图表、性能与优化和服务器管理于一体的数据管理服务。
基础版Spark全密态计算引擎使用示例
AnalyticDB MySQL 湖仓版（3.0）基础版的Spark全密态计算引擎可以加密敏感数据，并将数据以密文的形式传输和存储，只有密钥拥有者才能解密数据，避免数据泄露。本文 以云数据库RDS MySQL例，介绍使用基础版Spark全密态计算引擎加密数据，...
常见报错
报错概览 配置备份计划时常见报错 源库测试连接失败 备份恢复预检查时常见报错 源库连接性检查失败 数据库权限检查失败 OSS检查失败 源库binlog开启检查失败 源库binlog模式检查失败 源库binlog_row_image是否为FULL检查失败 源库server_id...
ApsaraDB For OceanBase数据源
ApsaraDB for OceanBase数据源提供读取和写入ApsaraDB for OceanBase数据的双向功能，您可以使用ApsaraDB for OceanBase数据源配置同步任务同步数据。本文为您介绍DataWorks的ApsaraDB For Oceanbase数据同步能力支持情况。支持的版本 离线...
功能特性
数据迁移 数据迁移功能帮助您实现同构或异构数据源之间的数据迁移，适用于数据上云迁移、阿里云内部跨实例数据迁移、数据库拆分扩容等业务场景 功能集 功能 功能描述 参考文档 同构迁移 逻辑迁移 支持同构数据库间的数据迁移。自建MySQL...
任务运行失败
解决方案：该报错为FTP Check节点检测FTP数据源中Done文件不存在的预期报错，收到该报错时，DataWorks不会触发启动FTP Check节点的下游任务。报错：no available machine resources under the task resource group，该如何处理？问题现象运...
导入数据
使用场景 表数据迁移 表数据备份 表数据分析 前提条件 数据库类型如下：数据库类型 关系型数据库 MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB分布式版、AnalyticDB MySQL版、其他来源MySQL。SQL Server：RDS SQL Server、...
数据导入
当您需要将大批量数据导入至数据库时，可以使用数据管理DMS提供的数据导入功能，导入SQL、CSV、Excel类型的文件。前提条件 数据库类型如下：关系型数据库 MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB分布式版、AnalyticDB ...
采集数据
新建两个离线同步节点 ods_raw_log_d、ods_user_info_d，用于后续同步MySQL用户数据与OSS网站访问日志数据，再新建虚拟节点 WorkShop_Start 统一管理该业务流程。本阶段仅涉及数据采集业务流程，不涉及具体同步任务配置。1、新建业务流程 ...
采集数据
新建EMR表 新建两张表 insert_ods_user_info_d_emr 表、insert_ods_raw_log_d_emr 表，分别用于查询同步后的原始的RDS用户数据和OSS日志数据。在 数据开发 页面打开新建的业务流程，右键单击 EMR，选择 新建节点>EMR Hive。在 新建节点 ...
Navicat数据可视化
当您希望通过Navicat进行高效的 云数据库 SelectDB 版 可视化管理时，本文档提供了连接SelectDB实例的操作步骤，帮助您快速提升数据库操作的便捷性和效率。前提条件 根据客户端网络环境配置 云数据库 SelectDB 版 实例网络：客户端位于阿里...
半结构化分析
JSON格式数据在业务上也可以用text类型来存储，但是使用JSON/JSONB数据类型会在用户写入数据时对输入做JSON规则校验，避免不合法JSON数据写入。同时 AnalyticDB PostgreSQL版 提供一些列特定的JSON化函数，让用户可以对这些数据做出一些...
Tunnel SDK常见问题
问题类别 常见问题 Tunnel SDK Upload 使用Tunnel SDK上传数据时，上传的数据可以自动分配到各个分区吗？使用Tunnel SDK上传数据时，编写完UDF打成JAR包后上传，对JAR包大小有要求吗？使用Tunnel SDK上传数据时，是否有分区数量限制？使用...
透明数据加密概述
RDS PostgreSQL支持透明数据加密（Transparent Data Encryption，简称TDE），对数据文件进行实时加密和解密，保护用户数据隐私，本文介绍透明数据加密的基本概念和加密原理。什么是透明数据加密 透明数据加密指对数据文件执行实时I/O加密和...
- 产品推荐
- 这些文档可能帮助您