客户端FAQ
常见问题 Q：JDBC读取数据报错：java.lang.NumberFormatException:For input string:"xxxx"A：尝试按照普通数据类型解析密文数据，例如 getInt/getBigDecimal/getBoolean/getLong/getFloat/getDouble，由于密文不符合普通数据类型格式要求...
功能发布记录（2024年）
2024.1.25 所有地域 所有DataWorks用户 数据脱敏能力概述 数据保护伞概述 数据地图支持展示实时同步链路数据血缘 数据地图新增解析及展示如下实时同步链路的数据血缘：MySQL实时写入MaxCompute/Hologres Kafka实时写入MaxCompute/Hologres ...
管理USER用户
说明 您只能在自己创建的用户数据库中创建普通用户，无法在系统数据库中创建用户。前提条件 实例需要为RDS SQL Server 2012及以上版本的实例。已创建用户数据库。关于创建数据库的命令，请参见 SQL命令管理数据库。已创建LOGIN用户，并登录...
补数据
为什么补数据报错调起的节点运行时间不在所选业务时间范围内？为什么有节点选择了补数据，但是没有生成补数据实例？周、月任务如何执行补数据操作 补数据功能说明 补数据支持补历史一段时间区间的数据或者需要补未来一段时间的数据时，可以...
库表结构优化
库表结构优化功能的调优建议是根据用户数据和查询特征的历史数据分析得到的。当用户数据和查询特征稳定，则相关建议的有效性可持续；当用户数据和查询特征发生剧烈变化，则由历史数据分析得到的调优建议的参考价值明显下降。在使用该功能前...
应用场景
但各个获客渠道的用户数据分散，会员管理体系单一，推荐准确度不高，会员营销方式有限。解决方案：数据融合：通过数据引入功能，将各渠道数据沉淀至数据仓库内，丰富基础数据。数据建模：通过数据建模及代码自动化生成功能，以会员为中心，...
功能发布记录（2023年）
2023.08.24 华北2（北京政务云）华东2（上海金融云）华东2（上海）华东1（杭州）华北2（北京）华南1（深圳）西南1（成都）中国（香港）新加坡 美国（硅谷）德国（法兰克福）印度尼西亚（雅加达）DataWorks企业版及以上版本用户 数据治理...
问题汇总
为什么补数据报错调起的节点运行时间不在所选业务时间范围内？为什么有节点选择了补数据，但是没有生成补数据实例？等待资源 为什么会出现等待资源？为什么任务一直在等待gateway调度资源？为什么数据集成任务一直显示wait？为什么会空跑 ...
产品概述
该工具支持快速展示和实时分析海量时空数据，同时还能通过SQL分析工具对用户数据库中的空间数据进行多维度的灵活分析。该工具能够帮助用户快速构建自己的地理分析地图，挖掘时空数据的价值，并支持商业决策和科学研究等领域的应用，详情请...
配置MySQL输入
MySQL输入基于Binlog实时订阅的方式，实时读取您配置的MySQL数据库表数据。...前提条件 配置MySQL输入之前，请确保已完成以下规划与准备工作。...已开启MySQL Binlog服务，详情请参见 开启MySQL Binlog。...实时同步MySQL数据报错
数据集成调度策略说明
源表不能存在外键约束，否则可能导致数据迁移失败（可能在目标库中先更新有外键约束的子表，后更新附表，导致子表插入新数据报错）。无法迁移被物理删除的数据（例如通过DELETE、TRUNCATE命令删除）。说明 如果存在无主键的表，DTS会将整条...
产品优势
安全可靠 无需暴露数据库公网地址，确保用户数据资产的安全和稳定。本地网关启动时，需要在控制台生成一个临时令牌，该令牌会在网关启动时通过加密链路发送至服务端进行验证，以确保该网关仅供该用户使用。令牌在15分钟内过期，且只验证1次...
透明数据加密概述
RDS PostgreSQL支持透明数据加密（Transparent Data Encryption，简称TDE），对数据文件进行实时加密和解密，保护用户数据隐私，本文介绍透明数据加密的基本概念和加密原理。什么是透明数据加密 透明数据加密指对数据文件执行实时I/O加密和...
权限管理
当需要授予用户数据库和表的查询、导出及变更权限，您可参考本文档进行操作。注意事项 实例的管控模式为安全协同时，可以进行查看数据库、表等操作。非安全协同模式的实例，仅有登录实例的权限。由数据Owner管理的数据库、表，数据Owner...
配置安全规则
数据库用户 数据库所使用的用户名，可添加多个用户名。客户端工具 客户端使用的工具名称，可添加多个客户端工具。MAC地址 访问数据库设备的MAC地址。操作系统用户 访问数据库所使用的操作系统名称。主机名 访问数据库所使用的计算机主机名...
DataWorks On CDP/CDH使用说明
CDP是跨平台收集和整合客户数据的公共数据平台，可帮助您收集实时数据，并将其构建为单独的用户数据使用。您可在DataWorks中注册CDH及CDP集群，基于业务需求进行相关任务开发、调度、数据地图（元数据管理）和数据质量等一系列的数据开发和...
连接失败常见报错
为什么副本集实例写入数据报错：NotMaster、NotWritablePrimary或Time out after 30000ms while waiting for a server that matches writableServerSelector？reason:TopologyDescription { type:'ReplicaSetNoPrimary',当前连接的副本集...
构建数据仓库
场景说明 用户数据来源丰富，包括来自云端的数据、外部数据源，数据统一沉淀，完成数据清洗、建模。用户的应用场景复杂，对非结构化的语音、自然语言文本进行语音识别、语义分析、情感分析等，同时融合结构化数据搭建企业级的数据管理平台...
概述
以下是常见的应用场景：数据存储与计算安全场景：在不可信环境中（如第三方平台），Spark全密态计算引擎 可以为关键的数据分析应用（如投资和财务分析）提供数据保护，保证用户数据在存储与计算过程中的安全，降低明文数据泄露风险。...
什么是数据库网关
DG的优势如下：安全可靠 不暴露数据库公网地址，确保用户数据资产的安全和稳定。本地网关启动时，需要在控制台生成一个临时令牌，该令牌会在网关启动时通过加密链路发送至服务端进行验证，以确保该网关仅供该用户使用。令牌在15分钟内过期...
什么是数据库网关
DTS有如下多种优势：安全可靠：无需暴露数据库公网地址，确保用户数据资产的安全和稳定；本地网关启动时，需要在控制台生成一个临时令牌，该令牌会在网关启动时通过加密链路发送至服务端进行验证，以确保该网关仅供该用户使用。令牌在15...
应用场景
数据库备份DBS 提供数据全量备份、增量备份、异地备份以及数据恢复等功能，帮助您实现多种典型应用场景。...降低运维成本：备份加固，ISV可直接购买DBS，为最终的用户数据提供保护，有效规避数据丢失风险，降低运维成本。
数据权限概述
数据湖权限支持配置数据库、数据表、数据列、函数四种维度细粒度权限。下面针对不同的数据操作，对所需要配置的权限进行说明，并对Owner权限的定义和权限鉴定方式进行详细说明。权限设置 权限设置主要为数据目录（Catalog）开启和关闭权限...
外部表概述
对于MaxCompute表外的各种用户数据（包括文本以及各种非结构化的数据），您需要通过不同工具导入MaxCompute表再进行计算。以OSS为例，如果您需要在MaxCompute中处理OSS上的数据，通常有以下两种方式：通过OSS SDK或者其他工具从OSS下载数据...
设备协议
设备协议模块用于为交通设备创建数据的接入、转化（标准化）和下发协议。设备协议模块可创建的协议以及各协议的功能如下：设备采集协议：将设备数据自动推送到云控平台数据采集端口。数据转化协议：将数据采集协议推动上来的设备数据转化为...
OpenAPI列表
会进行数据回刷：影响历史数据 会进行节点的数据回刷，造成计算费用以及存储费用。GetPhysicalNode 查询物理调度节点。GetPhysicalNodeByOutput 根据输出名查询物理节点。仅支持离线代码节点及集成任务节点。GetPhysicalNodeContent 查询...
项目协同管理
背景信息 Web 版 ODC V4.2.0 支持拥有创建项目权限的用户创建项目和添加项目成员，成员可以在项目中添加和变更数据库。本篇文档旨在介绍如何通过项目协同实现数据库变更。原理介绍 ODC 系统管理员授予用户创建项目的角色后，该用户创建项目...
S3协议数据压缩
Lindorm S3兼容协议提供了桶（Bucket）级别的压缩功能，可以在上传文件时对桶内的所有对象进行压缩。本文介绍如何使用S3兼容协议数据压缩功能。前提条件 宽表引擎为2.4.3.2及以上版本。如何查看或升级当前版本，请参见 宽表引擎版本说明 和...
采集数据
新建EMR表 新建两张表 insert_ods_user_info_d_emr 表、insert_ods_raw_log_d_emr 表，分别用于查询同步后的原始的RDS用户数据和OSS日志数据。在 数据开发 页面打开新建的业务流程，右键单击 EMR，选择 新建节点>EMR Hive。在 新建节点 ...
计费方式
数据传输服务DTS（Data Transmission Service）不同实例支持的计费方式不同，本文详细介绍了DTS产品的计费方式。说明 DTS产品的计费项，请参见 计费项。计费方式 支持的实例 说明 包年包月 数据订阅实例 数据同步实例 也称为预付费，即在...
数据集成：全领域数据汇聚
DataWorks的数据集成功能模块是稳定高效、弹性伸缩的数据同步平台，致力于提供复杂网络环境下、丰富的异构数据源之间高速稳定的数据移动及同步能力。功能概述 DataWorks数据集成支持离线同步、实时同步，以及离线和实时一体化的全增量同步...
离线同步常见问题
读取PostgreSQL数据报错：org.postgresql.util.PSQLException:FATAL:terminating connection due to conflict with recovery 写入/读取MySQL报错：Application was streaming results when the connection failed.Consider raising value ...
定价公式及退费说明
总租户实例数据盘价格=目录单价*全量副本个数/3*时长 说明 集群实例总价=总计算节点价格+总数据盘价格+总日志盘价格 租户实例总价=总计算节点价格（预付费）+总租户实例数据盘价格（后付费）退费逻辑 根据计费方式不同，云数据库 OceanBase...
产品计费
V3计费方式简介 公共云 计费项 计费方式 中国内地、马来西亚（吉隆坡）和印度尼西亚（雅加达）定价 中国香港和新加坡定价 说明 数据引入 按量计费 0.24元/GB 0.36元/GB 数据引入到存储（包含采集、传输和写入整个过程）时收取该费用。...
使用公共资源组
开通DataWorks时，DataWorks自动为您提供公共资源组（包括公共调度资源组、公共数据集成（调试）资源组、公共数据服务资源组），可用于数据开发、运行测试等操作。公共资源组被多个租户共享，高峰期租户间可能会存在抢占资源的情况。本文为...
功能特性
计算 MaxCompute向用户提供了多种经典的分布式计算模型，提供TB、PB、EB级数据计算能力，能够更快速的解决用户海量数据计算问题，有效降低企业成本。功能集 功能 功能描述 参考文档 SQL开发 DDL语句 DDL语句 DDL DML操作 DML操作 DML操作 ...
绑定或解绑RAM用户与数据库账号
AnalyticDB MySQL 湖仓版（3.0）支持绑定RAM用户与数据库普通账号。绑定后，您可以通过RAM用户在 AnalyticDB MySQL 控制台进行SQL开发，也可以通过数据库普通...在页面左上角，选择集群所在地域。...在 湖仓版（3.0）页签下，单击目标 集群ID。...
绑定或解绑RAM用户与数据库账号
AnalyticDB MySQL 湖仓版（3.0）支持绑定RAM用户与数据库普通账号。绑定后，您可以通过RAM用户在 AnalyticDB MySQL 控制台进行SQL开发，也可以通过数据库普通...在页面左上角，选择集群所在地域。...在 湖仓版（3.0）页签下，单击目标 集群ID。...
数据传输费用（公网下载）
本文介绍MaxCompute中数据下载计费规则。MaxCompute仅对公网的下载数据进行收费，并按照下载的数据大小按量计费。MaxCompute会在第二天给出您的下载费用账单，您可以进入 费用中心 查看。下载计费规则如下。计费公式 价格 说明 一次下载...
添加用户和数据源
本文介绍如何在企业数据智能平台添加用户以及数据源。注意事项 请使用角色为 租户管理员 的账号进行 添加用户 和 添加数据源 操作。如果您是第一次使用企业数据智能平台，请使用阿里云账号进行 添加用户 和 添加数据源 操作。添加用户 登录...
- 产品推荐
- 这些文档可能帮助您