客户端FAQ
常见问题 Q：JDBC读取数据报错：java.lang.NumberFormatException:For input string:"xxxx"A：尝试按照普通数据类型解析密文数据，例如 getInt/getBigDecimal/getBoolean/getLong/getFloat/getDouble，由于密文不符合普通数据类型格式要求...
功能发布记录（2024年）
2024.1.25 所有地域 所有DataWorks用户 数据脱敏能力概述 数据保护伞概述 数据地图支持展示实时同步链路数据血缘 数据地图新增解析及展示如下实时同步链路的数据血缘：MySQL实时写入MaxCompute/Hologres Kafka实时写入MaxCompute/Hologres ...
管理USER用户
说明 您只能在自己创建的用户数据库中创建普通用户，无法在系统数据库中创建用户。前提条件 实例需要为RDS SQL Server 2012及以上版本的实例。已创建用户数据库。关于创建数据库的命令，请参见 SQL命令管理数据库。已创建LOGIN用户，并登录...
补数据
为什么补数据报错调起的节点运行时间不在所选业务时间范围内？为什么有节点选择了补数据，但是没有生成补数据实例？周、月任务如何执行补数据操作 补数据功能说明 补数据支持补历史一段时间区间的数据或者需要补未来一段时间的数据时，可以...
库表结构优化
库表结构优化功能的调优建议是根据用户数据和查询特征的历史数据分析得到的。当用户数据和查询特征稳定，则相关建议的有效性可持续；当用户数据和查询特征发生剧烈变化，则由历史数据分析得到的调优建议的参考价值明显下降。在使用该功能前...
应用场景
但各个获客渠道的用户数据分散，会员管理体系单一，推荐准确度不高，会员营销方式有限。解决方案：数据融合：通过数据引入功能，将各渠道数据沉淀至数据仓库内，丰富基础数据。数据建模：通过数据建模及代码自动化生成功能，以会员为中心，...
功能发布记录（2023年）
2023.08.24 华北2（北京政务云）华东2（上海金融云）华东2（上海）华东1（杭州）华北2（北京）华南1（深圳）西南1（成都）中国（香港）新加坡 美国（硅谷）德国（法兰克福）印度尼西亚（雅加达）DataWorks企业版及以上版本用户 数据治理...
产品概述
结合阿里云强大的安全防护体系，全密态数据库能够有效防御来自云平台外部和内部的安全威胁，时刻保护用户数据，让云上数据成为用户的私有资产。全密态数据库如何保证数据不在云端泄漏？数据是在客户端时，用户用自己的密钥加密后发送给云...
产品概述
结合阿里云强大的安全防护体系，全密态数据库能够有效防御来自云平台外部和内部的安全威胁，时刻保护用户数据，让云上数据成为用户的私有资产。全密态数据库如何保证数据不在云端泄漏？数据是在客户端时，用户用自己的密钥加密后发送给云...
产品概述
结合阿里云强大的安全防护体系，全密态数据库能够有效防御来自云平台外部和内部的安全威胁，时刻保护用户数据，让云上数据成为用户的私有资产。全密态数据库如何保证数据不在云端泄漏？数据是在客户端时，用户用自己的密钥加密后发送给云...
功能概述
结合阿里云强大的安全防护体系，全密态数据库能够有效防御来自云平台外部和内部的安全威胁，时刻保护用户数据，让云上数据成为用户的私有资产。全密态数据库如何保证数据不在云端泄露？全密态数据库在对返回查询结果中包含的被保护数据始终...
问题汇总
为什么补数据报错调起的节点运行时间不在所选业务时间范围内？为什么有节点选择了补数据，但是没有生成补数据实例？等待资源 为什么会出现等待资源？为什么任务一直在等待gateway调度资源？为什么数据集成任务一直显示wait？为什么会空跑 ...
产品概述
该工具支持快速展示和实时分析海量时空数据，同时还能通过SQL分析工具对用户数据库中的空间数据进行多维度的灵活分析。该工具能够帮助用户快速构建自己的地理分析地图，挖掘时空数据的价值，并支持商业决策和科学研究等领域的应用，详情请...
权限说明
授予用户数据湖admin/super_administrator角色。参考 角色管理。授予用户dlf-dss权限，例如：dlf-dss:BatchGrantPermissions+dlf-dss:SelectTable表示该用户可以授予所有表的select权限给其他用户 问题三：调用控制类API无权限（例如权限...
配置MySQL输入
MySQL输入基于Binlog实时订阅的方式，实时读取您配置的MySQL数据库表数据。...前提条件 配置MySQL输入之前，请确保已完成以下规划与准备工作。...已开启MySQL Binlog服务，详情请参见 开启MySQL Binlog。...实时同步MySQL数据报错
数据集成调度策略说明
源表不能存在外键约束，否则可能导致数据迁移失败（可能在目标库中先更新有外键约束的子表，后更新附表，导致子表插入新数据报错）。无法迁移被物理删除的数据（例如通过DELETE、TRUNCATE命令删除）。说明 如果存在无主键的表，DTS会将整条...
产品优势
安全可靠 无需暴露数据库公网地址，确保用户数据资产的安全和稳定。本地网关启动时，需要在控制台生成一个临时令牌，该令牌会在网关启动时通过加密链路发送至服务端进行验证，以确保该网关仅供该用户使用。令牌在15分钟内过期，且只验证1次...
透明数据加密概述
RDS PostgreSQL支持透明数据加密（Transparent Data Encryption，简称TDE），对数据文件进行实时加密和解密，保护用户数据隐私，本文介绍透明数据加密的基本概念和加密原理。什么是透明数据加密 透明数据加密指对数据文件执行实时I/O加密和...
权限管理
当需要授予用户数据库和表的查询、导出及变更权限，您可参考本文档进行操作。注意事项 实例的管控模式为安全协同时，可以进行查看数据库、表等操作。非安全协同模式的实例，仅有登录实例的权限。由数据Owner管理的数据库、表，数据Owner...
资源组说明
资源组分类 资源组是用于执行具体任务的服务，如接收调度引擎的指令执行SQL任务、数据同步任务，也包括按...资源组类型 支持云资源内网地址 用户数据是否出VPC 使用限制 系统资源组 否（部分资源支持VPC网络打通）否 有 自定义资源组 是 是 无
资源组说明
资源组分类 资源组是用于执行具体任务的服务，如接收调度引擎的指令执行SQL任务、数据同步任务，也包括按...资源组类型 支持云资源内网地址 用户数据是否出VPC 使用限制 系统资源组 否（部分资源支持VPC网络打通）否 有 自定义资源组 是 是 无
配置安全规则
数据库用户 数据库所使用的用户名，可添加多个用户名。客户端工具 客户端使用的工具名称，可添加多个客户端工具。MAC地址 访问数据库设备的MAC地址。操作系统用户 访问数据库所使用的操作系统名称。主机名 访问数据库所使用的计算机主机名...
DataWorks On CDP/CDH使用说明
CDP是跨平台收集和整合客户数据的公共数据平台，可帮助您收集实时数据，并将其构建为单独的用户数据使用。您可在DataWorks中注册CDH及CDP集群，基于业务需求进行相关任务开发、调度、数据地图（元数据管理）和数据质量等一系列的数据开发和...
连接失败常见报错
为什么副本集实例写入数据报错：NotMaster、NotWritablePrimary或Time out after 30000ms while waiting for a server that matches writableServerSelector？reason:TopologyDescription { type:'ReplicaSetNoPrimary',当前连接的副本集...
应用场景
视频直播类应用 视频直播类业务通过Redis存储用户数据及好友互动关系。双机热备保障高可用 云数据库Redis版 提供双机热备的方式，可以极大的提高服务可用性。集群版解决性能瓶颈 云数据库Redis版 提供集群版实例，破除Redis单线程机制的...
构建数据仓库
场景说明 用户数据来源丰富，包括来自云端的数据、外部数据源，数据统一沉淀，完成数据清洗、建模。用户的应用场景复杂，对非结构化的语音、自然语言文本进行语音识别、语义分析、情感分析等，同时融合结构化数据搭建企业级的数据管理平台...
概述
从应用视角看，全密态数据库可以解决不同应用场景下的数据安全问题，几种典型场景如下：平台安全运维：该场景主要针对在不可信环境（如第三方平台）下提供的数据库服务的安全防护，保证用户数据在运维过程中的安全。例如，业务将应用数据库...
概述
以下是常见的应用场景：数据存储与计算安全场景：在不可信环境中（如第三方平台），Spark全密态计算引擎 可以为关键的数据分析应用（如投资和财务分析）提供数据保护，保证用户数据在存储与计算过程中的安全，降低明文数据泄露风险。...
什么是数据库网关
DG的优势如下：安全可靠 不暴露数据库公网地址，确保用户数据资产的安全和稳定。本地网关启动时，需要在控制台生成一个临时令牌，该令牌会在网关启动时通过加密链路发送至服务端进行验证，以确保该网关仅供该用户使用。令牌在15分钟内过期...
什么是数据库网关
DTS有如下多种优势：安全可靠：无需暴露数据库公网地址，确保用户数据资产的安全和稳定；本地网关启动时，需要在控制台生成一个临时令牌，该令牌会在网关启动时通过加密链路发送至服务端进行验证，以确保该网关仅供该用户使用。令牌在15...
应用场景
数据库备份DBS 提供数据全量备份、增量备份、异地备份以及数据恢复等功能，帮助您实现多种典型应用场景。...降低运维成本：备份加固，ISV可直接购买DBS，为最终的用户数据提供保护，有效规避数据丢失风险，降低运维成本。
数据权限概述
数据湖权限支持配置数据库、数据表、数据列、函数四种维度细粒度权限。下面针对不同的数据操作，对所需要配置的权限进行说明，并对Owner权限的定义和权限鉴定方式进行详细说明。权限设置 权限设置主要为数据目录（Catalog）开启和关闭权限...
外部表概述
对于MaxCompute表外的各种用户数据（包括文本以及各种非结构化的数据），您需要通过不同工具导入MaxCompute表再进行计算。以OSS为例，如果您需要在MaxCompute中处理OSS上的数据，通常有以下两种方式：通过OSS SDK或者其他工具从OSS下载数据...
设备协议
设备协议模块用于为交通设备创建数据的接入、转化（标准化）和下发协议。设备协议模块可创建的协议以及各协议的功能如下：设备采集协议：将设备数据自动推送到云控平台数据采集端口。数据转化协议：将数据采集协议推动上来的设备数据转化为...
OpenAPI列表
会进行数据回刷：影响历史数据 会进行节点的数据回刷，造成计算费用以及存储费用。GetPhysicalNode 查询物理调度节点。GetPhysicalNodeByOutput 根据输出名查询物理节点。仅支持离线代码节点及集成任务节点。GetPhysicalNodeContent 查询...
项目协同管理
背景信息 Web 版 ODC V4.2.0 支持拥有创建项目权限的用户创建项目和添加项目成员，成员可以在项目中添加和变更数据库。本篇文档旨在介绍如何通过项目协同实现数据库变更。原理介绍 ODC 系统管理员授予用户创建项目的角色后，该用户创建项目...
S3协议数据压缩
Lindorm S3兼容协议提供了桶（Bucket）级别的压缩功能，可以在上传文件时对桶内的所有对象进行压缩。本文介绍如何使用S3兼容协议数据压缩功能。前提条件 宽表引擎为2.4.3.2及以上版本。如何查看或升级当前版本，请参见 宽表引擎版本说明 和...
采集数据
新建EMR表 新建两张表 insert_ods_user_info_d_emr 表、insert_ods_raw_log_d_emr 表，分别用于查询同步后的原始的RDS用户数据和OSS日志数据。在 数据开发 页面打开新建的业务流程，右键单击 EMR，选择 新建节点>EMR Hive。在 新建节点 ...
存储费用
MaxCompute会对存储的数据（例如表或资源）及备份的数据，按照数据容量大小进行计费。本文为您介绍存储费用的计费规则。背景信息 MaxCompute数据的压缩比一般在5倍左右，因此多数情况下，您上传的数据文件大小与实际存储在MaxCompute的大小...
数据模型
用户ID为10000的用户数据聚合后的数据解释如下。前5列没有变化，从第6列 last_visit_date 开始。2017-10-01 07:00:00：因为 last_visit_date 列的聚合方式为REPLACE，所以 2017-10-01 07:00:00 替换了 2017-10-01 06:00:00 保存了下来。...
- 产品推荐
- 这些文档可能帮助您