数据引入层（ODS）
此外，这类表的下游应用对于历史全量数据访问的需求较小（此类需求可通过数据仓库后续汇总后得到）。例如，日志类ODS表没有数据更新的业务过程，因此所有增量分区UNION在一起就是一份全量数据。全量存储 以天为单位的全量存储，以业务日期...
敏感数据访问及导出情况
数据访问页面为您展示基于配置规则识别出的敏感数据的访问量、访问趋势、导出量和导出明细等，帮助您掌控每一次访问敏感数据的情况。该页面E-MapReduce计算引擎的操作数据展示暂只支持上海region。前提条件 阿里云主账号已授权开通数据保护...
账号类型
用户名和密码 访问云原生数据仓库MySQL版方式有很多种：通过阿里云控制台、客户端或者JDBC。...数据库用户名为AccessKey ID 数据库密码为AccessKey Secret 用户类型 数据库拥有者：...用户：被授权的数据库用户，由数据库拥有者授权时自动添加。
需求分析
ods_raw_log_d 网站访问日志明细表数：dwd_log_info_di 用户网站访问信息宽表：dws_user_info_all_di 用户画像数据：ads_user_info_1d 根据规范设计数据流：本实验使用数据集成离线同步任务将用户信息数据与用户网站访问记录数据分别同步至...
需求分析
ods_raw_log_d 网站访问日志明细表：dwd_log_info_di 用户网站访问信息宽表：dws_user_info_all_di 用户画像数据：ads_user_info_1d 根据规范设计数据流：本实验使用数据集成离线同步任务将用户信息数据与用户网站访问记录数据分别同步至...
数据源概述
说明 数据同步基于数据源控制任务读写端数据库，您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库或数据仓库的相关信息，以便在同步过程中，可通过选择数据源名称来控制同步读取和写入的数据库或数据仓库。...
权限管理
当需要授予用户数据库和表的查询、导出及变更权限，您可参考本文档进行操作。注意事项 实例的管控模式为安全协同时，可以进行查看数据库、表等操作。非安全协同模式的实例，仅有登录实例的权限。由数据Owner管理的数据库、表，数据Owner...
等值面层（v1.x版本）
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
区域热力层
区域热力层是3D平面地图的子组件，支持独立的样式、数据和交互配置，包括区域的填充颜色、边线和文本样式配置等，能够以热力区域的形式表现地理位置上的区域信息。本文介绍区域热力层各配置项的含义。单击 子组件管理 下方的 区域热力层，...
配置资源组与网络连通
在数据同步任务配置前，您需要确保用于执行同步任务的独享数据集成资源组与您将要同步的数据来源端与目的端数据库的网络连通性，您可以根据数据库所在网络环境，选择合适的网络解决方案来实现网络连通。本文为您介绍数据库在不同网络环境中...
资源组说明
资源组分类 资源组是用于执行具体任务的服务，如接收调度引擎的指令执行SQL任务、数据同步任务，也包括按数据API的定义提供数据服务。按使用场景，资源组分为两类：系统资源组：由数据资源平台提供，供所有用户使用，对于QPS和并发有限制，...
网络连通解决方案
添加数据源时需要根据数据源所在网络环境，通过对应的网络解决方案，实现Dataphin与数据源的网络连通。本文为您介绍数据源在不同网络环境中与Dataphin的网络连通方案。网络连通方案 根据数据源所在的网络环境，在下图中选择对应的网络连通...
资源组说明
资源组分类 资源组是用于执行具体任务的服务，如接收调度引擎的指令执行SQL任务、数据同步任务，也包括按数据API的定义提供数据服务。按使用场景，资源组分为两类：系统资源组：由企业数据智能平台提供，供所有用户使用，对于QPS和并发有...
访问控制权限概述
数据库访问控制：开启访问控制的数据库仅允许被已授权的用户搜索和访问，且您无法主动申请该数据库的权限。用户访问控制：开启访问控制的用户仅允许搜索和访问已授权的实例和数据库，且您无法主动申请其他实例、数据库的权限。说明 如果您...
功能发布记录（2022年）
英国（伦敦），美国（硅谷），美国（弗吉尼亚），阿联酋（迪拜）所有DataWorks用户 数据集成概述 DataWorks支持EMR新版数据湖DataLake DataWorks支持基于EMR计算引擎新版数据湖DataLake，实现基于EMR引擎的数据集成、数据建模、数据开发...
设置集群白名单
注意事项 默认情况下，IP白名单只包含IP地址 127.0.0.1，表示任何IP地址均无法访问该数据库集群。若将IP白名单设置为%或者 0.0.0.0/0，表示允许任何IP地址访问数据库集群。该设置将极大降低数据库的安全性，如非必要请勿使用。PolarDB暂不...
数据归档
功能优势 开启RDS MySQL通用云盘的数据归档OSS功能后，借助OSS海量、安全、低成本、高可靠的特性，用户能够在RDS MySQL上实现极低成本的归档数据存储，在具备InnoDB事务能力之上支持低频的数据访问，数据存储成本相较于ESSD PL1云盘下降80%...
功能优势
当您的数据库中有数据需要被保护时，可以使用RDS MySQL全密态数据库功能，该功能提供的加密解决方案能够在遵守数据保护法规的前提下保障您的数据安全，使被保护数据免受未授权访问。本文将详细介绍RDS MySQL全密态数据库功能的优势，帮助您...
透明数据加密概述
经过数据库身份验证的应用和用户可以继续透明地访问应用数据（不需要更改应用代码或配置），而尝试读取表空间文件中的敏感数据的OS用户以及尝试读取磁盘或备份信息的未知用户将不允许访问明文数据。透明：数据在使用过程中无感知，数据在...
设置集群白名单
注意事项 默认情况下，IP白名单只包含IP地址127.0.0.1，表示任何IP地址均无法访问该数据库集群。若将IP白名单设置为%或者0.0.0.0/0，表示允许任何IP地址访问数据库集群。该设置将极大降低数据库的安全性，如非必要请勿使用。PolarDB暂不...
管理访问控制权限
数据管理DMS提供了全方位细粒度的数据安全管理功能，支持对实例、数据库、表、数据列、数据行、元数据等进行访问控制权限管理。本文对DMS提供的访问控制权限进行介绍。权限类别说明 权限分类 权限类别 权限说明 实例是否开启安全托管 操作...
Cassandra
当您需要访问用户VPC网络内的数据时，需要开启此选项。spark.dla.eni.vswitch.id":"vsw-xxx",#可访问Cassandra 的交换机id。spark.dla.eni.security.group.id":"sg-xxx"#可访问Cassandra的安全组id。} } 执行结果 作业运行成功后，在任务...
JindoFS实战演示
而Fluid JindoRuntime支持数据亲和性调度、数据预加载和指定用户访问HDFS等功能，帮助您解决这些问题，实现HDFS访问加速。本视频为您介绍如何使用Fluid JindoRuntime，通过JindoFS SDK快速访问HDFS上的数据。Fluid+JindoFS对海量小文件的...
添加数据库
以下介绍如何向网关中添加数据库。本地网关启动后就可以开始添加数据库了，一个网关可以添加多个数据库。操作步骤 打开 添加数据库 对话框。您可以选择以下任意一种方式：在创建数据库网关时，进入 添加本地数据库 步骤，单击 添加数据库 ...
PolarDB-X
当您需要访问用户VPC网络内的数据时，需要开启此选项。spark.dla.eni.vswitch.id":"vsw-xxx",#可访问PolarDB-X的交换机id。spark.dla.eni.security.group.id":"sg-xxx"#可访问PolarDB-X的安全组id。} } 执行结果 作业运行成功后，在任务...
概述
数据安全共享场景：您可以通过控制密钥的所有权，管理数据使用权和数据访问的频次，实现数据安全共享，避免数据泄露。场景如下图所示：版本介绍 Spark全密态计算引擎分为 基础版和高性能版两个版本，区别如下：基础版：基础版的Spark全密态...
应用场景
数据泄露检测与防护 通过智能化检测模型分析企业内外账号对敏感文件的访问行为，实现对敏感数据访问的异常检测，同时为数据安全管理团队提供相关告警。数据脱敏 支持通过灵活多样的内置或自定义脱敏算法，支持生产类敏感数据脱敏到开发测试...
数据服务概述
数据安全和查询性能无法保障：在数据接口开发时往往只考虑数据的获取性，数据资源访问安全性和数据访问的稳定性考虑少。维护成本高：缺乏线上平台化管理，异常情况无法监控告警，线上业务问题暴露后再排查代码修复上线。数据服务价值 为了...
身份管理
推荐的做法是使用RAM身份（即RAM用户和RAM角色）来访问云数据传输。RAM用户 RAM用户需要由阿里云账号（主账号）或拥有管理员权限的RAM用户、RAM角色来创建，且必须在获得授权后才能登录控制台或使用API访问阿里云账号下的资源。对于RAM用户...
身份管理
推荐的做法是使用RAM身份（即RAM用户和RAM角色）来访问 图数据库。RAM用户 RAM用户需要由阿里云账号（即主账号）或拥有管理员权限的RAM用户、RAM角色来创建，且必须在获得授权后才能登录控制台或使用API访问阿里云账号下的资源。对于RAM...
权限概述
Label权限控制：提供敏感数据访问权限控制能力。用户或角色仅能访问在自身访问许可等级范围内的数据，如果需要访问高敏感数据，需要进行Label授权。基于Package跨项目访问资源：当涉及跨项目访问资源场景时，可以通过创建Package包的方式将...
RDS PostgreSQL通过公网访问外部数据库
背景信息 RDS PostgreSQL支持通过fdw功能访问外部其他类型数据库，如MySQL、SQL Server、PostgreSQL及Redis等，由于RDS PostgreSQL基于用户VPC的网络构建，如需访问公网上的数据库服务，还需配置公网NAT网关并绑定弹性公网IP（EIP）。...
产品优势
安全高效 DAS提供高危SQL识别、SQL注入检测、新增访问来源识别、敏感数据访问发现等服务，快速识别数据库异常访问、拖库等行为，有效保障数据库安全。DAS采用无侵入式设计，您无需在数据库实例上安装agent，对您的数据库环境无侵入。DAS...
基础版Spark全密态计算引擎使用示例
警告 用户主密钥是访问加密数据的根凭据，一旦丢失密钥，将无法再访问已有的数据。请妥善保管用户主密钥。全密态计算引擎不提供用户主密钥的生成和备份服务，您需要按照密钥格式输入用户主密钥。jdbcUrl 数据库的连接地址和数据库名称。仅...
ETL工作流快速体验
该案例将通过数据分析技术，解析用户访问日志，结合用户信息，获取用户画像，并自动更新用户画像，实现网站的精细化运营。案例配套文档：简单用户画像分析（MaxCompute版）。电商漏斗模型分析 DataWorks MaxCompute 数据开发 基于漏斗模型...
手动更换可用区
A：更换主可用区后，数据库连接地址（集群访问地址和主访问地址）不变，因此您仍然可通过数据库连接地址正常访问集群。但使用的虚拟交换机vSwitch和IP地址可能会发生变化。该操作可能会影响数据库的可用性，请谨慎操作。
访问数据分析功能
本文介绍访问数据分析功能的三种方式。通过顶部菜单栏直接进入数据可视化 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 集成与开发（DTS）>数据应用>数据分析。通过数据库的SQL窗口进入数据可视化 登录 数据管理DMS 5.0。在顶部菜单栏中，...
设置透明数据加密TDE
经过数据库身份验证的应用和用户可以继续透明地访问应用数据（不需要更改应用代码或配置），而尝试读取表空间文件中的敏感数据的OS用户以及尝试读取磁盘或备份信息的未知用户将不允许访问明文数据。开启透明数据加密TDE功能后，会对数据在...
身份管理
推荐的做法是使用RAM身份（即RAM用户和RAM角色）来访问数据管理DMS。RAM用户 RAM用户需要由阿里云账号（即主账号）或拥有管理员权限的RAM用户、RAM角色来创建，且必须在获得授权后才能登录控制台或使用API访问阿里云账号下的资源。对于RAM...
创建数据库和账号
创建数据库 访问 RDS实例列表，在上方选择地域，然后单击目标实例ID。在左侧导航栏中单击 数据库管理。单击 创建数据库。设置如下参数。参数 说明 数据库（DB）名称 长度为2~64个字符。以小写字母开头，以小写字母或数字结尾。支持小写字母...
- 产品推荐
- 这些文档可能帮助您