数据安全中心(Data Security Center,简称DSC)支持静态脱敏和动态脱敏,可以脱敏数据库中的敏感数据。本文介绍如何使用静态脱敏和动态脱敏。脱敏方式 静态脱敏:通过新增脱敏任务,使用脱敏算法对敏感数据进行遮盖、加密或替换,并将脱敏...
事件 事件 说明 当场景管理器请求完成时 场景管理器数据接口请求返回并经过过滤器处理后抛出的事件,同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据源 页签的 数据响应结果 区域。轮播完成触发 当...
数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
事件 事件 说明 当数据接口请求完成时 数据接口请求返回并经过过滤器处理后抛出的事件,同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据源 页签的 数据响应结果 区域。当链接改变时 当组件数据中的...
数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
本文以OSS数据源为例,为您介绍如何通过RAM角色授权模式配置数据源,提高云上数据的安全性。前提条件 如果您需使用RAM用户登录并完成本文操作流程,请先为RAM用户授予 AliyunDataWorksFullAccess 和 AliyunRAMFullAccess 权限策略,详情请...
如果数据中有回车或空格,可以给数据设置不同于回车或空格的分隔符后,用-rd 和-fd 指定对应的分隔符实现数据的上传。如果无法更换数据中的分隔符,可以将数据作为单独一行上传,然后使用UDF解析。如下示例数据中包含回车,使用“,”作为列...
数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
通过DataWorks执行补数据操作后,为什么费用会产生较大波动?通过DataWorks将调度任务的调度周期从天改为小时后,为什么费用会增加?运行全表扫描后,为什么费用会增加?下载费用 通过ECS云主机使用内网从MaxCompute下载数据,收取流量费用...
什么是E-MapReduce 开源大数据开发平台E-MapReduce(简称EMR),是运行在阿里云平台上的一种大数据处理的系统解决方案。EMR基于开源的Apache Hadoop和Apache Spark,让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理...
本教程通过DataWorks,联合云原生大数据计算服务MaxCompute,使用大数据AI公共数据集(淘宝、飞猪、阿里音乐、Github、TPC等公共数据),指导您如何快速进行大数据分析,快速熟悉DataWorks的操作界面与最基础的数据分析能力。DataWorks的更...
使用BI分析模式配置组件数据是一个全新的数据配置功能,需要与您准备的数据集内容相结合,您可以使用BI分析模式,为组件自由分配所需数据集的字段内容,合理配置图表数据映射和其他数据筛选等功能。本文介绍BI分析模式下组件数据配置面板...
进入恢复模式 重要 当您编写的过滤器有问题(例如死循环导致的看板卡顿)、数据源配置有问题(例如返回的数据量过大导致的看板卡顿)或自定义组件有逻辑问题等其他原因导致数据看板无法编辑时,使用恢复模式进入,可以删除掉带来问题的内容...
数据湖后端存储使用OSS,用户使用数据湖构建面向大数据分析和机器学习场景可以获得集中式权限管理和统一的元数据视图,更容易对接云上大数据和分析产品。什么情况下我需要使用数据湖构建?在云上有数据分析和机器学习需求,希望构建云上的...
本文主要介绍搭建DataV数据大屏的操作步骤。步骤一:购买DataV基础版 登录 DataV管理控制台,本教程使用 兼容MySQL 方式连接DLA服务,所以购买DataV基础版即可满足要求。步骤二:添加DLA数据源 在添加数据源之前,您必须先为您的DLA配置白...
云盘版本的RDS PostgreSQL实例数据表文件都存储在云盘(ESSD)中,在数据量较大时,可能会面临较高的存储成本。通常,RDS PostgreSQL实例的数据包含冷数据和热数据。通过数据归档功能,可以将对象存储(OSS)用作归档冷数据的存储介质,...
拉链表的设计 在数据仓库的数据模型设计过程中,经常会遇到如下需求:数据量较大。表中的部分字段被更新。例如,用户的地址、产品的描述信息、订单的状态和手机号码等。需要查看某一个时间点或时间段的历史快照信息。例如,查看某一个订单...
RDS MySQL实例数据量较大时,存储成本会随之增高。业务数据通常分为冷数据和热数据,将对象存储(OSS)作为归档冷数据的存储介质,能够大幅降低用户的存储成本。功能简介 在开启RDS MySQL通用云盘的数据归档OSS功能后,用户可通过执行下面...
查看数据源 创建数据源后,您可以在数据源列表查看所有已创建数据源的基本信息、详情和网络连接等信息,也可以根据数据源类型进行筛选、根据数据源的创建时间进行排序,以及模糊搜索指定数据源。登录 OceanBase 管理控制台。在左侧导航栏,...
步骤二:订阅账单数据 在 大数据分析>数据订阅管理 区域,根据需要订阅相应账单数据,订阅后,相关账单数据会同步至指定的MaxCompute表。说明 该操作需要当前登录账号为账单分析指定的DataWorks工作空间(即步骤一中,由平台统一创建的工作...
数据审计 智能解析数据库及大数据的通信流量,细粒度审计数据访问行为,通过对数据源全量行为的审计溯源、危险攻击的实时告警、风险语句的智能预警,为您最敏感的数据库资产做好最安全的监控保障。个人信息合规 可精准区分和保护个人数据,...
数据库备份DBS 支持自动添加数据源功能,可以将阿里云上的RDS实例自动同步到DBS数据源中,以便后续对数据源进行管理与备份。功能说明 该功能当前仅支持自动接入RDS实例,包含 RDS MySQL、RDS SQL Server、RDS PostgreSQL、RDS MariaDB。...
为了避免因数据库达到存储上限,导致新增数据无法保存,TSDB提供数据时效功能,打开并设置数据时效后,系统将自动删除时效范围以外的数据。本文介绍如何开启或关闭数据时效功能。警告 设置数据时效后,建议您及时备份数据,避免导致数据...
清洗后数据保存位置 DLA清洗OSS数据后,将结果数据回写入OSS即数据清洗后的存储位置。DLA会默认指定存储位置。您也可以自定义存储位置。数据清洗时间 设置每天DLA清洗OSS数据的时间。系统默认的数据清洗时间是00:30,您可以根据业务规律,...
添加完成数据文件后,在跳转后的添加数据对话框,选择数据的分组、输入数据集的名称、选择数据的类型和数据的服务地址,单击对话框右下角的 创建数据集 即可完成三维瓦片数据的添加。说明 当数据量较大时解析时间会比较长,您可以先关闭弹...
添加完成数据文件后,在跳转后的添加数据对话框,选择数据的分组、输入数据集的名称、选择数据的类型和数据的服务地址,单击对话框右下角的 创建数据集 即可完成三维瓦片数据的添加。说明 当数据量较大时解析时间会比较长,您可以先关闭弹...
本文为您汇总数据源权限管理相关的问题。哪些角色可以管理数据源的权限?是否支持再次分享已被分享的数据源?数据源的创建者是否有权控制该数据源?什么是私有模式的数据源?哪些用户能够收回数据源的分享权限?如何检查数据源分享关系的...
本文为您介绍在DataV中数据集管理面板内如何编辑已创建的数据集。背景信息 数据集管理面板中已存在数据集且需要重新编辑修改该数据集内容。操作步骤 登录 DataV控制台。选择 我的数据 页签,在左侧列表中单击 数据集管理。在 数据集管理 ...
在阿里云官网,鼠标悬停至 产品 后,再将鼠标悬停至左侧导航栏的 大数据 上,单击 数据开发和治理 列下的 Dataphin。在Dataphin产品详情页,单击 产品控制台,进入Dataphin管理控制台页面。在Dataphin管理控制台页面,单击已开通版本详情后...
由于更新后的数据重新记录了时间戳,因此冷数据更新后变为热数据。Q:我只想查询热数据,为什么还返回了冷数据?A:查询语句可以通过设置 HOT_ONLY/_l_hot_only_仅查询热数据。但由于数据归档至冷存储的操作是周期性触发的,因此有部分冷...
AnalyticDB PostgreSQL版Serverless模式 实例开通数据共享后,可以实现跨实例联合查询,在保证数据实时性的同时,有效减少数据冗余。使用限制 实例资源类型为Serverless版本。所有实例必须属于同一个阿里云账号。所有实例需要在同一地域下...
数据源类云产品 使用DataWorks进行数据集成时,支持将数据从不同数据源间进行离线或实时同步,各类阿里云或自建关系型数据库、非结构化存储、大数据存储、消息队列等产品均支持添加为DataWorks的数据源,添加完成后即可使用DataWorks进行...
为了创建完整的字段标准,需要先完善数据字典的管理,创建好数据字典后,可以用来规范数据标准字段的值域范围,保证关联了字段标准的表及字段可以自动设置数据质量规则,规范数据质量。通过导入数据字典可以实现批量创建数据字典。本文介绍...
为了创建完整的字段标准,需要先完善数据字典的管理,创建好数据字典后,可以用来规范数据标准字段的值域范围,保证关联了字段标准的表及字段可以自动设置数据质量规则,规范数据质量。通过导入数据字典可以实现批量创建数据字典。本文介绍...
由于全量数据迁移会并发执行INSERT操作,将导致目标数据库的表产生碎片,因此全量迁移完成后目标数据库的表空间会比源实例大。对于迁移失败的任务,DTS会触发自动恢复。当您需要将业务切换至目标数据库,请务必先结束或释放该任务,避免该...
由于全量数据迁移会并发执行INSERT操作,将导致目标数据库的表产生碎片,因此全量迁移完成后目标数据库的表空间会比源实例大。对于迁移失败的任务,DTS会触发自动恢复。当您需要将业务切换至目标数据库,请务必先结束或释放该任务,避免该...
由于全量数据迁移会并发执行INSERT操作,将导致目标数据库的表产生碎片,因此全量迁移完成后目标数据库的表空间会比源实例大。对于迁移失败的任务,DTS会触发自动恢复。当您需要将业务切换至目标数据库,请务必先结束或释放该任务,避免该...