DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力,本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业:全行业...
使用阿里云Dataphin可以实现零部署成本、零运维成本构建智能大数据研发与治理平台。使用阿里云Dataphin时,若已有的数据源部署在本地IDC机房,首先需要打通本地IDC机房与阿里云Dataphin网络。本文将介绍本地IDC机房数据源与阿里云Dataphin...
数据审计 智能解析数据库及大数据的通信流量,细粒度审计数据访问行为,通过对数据源全量行为的审计溯源、危险攻击的实时告警、风险语句的智能预警,为您最敏感的数据库资产做好最安全的监控保障。个人信息合规 可精准区分和保护个人数据,...
智能监控:一键实现复杂工作流的全链路监控报警配置。数据地图(公共云)/数据管理(专有云):提供强大的数据搜索、数据类目、数据血缘等能力。数据资产管理(仅专有云):统一管理整个平台的数据表、API等各类数据资产。数据安全:数据...
洞察是一款自助式数据挖掘分析型,面向业务管理者、运营、业务分析师等人员提供低使用门槛的智能、自动化、全面、精准的数据诊断和分析能力,智能发现数据规律或异常,实现从数据到知识的提取,辅助业务决策。几乎每个业务每天都存在业务...
请参见:什么是DataV数据可视化 配置数据库白名单 添加OceanBase for MySQL数据源 Quick BI 数据分析与展现 Quick BI 是一款全场景数据消费式的BI平台,秉承全场景消费数据,让业务决策触手可及的使命,通过智能的数据分析和可视化能力帮助...
Dataphin是阿里巴巴集团OneData数据治理方法论内部实践的云化输出,一站式提供数据采、建、管、用全生命周期的大数据能力,以助力企业显著提升数据治理水平,构建质量可靠、消费便捷、生产安全经济的企业级数据中台。Dataphin兼容多种计算...
在智能推荐的 数据处理脚本 中进行二次编辑,确认无误后单击 应用。说明 可以通过 数据响应结果 区域,查看经过处理后的数据详情。可选,若不需要使用当前处理方法,单击 撤销应用 即可。单击画布任一处退出智能推荐窗口,在 数据源 配置页...
ADAM智能兼容:包含直接兼容目标库的对象,以及可以通过ADAM智能转换的对象(使用ADAM数据库改造产品,可以自动帮助您创建ADAM智能兼容的对象到目标数据库)。不兼容:您必须手工修改数据库对象。(ADAM全面提供改造建议)。SQL兼容性:...
敏感数据识别 说明 从企业纷繁复杂的数据体系中找出重要、敏感的数据是敏感数据防护的关键,DataWorks支持管理员通过智能方式识别敏感数据。数据保护伞服务 此安全检测项为您检测哪些数据分级目前没有配置数据识别规则。未配置数据识别规则...
智能研发版定价 数据处理单元规格 定价(CNY/年)500 298,000 1000 397,800 1500 497,600 2000 597,400 2500 697,200 3000 797,000 数据处理单元统计规则:数据处理单元总量=(数据同步任务数+数据集成任务数)/3+计算任务数(离线和实时)...
2021年08月19日 华北2(北京)、华东1(杭州)购买指引、计费说明 2021年08月24日 华南1(深圳)2021年08月26日 华东2(上海)数据源:可支持的数据源类型和版本拓展,优化数据源配置交互 新建数据源页面支持分类展示数据源类型,同时增加...
数仓规划是基于Dataphin建设数据中台的第一步,同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前,需要完成数据仓库的规划,包括定义数据板块、项目、数据源、计算源和统计周期。功能介绍 数仓规划包括逻辑空间与物理空间...
智能研发版定价 数据处理单元规格 调度资源 定价(CNY/月)200 16C64G 25,000 500 16C64G 33,500 1000 32C128G 42,000 1500 32C128G 50,500 2000 40C160G 59,000 2500 40C160G 67,500 3000 40C160G 76,000 3500 40C160G 84,500 4000 60C240...
如果您还购买了Dataphin的增值功能包,可以查看增值功能的用量情况,包括 智能运维、数据标准、资产质量。资源统计项目 统计口径 描述 数据处理单元 同步&集成任务:每3个离线任务(数据同步任务+数据集成任务数)向上取整计算1个数据处理...
数仓规划是基于Dataphin建设数据中台的第一步,同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前,需要完成数据仓库的规划,包括定义数据板块、项目、数据源、计算源和统计周期。功能介绍 数仓规划包括逻辑空间与物理空间...
如果您还购买了Dataphin的增值功能包,可以查看增值功能的用量情况,包括 智能运维、数据标准、资产质量、数据服务 以及 标签工厂。资源统计项目 统计口径 描述 数据处理单元 同步&集成任务:每3个离线任务(数据同步任务+数据集成任务数)...
其架构主要针对管理大规模分析型数据仓库以及商业智能工作负载而设计。更多详情,请参见 GreenPlum官网。使用限制 Dataphin仅支持超级管理员、数据源管理员、板块架构师、项目管理员角色创建数据源。超级管理员、数据源管理员角色添加与...
其架构主要针对管理大规模分析型数据仓库以及商业智能工作负载而设计。更多详情,请参见 GreenPlum官网。使用限制 Dataphin仅支持超级管理员、数据源管理员、板块架构师、项目管理员角色创建数据源。超级管理员、数据源管理员角色添加与...
扫描MaxCompute、OSS、阿里云数据库服务(RDS、PolarDB-X、PolarDB、OceanBase、表格存储等)和自建数据库中的数据,通过敏感数据规则,判断和打标敏感数据,为数据安全审计、数据脱敏、智能异常检测等数据安全解决方案提供基础。...
资源用量:用于数据处理单元、数据标准、智能运维等资源统计用量情况的通知。租户管理:用于租户设置变更的通知。系统消息:用于元数据获取异常等系统异常的通知。操作步骤 在Dataphin首页,按照下图操作指引,进入 通知中心。单击左侧导航...
但数据体系复杂、数据不统一,数据分析速度和数据准确一致性难保障,战略决策与数据化运营受阻。解决方案:数据融合:通过数据引入功能,将业务系统数据集成、融合一体,统一基础数据。数据建模:通过规范建模功能,结合业务发展需求,自顶...
DSC 在您完成数据源识别授权后,从您存储在OSS的海量数据中快速发现和定位敏感数据,对敏感数据分类分级并统一展示,同时追踪敏感数据的使用情况,并根据预先定义的安全策略,对数据进行保护和审计,以便您随时了解OSS数据资产的安全状态。...
可视化构建数据仓库的模型,逻辑表提交后即生成对应智能黑盒调度任务,自动化生产数据。说明 仅绑定数据板块的项目支持 规范建模 功能。数据处理:通过编写代码的方式构建复杂的数据模型、构建同步任务和构建不同类型的代码任务。即席查询...
资源用量:用于数据处理单元、数据标准、智能运维等资源统计用量情况的通知。租户管理:用于租户设置变更的通知。系统消息:用于元数据获取异常等系统异常的通知。操作步骤 在Dataphin首页,按照下图操作指引,进入 通知中心。单击左侧导航...
数据板块是逻辑空间的重要组成部分,是基于业务特征划分的命名空间。在使用规范建模前,您需要完成数据板块的创建。本文为您介绍如何新建数据板块。前提条件 仅支持 智能研发版。若需使用,当前租户还需开通智能研发模块。在开始执行操作前...
版本适用场景 Dataphin提供了多种版本和功能的组合,以适配不同场景、不同数据体量客户的诉求:智能研发版(离线&实时):支持离线研发和实时研发场景,可创建生产开发隔离的双环境项目,提供智能建模、逻辑运维等特色功能,适用于数据量...
数据板块是逻辑空间的重要组成部分,是基于业务特征划分的命名空间。在使用规范建模前,您需要完成数据板块的创建。本文为您介绍如何新建数据板块。前提条件 仅支持 智能研发版。若需使用,请升级当前版本。升级版本,请参见 升级。在开始...
数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。前提条件 已购买资产质量增值服务,详情请参见 开通Dataphin。背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求,Dataphin应用场景的多样性及...
数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。前提条件 已购买资产质量增值服务并且当前租户已开通资产质量模块。背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求,Dataphin应用场景的多样性...
背景信息 Dataphin支持对接的数据源包括大数据存储型数据源、文件数据源、消息队列数据源、关系型数据源和NoSQL数据源,各模块支持对接的数据源类型说明如下:如果您需要在Dataphin中连接某数据源,则需要先在数据源管理中创建该数据源。...
数据权限策略可根据不同的数据等级指定不同的审批规则,能使审批人员着重于高敏感数据,对于公开的数据,可免除审批,从而降低权限审批的负担,本文为您介绍如何配置数据权限策略。权限说明 仅支持安全管理员对数据权限策略执行添加、编辑...
数据权限策略可根据不同的数据等级指定不同的审批规则,能使审批人员着重于高敏感数据,对于公开的数据,可免除审批,从而降低权限审批的负担,本文为您介绍如何配置数据权限策略。权限说明 仅支持安全管理员对数据权限策略执行添加、编辑...
可视化构建数据仓库的模型,逻辑表提交后即生成对应智能黑盒调度任务,自动化生产数据。说明 仅绑定数据板块的项目支持 规范建模 功能。数据处理:通过编写代码的方式构建复杂的数据模型、构建同步任务和构建不同类型的代码任务。即席查询...
背景信息 Dataphin支持对接的数据源包括大数据存储型数据源、文件数据源、消息队列数据源、关系型数据源和NoSQL数据源,各模块支持对接的数据源类型说明如下:如果您需要在Dataphin中连接某数据源,则需要先在数据源管理中创建该数据源。...
Dataphin提供了简单、快速、高效的数据分析平台,您可通过数据分析对数据仓库中的数据进行洞察、在线查询及可视化分析,提取出有效信息而形成结论,辅助决策。前提条件 需开通智能研发版。分析平台简介 在分析平台上,您可选择您有权限的...
通过创建多个租户,可以对不同租户分配不同的数据单元以及功能模块,并能够保证租户间数据隔离,满足不同租户的不同要求。本文为您介绍如何新建、编辑、删除以及恢复租户。权限说明 仅元仓租户的超级管理员与系统管理员支持新建及管理租户...
Dataphin提供了简单、快速、高效的数据分析平台,您可通过数据分析对数据仓库中的数据进行洞察、在线查询及可视化分析,提取出有效信息而形成结论,辅助决策。前提条件 需开通智能研发版。分析平台简介 在分析平台上,您可选择您有权限的...
数据库开发 数据变更 对数据进行变更,以满足上线数据初始化、历史数据清理、问题修复、测试等诉求。结构设计 在新项目、新需求或者优化等业务场景中,一般会涉及到新建表、修改表等结构的变更操作,此时可以使用DMS的结构设计功能。库表...
数据安全支持定义数据的业务分类和安全等级,并构建敏感数据识别规则,同时支持设置敏感数据脱敏规则,以保障数据资产的安全性。如果您选择了 资产治理,下方展示 治理项管理 和 治理工作台 增值功能。更多信息请参见 资源治理概述。资产...