2023年9月 发布时间:2023-09-28 功能名称 功能描述 相关文档 数据中心 数据源管理模块,用户可以在数据中心连接和管理数据库,并可直接在数据中心预览和查看数据库中的不同数据表。添加PolarDB PostgreSQL数据库 管理数据树 我的项目 核心...
DataV可视分析地图 管理数据树 添加PolarDB PostgreSQL数据库 添加RDS PostgreSQL数据库 管理项目 数据源管理 图层管理 图层交互管理 其他更多操作请参见 操作指南。DataV可视分析创作间 创建数据集 可视分析数据集 自定义编辑卡片 分享...
您可以登录 MaxCompute控制台,左上角切换地域后,即可在 项目管理 页面查看到具体的MaxCompute项目名称。interactiveMode:可选。查询加速功能开关。如果您需要启用查询加速功能,在URL后追加&interactiveMode=true 配置即可。更多查询...
阿里云数据资源平台是数据资产定义、加工、管理、服务的全流程平台,提供数据同步、数据查询、数据标准、数据建模、数据加工、质量评估、业务模型构建、资产管理、数据服务等功能,为智能数据应用持续稳定供给全量、标准、干净、智能的数据...
您可以登录 MaxCompute控制台,左上角切换地域后,即可在 项目管理 页面查看到具体的MaxCompute项目名称。interactiveMode:可选。查询加速功能开关。如果您需要启用查询加速功能,在URL后追加&interactiveMode=true 配置即可。更多查询...
当您在MaxCompute中需要对大规模数据进行传输且对传输稳定性和延迟有要求时,您可以使用独享数据传输服务资源组。独享数据传输服务资源组可以提供更高的数据传输速度和更好的网络条件,以减少传输时间并提高效率。本文为您介绍如何购买、...
项目管理员/DBA 成员添加数据库。项目普通成员发起工单,申请数据库变更。ODC 根据风险等级识别规则判断出该工单的风险等级,执行该风险等级对应的审批流程。审批通过后,ODC 自动执行或者用户手动执行数据库变更。创建项目 方法一:拥有...
此功能对应MaxCompute管理控制台的 配额(Quota)管理,配额(Quota)管理 已经全部覆盖原有能力,同时还支持了预留弹性能力,支持数据传输独享Quota的管理等,交互体验上也有了很大的提升,详情请参见 项目管理(新版)。作业运维:运维...
公司主营OpenRIS灾害风险大数据平台提供了海量灾害数据的快速地图展示、统计查询、切割下载、上传数据定制化在线分析等功能,实现了灾害数据与模型一体化云服务。在数据与系统上云过程前,遇到了如下挑战:长期积累的时空数据类型多、数据...
简介 MaxCompute开放的公开数据集类别包括:GitHub公开事件数据、国家统计数据、TPC性能测试数据、数字商业类数据、生活服务类数据、金融股票类数据。所有的数据均存储在MaxCompute产品的公开项目BIGDATA_PUBLIC_DATASET的不同Schema中。...
数据湖存储与管理 对象存储OSS 数据湖构建DLF 将在线数据库中的源数据引入数据湖时,OSS会作为数据湖的统一存储,存储机制包含Delta Lake和Hudi两种。同时,DLF采用元数据管理功能管理元数据库和元数据表。数据湖探索与分析 MaxCompute ...
具体如下:易用性好 包含 数据访问风险、数据导出风险、数据操作风险、其他风险类型 等4类风险类型,并支持 访问时间、敏感类型、访问量 等多种维度组合识别各类风险。精准度高 增加事件聚合统计比较,通过比较时间窗口内事件发生次数的...
数据管理DMS提供DevOps功能,您可以在项目空间内指定参与人员、数据库和迭代模板,合理有效地保障研发流程顺利开展,减少误操作,保护数据安全。新建项目 登录 数据管理DMS 5.0。在顶部菜单栏中,选择 数据库开发>研发空间>DevOps。单击 ...
DataV通过与DataWorks数据服务的对接,通过交互式分析Hologres连接DataWorks数据服务开发并生成API,快速在DataV中调用API并展现MaxCompute的数据分析结果。数据服务对接DataV产生背景 MaxCompute是阿里巴巴集团自主研究的快速、完全托管的...
数据传输提供数据同步功能,帮助您实现数据源之间的数据实时同步。适用于数据异地多活、数据异地灾备、数据聚合和实时数据仓库等多种业务场景。您可以参考以下流程进行同步前的准备工作、以及购买、配置和管理数据同步项目。完成准备工作。...
数据传输提供数据迁移功能,帮助您实现同构或异构数据源之间的数据迁移。适用于数据库升级、跨实例数据迁移、数据库拆分、扩容等业务场景。您可以参考以下流程进行迁移前的准备工作、以及购买、配置和管理数据迁移项目。完成准备工作。数据...
2021-12-21 模型查看器 v6.0 DataV发布全新V6.0版本 发布五大新功能 适用用户:数据集及BI映射:企业版及以上用户 区块管理:专业版及以上用户 设计资产:企业版及以上用户 空间构建平台:需线下咨询购买 数据映射系统;BI分析功能帮助用户...
在大数据领域,阿里云为企业用户提供了一整套数据安全方案,包含用户认证、数据权限、大数据作业管理体系等。本文以联合使用DataWorks与EMR为例,为您介绍DataWorks on EMR场景下的数据安全方案。背景信息 DataWorks on EMR目前支持LDAP...
信息项 示例值 数据源名称 mysql4.2.0 集群名 ob 4.1.0.1 租户名 osc_test_mysql 数据库用户名 odctest 数据库密码*在项目协同窗口的左侧导航栏中,单击 数据源>新建数据源。在弹出的 新建数据源 面板中填写或选择以下信息。信息项 说明 ...
您可以登录 MaxCompute控制台,左上角切换地域后,即可在 项目管理 页签查看到具体的MaxCompute项目名称。access_id:必填。具备目标MaxCompute项目访问权限的AccessKey ID。您可以进入 AccessKey管理 页面获取AccessKey ID。access_key:...
DataWorks基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎,为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台。从2009年起,DataWorks不断沉淀阿里巴巴大数据建设方法论,支撑数据中台建设,同时与...
本章将为您介绍应用服务平台中的项目管理功能,平台中的项目即为一种数据隔离维度,项目和项目之间的数据默认为不互通且相互独立的,您可以在项目中去管理对应的设备、账户、空间、应用、数据等资源 本章将为您介绍应用服务平台中的项目...
但在MaxCompute平台中,考虑到项目空间管理员对数据敏感等级的管理成本,默认安全策略并不支持No-WriteDown,如果项目空间管理员有类似需求,可以通过修改项目空间安全配置 SetObjectCreatorHasGrantPermission=false 以达到控制目的。...
权限点 超级管理员 系统管理员 数据源管理员 安全管理员 质量管理员 板块架构师 板块管理员 项目管理员 普通成员 权限申请 申请数据表权限 Y Y-Y 申请数据源权限 Y Y-Y 申请函数权限 Y Y-Y 申请变量权限 Y Y-Y 申请密钥权限 Y Y-Y 申请数据...
权限点 超级管理员 系统管理员 数据源管理员 安全管理员 质量管理员 板块架构师 板块管理员 项目管理员 普通成员 权限申请 申请数据表权限 Y Y-Y 申请数据源权限 Y Y-Y 申请函数权限 Y Y-Y 申请变量权限 Y Y-Y 申请密钥权限 Y Y-Y 申请数据...
配置好数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 PolarDB-X 2.0 数据源。背景信息 云原生数据库 PolarDB 分布式版(简称 PolarDB-X)是由阿里巴巴自主研发的云原生分布式数据库,为您提供高吞吐、大...
授权角色创建好之后,刷新 创建项目 页面,就可以选择使用新创建的授权角色来创建智能媒体管理项目。工作流模板 在创建IMM项目或数据集时,可以为项目或数据集设置工作流模板(Template),模板定义了部分接口所需要执行的工作流。更多信息...
权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。操作步骤 在Dataphin首页,单击顶部菜单栏 管理中心。按照下图操作指引,进入 新建数据源 对话框。在新建数据源对话框的 大数据存储 区域,...
租户隔离 Dataphin支持租户的概念,不同租户之间的数据、任务、成员、权限是完全隔离的,只能...Dataphin支持给项目配置数据下载审批,支持自定义选择项目管理员或者安全管理员审批,需要审批后才能进行数据的下载,防止敏感数据被直接下载。
租户隔离 Dataphin支持租户的概念,不同租户之间的数据、任务、成员、权限是完全隔离的,只能...Dataphin支持给项目配置数据下载审批,支持自定义选择项目管理员或者安全管理员审批,需要审批后才能进行数据的下载,防止敏感数据被直接下载。
权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。操作步骤 在Dataphin首页,单击顶部菜单栏 管理中心。按照下图操作指引,进入 新建数据源 对话框。在新建数据源对话框的 大数据存储 区域,...
关键性里程碑 2009年9月,ODPS(即现在的MaxCompute)大数据平台飞天项目正式启动。2010年10月,阿里巴巴集团自主研发的第一代云计算平台稳定运行。2013年8月,平台的单集群规模已达到5000台。2014年7月,平台开始对外提供服务,完全替换...
背景信息 项目管理员创建一个项目成员后,项目成员可以创建数据源,并在项目中添加数据源中的数据库后,即可进行数据库变更任务。系统管理员在 Web 版 ODC 中创建项目,并为该项目指定成员。系统管理员或者拥有新建数据源角色权限的项目...
步骤二:订阅账单数据 在 大数据分析>数据订阅管理 区域,根据需要订阅相应账单数据,订阅后,相关账单数据会同步至指定的MaxCompute表。说明 该操作需要当前登录账号为账单分析指定的DataWorks工作空间(即步骤一中,由平台统一创建的工作...
但是当项目进入稳定发展的阶段后,数据安全将成为项目管理方面极为重要的一部分。因此,您需要自查和调整权限,提升项目数据安全性。权限自查 您可以从如下方面检查权限信息。类别 检查点 检查内容 账号及权限 账号数量统计 统计MaxCompute...
当前支持的项目角色有:项目管理员、开发者、运维、分析师、访客。不同项目角色的权限等级不一样,可以按照实际情况进行项目角色授予,能更好保护项目内数据的安全。同时项目角色支持客户自定义,可以按照企业的管理制度和实际情况自定义...
通常,大数据系统中的工作流涉及多部门、多责任人且跨系统的数据,如何才能协调好这些业务系统准时、保质保量地产出数据,避免出现因业务系统宕机/脏数据导致数据延时产出、产出脏数据,关乎到企业数据业务的连续性问题甚至高层的信任问题...
本文为您介绍连接并处理MaxCompute项目数据工具的应用场景、运行环境要求以及使用指引。您可根据业务需要和相应准备的环境,选择合适的连接工具。前提条件 已创建MaxCompute项目。更多创建MaxCompute项目操作,请参见 创建MaxCompute项目。...
MaxCompute作为大数据平台,对业务数据是否有好的监控手段?MaxCompute的项目发挥什么作用?如何获取MaxCompute中的Accesskey_ID和AccessKey_Secret?现有账号的AccessKey被禁用,创建一个新的AccessKey,会对之前AccessKey创建的周期性...
您可以登录 MaxCompute控制台,左上角切换地域后,即可在 项目管理 页签查看到具体的MaxCompute项目名称。interactiveMode:可选。查询加速功能开关。如果您需要启用查询加速功能,在URL后追加&interactiveMode=true 配置即可。更多查询...