大数据中台实施-大数据中台实施文档介绍内容-阿里云

数据防泄漏典型案例

使用数据安全中心可以监测和防范各类数据泄露风险，例如身份...处理方法：通过数据安全中心控制台的数据审计>日志分析页面中的审计日志持续监控后续行为，观察是否有违规行为。相关文档查看审计日志发现和处理异常告警自定义检测模型

产品简介

大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...

我的看板

数据来源在工作台中创建并发布的数据看板内容，会同步在此处展示，若数据看板仅编辑完成，但是未发布，则在此处不展示。如需编辑某一看板内容，请单击页面右上角的前往可视化工作台，编辑并发布对应数据看板后，刷新当前页面即可。操作...

资产大盘

数据管理DMS 的资产大盘功能支持T+1离线汇总当前 DMS 租户下的所有实例、数据库、表数据，并图形化展示数据资产...查看数据资产的详细信息您可以在控制台顶部菜单栏中，选择数据资产>实例管理，查看已有实例、数据库等数据资产的详细信息。

添加DataWorks数据服务数据源

本文介绍在DataV中添加DataWorks数据服务数据源，并将通过DataWorks数据表生成的API，快速地展示在DataV可视化大屏中的方法。前提条件已准备好待添加的DataWorks数据服务数据源。背景信息 DataWorks数据服务生成的API默认不支持HTTPS协议...

备份大小

备份大小=数据备份的大小+日志备份的大小查看备份大小登录云数据库专属集群控制台。在页面左上角，选择目标地域。在左侧导航栏中，选择实例列表>MySQL。找到目标实例，单击操作列的详情。在基本信息页面右下角，查看备份大小。...

受众与核心能力

同时，DataWorks持续打造符合企业级数仓、数据中台构建要求的功能模块，为企业业务的数字化转型提供支持。产品受众从事数据开发、算法开发等岗位的技术人员从事销售运营、商业智能分析等岗位的业务人员从事数据安全与合规工作的管理人员...

创建DataHub项目

阿里云流数据处理平台DataHub是流式数据（Streaming Data）的处理平台，提供对流式数据的发布（Publish），订阅（Subscribe）和分发功能，让您可以轻松构建基于流式数据的分析和应用。前提条件您已经完成了创建RDS MySQL数据库表。操作...

添加 MySQL 数据源的白名单

复制 OMS 控制台添加数据源对话框中显示的 OceanBase 数据传输服务器的 IP 地址。在安全组详情页面的访问规则>入方向区域，单击快速添加。您也可以选择手动添加，手动输入端口范围、授权对象等信息。在快速添加对话框，粘贴复制...

创建数据源

概述您可以通过以下方式创建 OceanBase 开发者中心（OceanBase Developer Center，ODC）数据源：ODC 首页中创建数据源：进入 ODC 首页后，单击新建连接按钮创建数据源。公有云实例中创建数据源：公有云的实例中，单击登录数据库，输入...

可观测性能力

在控制台目标实例详情页的 CloudDBA>实时Top Key统计页签中，进行热Key与大Key分析，更多信息请参见实时Top Key统计。离线全量Key分析离线全量Key分析功能支持全数据结构、全实例架构及 Tair 各个版本的离线RDB备份文件解析，对线上...

可观测性能力介绍

您可以通过云数据库Redis版的实时Top Key统计功能，帮助定位热Key与大Key，实时Top Key统计功能支持实时展示实例中的热Key和大Key信息，同时支持查看4天内大Key和热Key的历史信息。实时Top Key统计功能准确性高，且对性能几乎无影响...

发展历程

关键性里程碑 2009年9月，ODPS（即现在的MaxCompute）大数据平台飞天项目正式启动。2010年10月，阿里巴巴集团自主研发的第一代云计算平台稳定运行。2013年8月，平台的单集群规模已达到5000台。2014年7月，平台开始对外提供服务，完全替换...

构建数据仓库

DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库本场景推荐的架构如下。适用行业：全行业...

管理数据看板

进入恢复模式重要当您编写的过滤器有问题（例如死循环导致的看板卡顿）、数据源配置有问题（例如返回的数据量过大导致的看板卡顿）或自定义组件有逻辑问题等其他原因导致数据看板无法编辑时，使用恢复模式进入，可以删除掉带来问题的内容...

概述

解决方案 T+1全量同步一键建仓是指通过DLA控制台配置数据源（RDS、PolarDB for MySQL、MongoDB数据源、ECS自建数据库数据）和目标OSS数据仓库，系统按照您设定的数据同步时间自动、无缝的帮您把数据源中的数据同步到目标数据仓库OSS中，...

添加 Oracle 数据源的白名单

复制 OMS 控制台添加数据源对话框中显示的 OceanBase 数据传输服务器的 IP 地址。在安全组详情页面的访问规则>入方向区域，单击快速添加。您也可以选择手动添加，手动输入端口范围、授权对象等信息。在快速添加对话框，粘贴复制...

添加 OceanBase 数据源的白名单

复制 OMS 控制台新建数据源对话框中显示的 OceanBase 数据传输服务器的 IP 地址。在安全组详情页面的访问规则>入方向区域，单击快速添加。在快速添加对话框中，粘贴复制的 IP 地址至授权对象，任意选择一个端口范围。单击确定。

添加 Kafka 数据源的白名单

复制 OMS 控制台添加数据源对话框中显示的 OceanBase 数据传输服务器的 IP 地址。在安全组详情页面的访问规则>入方向区域，单击快速添加。您也可以选择手动添加，手动输入端口范围、授权对象等信息。在快速添加对话框，粘贴复制...

操作指南

一、大数据专家服务流程指南二、服务流程说明用户可以根据自己实际需要，提前或者在问题发生时购买大数据专家服务，服务项包含大数据技术架构方案咨询、大数据解决方案POC、大数据搬站迁云方案咨询、跨地域迁移支持服务、大数据专家高阶...

数据扫描和识别

在 DSC 扫描数据的过程中，已经完成扫描的阶段性结果，会在数据安全中心控制台概览页面展现。更多信息，请参见控制台概览。DSC 对于非结构化数据源（OSS）的扫描机制是怎样的？DSC 对非结构化数据源中存储的内容进行扫描，根据扫描结果...

数据服务入门

进入数据服务登录 DataWorks控制台，单击左侧导航栏的数据服务，在下拉框中选择对应工作空间后单击进入数据服务。操作流程步骤一：创建数据源并配置网络连通性使用数据服务创建API前，需先将您的数据库或数据仓库添加为DataWorks数据...

查询多个备份集

数据库备份服务DBS支持在单个备份计划下查询多个备份集，本文向您介绍如何查询多个备份集数据。前提条件目标数据库为MySQL、SQL Server、Oracle、PostgreSQL、PolarDB分布式版，且备份方式为逻辑备份。说明包含自建数据库、RDS云数据库...

EMR+DLF数据湖解决方案

步骤三：初始化数据初始化数据一般常见的几种情况如下：已有大数据集群，需要进行数据迁移，此时可以考虑通过 Jindo DistCp 工具将老集群的数据迁移到OSS中。从RDS/MySQL/Kafka 等业务系统接入数据，此时可以考虑通过实时计算Flink实现...

添加DataWorks数据服务数据源

本文介绍在DataV中添加DataWorks数据服务数据源，并将通过DataWorks数据表生成的API，快速地展示在DataV可视化大屏中的方法。前提条件已准备好待添加的DataWorks数据服务数据源。背景信息 DataWorks数据服务生成的API默认不支持HTTPS协议...

DataWorks模块使用说明

使用流程概览：参考文档：数据集成概述数据建模与开发子模块：数据建模功能说明：数据建模是全链路数据治理的第一步，沉淀阿里巴巴数据中台建模方法论，从数仓规划、数据标准、维度建模、数据指标四个方面，以业务视角对业务的数据进行...

数仓规划概述

数仓规划是基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前，需要完成数据仓库的规划，包括定义数据板块、项目、数据源、计算源和统计周期。功能介绍数仓规划包括逻辑空间与物理空间...

通过DataV展示数据

在设置数据源面板中，选择数据源类型为数据库，已有数据源为第一步中创建的数据源。在 SQL 脚本编辑区域，输入以下SQL语句。SELECT count(*)/100 as value FROM target_table where dts_operation_flag='I' 单击数据响应结果右侧的...

实施步骤

数据源添加成功后，新添加的数据源自动显示在数据源列表中。步骤三：创建可视化应用登录 DataV管理控制台。单击我的可视化。此实例选择 PC端创建方式进行创建。选择销售实时监控，单击创建项目。输入数据大屏名称，单击创建。步骤四...

功能简介

AnalyticDB PostgreSQL版的企业数据智能平台是数据资产定义、加工、管理、服务的全流程平台，提供数据同步、数据查询、数据建模、数据开发、质量评估、资产管理等功能，为智能数据应用持续稳定供给全量、标准、干净、智能的数据资源。...

从MaxCompute迁移至RDS MySQL

说明若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的中单击，返回至旧版数据传输控制台。在左侧导航栏，单击数据迁移。在迁移任务列表页面顶部，选择迁移的目标集群所属地域。配置迁移任务的源库和目标库连接信息。...

图层配置项说明

数据图元组件、栅格瓦片、地形瓦片、三维瓦片和其他：在这五个类型图层数据面板中，数据配置和普通图表组件一致，可配置静态数据源、API数据源和空间构建数据源内容，还可将图层数据接口作为区块数据接口，在可视化应用中配置更丰富的...

准备环境

鼠标悬停至顶部菜单栏中的产品，单击 大数据计算>云原生大数据计算服务MaxCompute，进入MaxCompute产品详情页。单击立即开通。在购买页面，选择地域，并选中服务协议，单击确认订单并支付。说明购买页面默认提供的规格类型为...

数据归档概述

当线上数据库中的历史数据（访问率很低的数据）越来越多，占用的存储越来越大，以至于会影响数据库的查询性能与业务运转，此时您可以使用数据管理DMS 的数据归档功能，周期性地将指定表的数据归档至其他数据库或存储服务中。同时，该功能...

基本介绍

2016.11 内部机器规模达到1万台，作为中台服务高德、优酷、文娱等全经济体。2017.8 HBase社区版在阿里云商业化，正式服务云上企业级客户。2018.7 云原生多模数据库Lindorm-2.0发布，内部引擎大幅升级优化，实现性能7倍于开源HBase。2019.8 ...

轮播页面

数据源单击配置数据源，可在设置数据源面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见配置资产数据。数据过滤器数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击添加过滤器...

新零售：特步

业务架构客户价值基于 PolarDB-X+RDS的分布式数据库解决方案+业务中台提升客户数据链路的时效性以及客户业务系统的吞吐能力，使订单、库存、商品、销售的数据能实时从业务端到业务中台再到报表系统做销售业务决策。基于 PolarDB-X+RDS的...

功能特性

此外，OceanBase 数据库支持超大规模集群（节点超过 1500 台，最大单集群数据量超过 3 PB，单表数量达到万亿行级别）动态扩展，在 TPC-C 场景中，系统扩展比可以达到 1:0.9，使用户投资的硬件成本被最大化的利用。高可用 OceanBase 数据库...

恢复数据

前提条件实例已产生备份集，您可以在GDB控制台中，获取当前实例的数据备份信息。更多信息，请参见查看备份文件列表。注意事项数据恢复仅支持将备份数据恢复至另一个新建GDB实例中，不支持将备份数据恢复至当前实例。操作步骤登录图...

数据库管理

创建数据库登录 PolarDB控制台。在控制台左上角，选择地域。单击目标集群ID。在左侧导航栏中，选择配置与管理>数据库管理。单击创建数据库。在创建数据库对话框中，设置以下参数。参数说明数据库（DB）名称以字母开头，以字母或...

大数据中台实施

新品推荐