产品简介
大数据搬站迁云方案咨询 为客户提供原大数据系统上云迁移方案咨询服务，包括云上大数据搬站架构规划、设计迁云方案服务。大数据专家高阶培训 提供针对大数据建设、管理、治理相关的高阶能力培训，涵盖离线/实时数仓体系建设管理、数仓建模...
构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
常见问题
数据湖后端存储使用OSS，用户使用数据湖构建面向大数据分析和机器学习场景可以获得集中式权限管理和统一的元数据视图，更容易对接云上大数据和分析产品。什么情况下我需要使用数据湖构建？在云上有数据分析和机器学习需求，希望构建云上的...
客户案例
互联网行业：快狗打车云上大数据仓库 客户架构如下。客户简介 快狗打车则一直坚持通过“连接网络化”、“运力共享化”、“过程数据化”、“匹配智能化”等数字信息化解决方案，将闲散运力统一整合到平台上，通过大数据将运力精准匹配市场...
管理数据库资产
添加数据库后，您需要进行以下操作：您必须在已添加的数据库服务器上部署数据库审计的Agent程序，才能使数据库审计服务收集目标数据库的访问流量信息。具体操作，请参见 安装Agent。您可以为已添加的数据库配置审计规则，使命中规则的审计...
概述
DataWorks的安全中心作为云上大数据体系的安全门户，致力于向您提供面向数据安全生命周期全过程的安全能力，同时在符合安全规范要求的前提下，提供各类安全诊断的最佳实践。其核心功能如下：数据权限管理 安全中心为您提供精细化的数据权限...
金融云产品列表
部署 部署 部署 部署 云企业网 部署 部署 部署 部署 块存储 EBS 部署 部署 部署 部署 文件存储 NAS 部署 部署 部署 部署 ESSD云盘 部署 部署 部署 部署 对象存储 OSS 部署 部署 部署 部署 函数计算 FC 部署 无 无 无 表格存储Tablestore ...
高可用架构部署方案
相较于使用单台ECS实例部署数据库与应用，高可用架构只需简单部署，并且拥有更高的稳定性和可扩展性。高可用架构特点 高可用架构具有如下特点：使用多可用区高可用版的负载均衡CLB（Classic Load Balancer）对多台云服务器ECS进行流量分发...
部署方案
双机房部署仍具备机房级容灾能力，与多机房部署相比在性价比上有较大提升。单机房部署 云数据库 OceanBase 单机房部署将所有节点位于同一可用区，具备主机级别故障容灾能力。此外单机房部署还具备如下优点：两个全能型副本同时提供读写能力...
数据源配置常见问题
DataV能否连接在ECS或其他机器上部署的数据库？可以。需要开放您数据库的公网IP，但目前不支持白名单。如果考虑到安全性，可以使用阿里云提供的代理工具连接数据库，具体请参见 如何使用DataV Proxy。在使用数据源时，API、阿里云API网关和...
数据源配置常见问题
DataV能否连接在ECS或其他机器上部署的数据库？可以。需要开放您数据库的公网IP，但目前不支持白名单。如果考虑到安全性，可以使用阿里云提供的代理工具连接数据库，具体请参见 如何使用DataV Proxy。在使用数据源时，API、阿里云API网关和...
什么是EMR on ACK
您可以将开源大数据服务部署在阿里云容器服务Kubernetes版（ACK）之上，利用ACK在服务部署和容器应用管理的优势，减少对底层集群资源的运维投入，以便于您可以更加专注大数据任务本身。形态对比 阿里云EMR提供on ECS和on ACK两种方式，以...
互联网、电商行业离线大数据分析
概述 电商网站的销售数据通过大数据进行分析后，可以在大屏幕展示销售指标、客户指标、销售排名和订单地区分布等业务指标数据。DataV大屏支持可视化动态展示销售数据，触控大屏支持您自助查询数据，极大地提高数据的可读性。应用场景 电商...
A100使用指南
步骤5：部署Agent程序 在数据库审计系统中添加数据库实例后，您必须在数据库服务器上部署Agent程序，才能使数据库审计服务收集目标数据库的访问流量信息，并进行审计。步骤6：查看系统审计结果 完成数据库接入和Agent部署后，您可以在数据...
恢复下载后的备份数据
在待恢复的服务器上部署对应的数据库服务。例如在恢复MySQL数据库前，需要在服务器上安装好对应版本的MySQL服务。备份目标存储类型仅支持DBS内置存储，不支持用户OSS存储。恢复物理备份的下载数据 下载后的备份数据说明 MySQL数据为...
功能特性
使用EMR-CLI自定义部署Gateway环境 EMR on ACK 功能集 功能 功能描述 参考文档 集群管理 创建集群 可以将开源大数据服务部署在阿里云容器服务Kubernetes版（ACK）之上，利用ACK在服务部署和容器应用管理的优势，减少对底层集群资源的运维...
什么是EMR on ECS
EMR on ECS将EMR的大数据处理功能与ECS的容器化部署优势相结合，使得您可以更加灵活地配置和管理EMR集群，从而更好地适应复杂的数据处理和分析场景。通过EMR on ECS，您可以快速创建、管理和运维EMR集群，同时也能够更加高效地使用计算和...
新零售行业解决方案
方案价值：基于阿里云ADAM和 PolarDB PostgreSQL版（兼容Oracle）替代商业版数据库，优化IT的成本结构，每年不但节省大量License授权费用，并且极大地提升了系统可用性 应用和数据库都部署在云上，可以充分利用云资源的弹性能力，解决网络...
百华悦邦
PolarDB PostgreSQL版（兼容Oracle）具有容量大、高性价比...应用和数据库都部署在云上，可以充分利用云资源的弹性能力，解决网络延迟问题，极大提升业务系统的可用性。优化IT的成本结构，将购买外包服务和软件授权的成本转化成云资源的消费。
部署Oracle数据库
本文主要介绍如何在ECS实例上使用云市场镜像部署Oracle数据库。前提条件 已注册阿里云账号。如还未注册，请先完成 账号注册。已在安全组中添加安全组规则放行1521、1158端口，具体操作请参见 添加安全组规则。Windows实例镜像部署Oracle...
Delta Lake概述
Delta数据湖方案如下：在大数据存储层之上提供了数据管理层，该数据管理层等同于数据库中的元数据管理，其元数据随着数据一起存放并对用户可见（例如 图 1 所示）。Delta基于元数据管理引入了ACID，解决了因数据导入失败而产生脏数据和数据...
目标数据库连接性检查
为保障数据迁移任务的顺利执行，在预检查阶段检查DTS服务器是否能够连通要迁移的目标数据库。本文将介绍目标数据库连接性检查失败可能的原因及修复方法。当目标数据库连接性预检查失败时，可能是以下几种原因。数据库账号或数据库密码不...
应用场景
实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线，您可以实时接入APP、WEB、IoT和数据库等产生的异构数据，统一管理，并投递到下游的分析、归档等系统，构建清晰的数据流，让您更好的释放数据的价值。...
自建Oracle间的数据迁移
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
产品概述
什么是E-MapReduce 开源大数据开发平台E-MapReduce（简称EMR），是运行在阿里云平台上的一种大数据处理的系统解决方案。EMR基于开源的Apache Hadoop和Apache Spark，让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理...
产品简介
开源大数据开发平台E-MapReduce（简称EMR）是运行在阿里云平台上的一种大数据处理系统解决方案。EMR基于开源的Apache Hadoop和Apache Spark，让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理数据。EMR还可以与阿里云...
产品架构
EMR自研能力 为让开源大数据组件和服务更好的运行在阿里云技术设施上，EMR自研了如下组件：数据应用平台，提供交互式开发、作业提交、作业调试和工作流一站式数据开发体验，详情请参见 EMR Studio概述。Shuffle Service是EMR在优化计算引擎...
快速体验
DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力，本文以一个零售电商行业的数仓搭建实验为例，为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现，帮助您深入了解阿里云...
多活架构介绍
中间件、数据库跨机房主备部署，数据单点写避免考虑数据一致性问题。异地双活 两个数据中心间的距离没有限制。应用、中间件、数据库多地域冗余部署，同时对外提供服务。业务流量带标，按路由规则分流，流量在数据中心（RPC、MQ、DB）内闭环...
DataWorks On EMR使用说明
背景信息 开源大数据开发平台E-MapReduce（简称EMR），是运行在阿里云平台上的一种大数据处理的系统解决方案。EMR基于开源的Apache Hadoop和Apache Spark，让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理数据。阿里云...
AnalyticDB MySQL 2.0数据导入
完全部署在阿里云数据库管控平台上，更加稳定、安全。数据迁移场景 MaxCompute中存在原始数据，可以通过外表将MaxCompute中的历史数据导入到 数仓版（3.0）中。具体操作，请参见 通过外表导入至数仓版。MaxCompute中已经没有原始数据，原始...
新零售：杭州数云信息技术有限公司
数云客户业务是天猫CRM系统提供商，客户数据库的部署模式是多租户部署，即每个实例上会部署一个或多个数云的客户的数据，因此数云使用的数据库实例数据量都比较大，较大的实例存储容量一般在2 TB~3 TB左右，约有上百个实例来满足该业务需求...
DataWorks on EMR数据安全方案
在大数据领域，阿里云为企业用户提供了一整套数据安全方案，包含用户认证、数据权限、大数据作业管理体系等。本文以联合使用DataWorks与EMR为例，为您介绍DataWorks on EMR场景下的数据安全方案。背景信息 DataWorks on EMR目前支持LDAP...
全球数据库市场发展与机遇
云数据库天然具备云上灵活性，能够提供强大的创新能力、丰富多样的产品体系、经济高效的部署方式和按需付费的支付模式，符合当下企业的市场需求和应用场景。Gartner 2016年数据显示，四大厂商的关系型数据库超越90%的市场规模，一度占据了...
账单数据订阅及查询分析
DataWorks及MaxCompute：DataWorks基于MaxCompute等大数据引擎，支持您在线进行SQL分析、业务洞察、编辑和分享数据，以及将查询结果保存为可视化图表卡片，快速搭建可视化数据报告。订阅账单数据后，用户中心会将相关账单数据同步至指定...
云产品集成
您可以使用 DMS 录入云数据库 OceanBase 的数据，通过 DMS 的全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。什么是数据管理DMS 支持的数据库...
自助建站方式汇总
应用类型 部署方式 说明 部署并使用Docker 安装Docker并使用（Linux）本文介绍如何在Alibaba Cloud Linux/CentOS 7.x/CentOS 8.x操作系统的ECS实例上部署并使用Docker，适用于熟悉Linux操作系统，刚开始使用阿里云ECS的开发者。部署和管理...
受众与核心能力
产品定位 DataWorks致力于为数据开发者、数据分析师、数据资产管理者，打造一个具备开放自主开发与全栈数据研发能力的一站式、标准化、可视化、透明化的智能大数据全生命周期云研发平台。DataWorks赋予用户仅通过单一平台，即可实现数据...
EMR Studio概述
EMR Studio作为一款云上产品，支持与数据湖构建（DLF）和对象存储（OSS）等云上产品对接，构建云原生大数据产品架构。您可以在创建EMR Studio时指定OSS bucket路径，EMR Studio将自动备份作业代码和作业日志，并可以通过该路径提交Airflow ...
业务连续性
跨地域主备容灾 应用的主备切换 为了避免地域级别的故障造成业务中断，在某个边缘节点上部署应用之外，还应该在其他边缘节点或公共云地域部署备份应用。您可以借助 全局流量管理服务，在出现地域级别故障时，自动将域名解析指向到其他地域...
- 产品推荐
- 这些文档可能帮助您