云计算与大数据环境-云计算与大数据环境文档介绍内容-阿里云

普通集成

企业服务 大数据搜索与分析日志服务 大数据计算 云原生大数据计算服务 大数据（数加）Data Lake Analytics Databricks数据洞察 Elasticsearch Elasticsearch Serverless服务 Quick BI 实时数仓 Hologres 数据湖构建存储服务网盘与相册...

金融云产品列表

云安全中心部署部署部署部署 Web应用防火墙 WAF 部署部署部署部署云原生大数据计算服务MaxCompute 无部署部署无 大数据开发治理平台 DataWorks 无部署部署无 DataV数据可视化无无部署无机器学习PAI 无无部署无视频...

附录一：运维服务产品清单

Elasticsearch elasticsearch 大数据大数据计算大数据计算服务 odps 大数据大数据计算实时计算Flink版 sc 大数据大数据计算 E-MapReduce emapreduce 大数据大数据计算数据总线 datahub 云计算基础存储服务对象存储 oss 云计算基础...

支持的云服务

AnalyticDB for MySQL 云原生数据仓库 AnalyticDB MySQL 版（AnalyticDB for MySQL）是海量数据实时高并发在线分析（Realtime OLAP）云计算服务，与MaxCompute结合应用于大数据驱动业务系统的场景。通过MaxCompute离线计算挖掘，产出高质量...

Quick BI

如果Quick BI与 云数据库ClickHouse 集群不在同一VPC内，请先为 云数据库ClickHouse 集群申请外网地址。具体操作，请参见申请和释放外网地址。使用限制仅支持空间管理员和开发者的账号添加数据源。仅专业版和高级版的群空间支持创建...

API概览

本产品（云数据库 ClickHouse 版/2019-11-11）的OpenAPI采用 RPC 签名风格，签名细节参见签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足...

解决云数据库 OceanBase 连接问题

检查 ECS 客户端与云数据库 OceanBase 租户 VPC 内网连接情况下，需保证访问的客户端 VPC 与云数据库 OceanBase 集群内被访问租户的 VPC 相同，保证网络畅通。说明此场景是指跨 VPC 之间网络访问未通过特殊手段连接的情况，内网标准访问时...

新建工作组

开发、生产云计算资源隔离，权限隔离，对生产环境的数据读写权限、任务上线发布进行严格权限控制，更加安全可靠。如果创建工作组时选择了归属组织，那么成员管理中添加的成员就是该组织下的成员。设置完成后，单击确定。相关操作工作组...

限制说明

数据大小 云数据库 Memcache 版支持的单条缓存数据的 Key 最大不超过 1 KB，Value 最大不超过 1 MB，过大的数据不适合存储。事务支持 云数据库 Memcache 版不支持事务，有事务性要求的数据不适合写入，而应该直接写入数据库。使用场景当...

导入数据

本文以导入On Time数据集至clickhouse_demo数据库的分布式表ontime_local_distributed为例，介绍如何使用客户端clickhouse-client工具导入数据到 云数据库ClickHouse。前提条件已完成快速入门系列的如下步骤。新建集群创建账号设置白...

产品架构

计算与存储分离 PolarDB 采用计算与存储分离的设计理念，满足公共云计算环境下根据业务发展弹性扩展集群的刚性需求。数据库的计算节点（Database Engine Server）仅存储元数据，而将数据文件、Redo Log等存储于远端的存储节点（Database ...

产品架构

计算与存储分离 PolarDB 采用计算与存储分离的设计理念，满足公共云计算环境下根据业务发展弹性扩展集群的刚性需求。数据库的计算节点（Database Engine Server）仅存储元数据，而将数据文件、Redo Log等存储于远端的存储节点（Database ...

内置时空数据引擎Ganos

PolarDB PostgreSQL版（兼容Oracle）内置了时空数据库引擎Ganos，可对空间/时空数据进行高效的存储、索引、查询...Ganos将逐步沉淀基础时空云计算能力到云计算基础平台，赋能ISV厂商，推动时空云计算作为数字化转型的基础引擎普惠到更多客户。

云产品集成

常见云产品如下：大数据开发治理平台 DataWorks 实时计算 Flink 版数据库管理 DMS DataV 数据可视化 Quick BI 数据分析与展现前提条件已获取 OceanBase 数据库的基本连接信息，详细步骤请参见获取连接参数。大数据开发治理平台 ...

企业版产品系列

计算与存储分离采用计算与存储分离的架构，满足公共云计算环境下根据业务发展弹性扩展集群的刚性需求。数据库的计算节点仅存储元数据，而将数据文件、Redo Log等存储在共享分布式存储（PolarStore）的数据库存储节点中。各计算节点之间仅...

如何排查无法连接MongoDB实例的问题？

检查网络环境 云数据库MongoDB支持私网和公网两种连接方式，不同网络环境需满足以下条件才能连接云数据库MongoDB实例：私网：确保实例处于同一个地域、实例的网络类型相同且私网连接地址正确。若实例的网络类型都是专有网络（VPC），您还...

MaxFrame概述

MaxFrame可直接引用Numpy、SciPy、Pandas、Matplotlib等第三方库进行科学计算、数据分析、可视化等操作，降低用户操作成本。更高的处理性能 MaxFrame可直连MaxCompute数据，运行时无需将数据拉取至本地计算，消除了不必要的本地数据传输，...

产品架构

分布式文件系统 LDFS（Lindorm DFS，也称为Lindorm文件引擎）是面向云基础存储设施设计、兼容HDFS协议的分布式存储系统，并同时支持运行在本地盘环境，以满足部分大客户的需求，向多模引擎和外部计算系统提供统一的、与环境无关的标准接口...

什么是PolarDB MySQL企业版

计算与存储分离 PolarDB 采用计算与存储分离的设计理念，满足公共云计算环境下根据业务发展弹性扩展集群的刚性需求。数据库的计算节点（Database Engine Server）仅存储元数据，而将数据文件、Redo Log等存储于远端的存储节点（Database ...

基本概念

J 计算引擎与Lindorm存储引擎深度融合，基于云原生架构提供的分布式计算服务，满足用户在数据生产、交互式分析、机器学习和图计算等场景的计算需求，兼容开源Spark标准接口。更多信息，请参见计算引擎介绍。JDBC Java Database ...

产品系列

云原生多模数据库 Lindorm 包括五个系列：Lindorm、Lindorm轻量版、Lindorm AIGC体验版、Lindorm单节点和Lindorm Tunnel通道服务。本文介绍各产品系列的适用场景和查看方法。产品系列说明创建云原生多模数据库 Lindorm 实例时，可以根据...

Pandas API支持

MaxFrame提供了兼容Pandas的API接口，您可以用类似于Pandas的方式来操作MaxCompute中的数据，同时利用MaxCompute强大的分布式计算能力，简化您在大数据环境下的数据处理工作，本文为您介绍Pandas API的支持情况。当前MaxFrame支持的API详情...

客户案例

MaxCompute已被广泛应用于各大领域处理云上大数据，帮助众多企业解决了海量数据分析问题，同时降低企业运维成本，企业人员可更专注于业务开发。本文为您介绍MaxCompute的精选客户案例。MaxCompute的全量客户案例信息，请参见行业客户案例...

什么是云原生数据湖分析

云原生数据湖分析（简称DLA）是新一代大数据解决方案，采取计算与存储完全分离的架构，支持数据库（RDS\PolarDB\NoSQL）与消息实时归档建仓，提供弹性的Spark与Presto，满足在线交互式查询、流处理、批处理、机器学习等诉求，也是传统...

产品概述

高度可扩展相比传统单机关系型数据库，PolarDB-X 1.0 采用分层架构可确保在并发、计算、数据存储三个方面均可线性扩展，通过增加 PolarDB-X 1.0 计算资源与存储资源以达到水平扩展效果。相比基于分布式存储的新型Cloud Native数据库，理论...

基于Flink的资讯场景实时数仓

实时计算实时计算（Alibaba Cloud Realtime Compute）是阿里云提供的基于Apache Flink构建的企业级大数据计算平台。在PB级别的数据集上可以支持亚秒级别的处理延时，赋能用户标准实时数据处理流程和行业解决方案；支持Datastream API作业...

政务云迁移实践

阿里云电子政务云为政府单位提供更安全、更...例如为IT系统运行在阿里云的客户，提供云计算与新技术应用规划、架构、容器及微服务设计等全方位咨询、架构最佳实践指导。此外，阿里云提供多种专业高效的迁移工具，例如DTS、在线迁移服务等。

功能概览

确保客户本地机房出现故障、虚拟机宕机、生产系统数据发生误删、勒索病毒等事故时可以从云上的备份库将虚拟机整机恢复到本地VMware环境、阿里云VMware服务或阿里云ECS，实现业务系统的容灾，保障数据安全性和业务连续性。重要该功能使用...

什么是物联网边缘计算

同时，物联网边缘计算可以结合阿里云的大数据、AI学习、语音、视频等能力，打造出云边端三位一体的计算体系。视频介绍物联网边缘计算的核心功能如下：边缘实例边缘实例提供一种类似文件夹的管理功能，您可以通过实例的方式管理边缘端...

阿里云MaxCompute数据源

本文介绍 云数据库 SelectDB 版与阿里云MaxCompute数据源进行对接使用的流程，帮助您对阿里云MaxCompute数据源进行联邦分析。概述云原生大数据计算服务(MaxCompute)是一种快速、完全托管的TB/PB级数据仓库解决方案。MaxCompute向用户提供...

常见术语

云原生数据湖分析（简称DLA）是新一代大数据解决方案，采取计算与存储完全分离的架构，支持数据库（RDS\PolarDB）与消息实时归档建仓，提供弹性的Spark与Presto，满足在线交互式查询、流处理、批处理、机器学习等诉求，也是传统Hadoop方案...

行业趋势与背景

专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题，历经各届天猫双十一及阿里云各行业客户业务的考验，助力企业加速完成业务数字化转型。PolarDB-X 核心能力通过标准关系型数据库技术实现，配合完善的管控运...

阿里云电子政务云产品全家福

阿里云电子政务云平台价格与华北2公共云同等配置价格相同数据传输数据传输服务（Data Transmission Service）DTS支持关系型数据库、NoSQL、大数据（OLAP）等数据源间的数据传输。它是一种集数据迁移、数据订阅及数据实时同步于一体的数据...

关于我们

国家标准《个人信息去标识化效果分级评估规范》国家标准《信息安全技术多方数据融合计算安全指南》行业标准《基于安全多方计算的数据计算平台技术要求与测试方法》行业标准《基于可信执行环境的数据计算平台技术要求与测试方法》行业标准...

2023年

2023年12月28日-MaxCompute升级公共云Endpoint 尊敬的MaxCompute用户：感谢您对云原生大数据计算服务MaxCompute的支持，MaxCompute将于北京时间2024年1月4日对华北2（北京）、华东2（上海）、华东1（杭州）、华南1（深圳）、华北3（张家口...

减灾与应急时空解决方案与案例

公司主营OpenRIS灾害风险大数据平台提供了海量灾害数据的快速地图展示、统计查询、切割下载、上传数据定制化在线分析等功能，实现了灾害数据与模型一体化云服务。在数据与系统上云过程前，遇到了如下挑战：长期积累的时空数据类型多、数据...

产品系列

适用场景包含构建海量数据实时写入和复杂ETL计算的实时数据仓库、大数据量的复杂查询、历史数据分析、日志分析等业务场景。数仓版（3.0）弹性模式包括两种形态：单机版和集群版。单机版单机版即单节点部署，不具备分布式能力。单机版支持...

将云消息队列 Kafka 版的数据迁移至MaxCompute

本文介绍如何使用DataWorks数据同步功能，将云消息队列 Kafka 版集群上的数据迁移至阿里云大数据计算服务MaxCompute，方便您对离线数据进行分析加工。前提条件在开始本教程前，确保您在同一地域中已完成以下操作：云消息队列 Kafka 版 ...

云数据库服务协议

使用云数据库ClickHouse产品的用户与阿里云计算有限公司（简称“阿里云”）共同遵守《云数据库服务协议》，详细协议内容请参见云数据库ClickHouse服务等级协议。

云计算与大数据环境

新品推荐