原生大数据计算服务 MaxCompute

原生大数据计算服务(MaxCompute)是一种快速、完全托管的TB/PB级数据仓库解决方案。MaxCompute向用户提供了完善的数据导入方案以及多种经典的分布式计算模型,能够更快速的解决用户海量数据计算问题,有效降低企业成本,并保障数据安全。

函数

MaxCompute为您提供了SQL计算功能,您可以在MaxCompute SQL中使用系统的 内建函数 完成一定的计算和计数功能。但当内建函数无法满足要求时,您可以使用MaxCompute提供的Java或Python编程接口开发自定义函数。内建函数:可以简化SQL查询的...

服务授权

在没有您授权的情况下,阿里的售后团队和云数据库MongoDB开发团队只能查看MongoDB实例资源、资费性能相关的信息。例如,云数据库MongoDB实例的购买时间到期时间,云数据库MongoDB的CPU、内存、存储空间的使用情况等。若您需要阿里...

缓存数据持久化

当您使用云数据库RDS MySQL并需要提升数据处理速率降低访问延迟时,阿里为您提供了缓存数据持久化的高效方案,该解决方案通过整合云数据库Redis与RDS、云数据库Memcache与RDS协同工作,确保数据的高速访问持久化存储,具备高吞吐、低...

通过Hive访问数据库HBase

云数据库HBase支持通过Hive读写数据,本文介绍如何配置Hive并读写云数据库HBase的数据。前提条件 已将Hive所在的Hadoop集群所有的节点的IP加入到云数据库HBase实例的白名单中,具体操作请参见 设置白名单。已获取云数据库HBase的zookeeper...

连接实例

云数据库 SelectDB 版 采用MySQL网络连接协议,支持兼容MySQL生态的命令行工具、JDBC/ODBC驱动可视化工具等连接 云数据库 SelectDB 版 实例。本文介绍如何通过MySQL协议连接 云数据库 SelectDB 版 实例。前提条件 目标 云数据库 SelectDB...

如何解决由网络环境导致的实例连接失败问题?

如果云服务器ECS实例和云数据库MongoDB实例的网络类型都是专有网络,您还需要查看云服务器ECS实例和云数据库MongoDB实例的专有网络ID是否相同。查看云服务器ECS实例的专有网络ID。登录 ECS管理控制台,在左侧导航栏选择 实例与镜像>实例。...

从SLS同步

本文介绍如何使用日志投递功能从日志服务(SLS)同步数据云数据库ClickHouse。注意事项 云数据库ClickHouse的企业版集群在2021年12月份之后创建的社区兼容版集群不支持日志投递功能。云数据库ClickHouse目前不支持数组类型的数据。支持...

新建工作组

工作组是 企业数据智能平台 进行数据研发的基本单元,用于数据隔离的命名空间,通常为一个用户组、一个项目或一个应用。在使用 企业数据智能平台 时,可以通过创建工作组来隔离数据,对数据进行分域管理,以达到各工作组之间空间隔离的效果...

授权信息

本文为您介绍 原生大数据计算服务 MaxCompute(MaxCompute)为RAM权限策略定义的操作(Action)、资源(Resource)条件(Condition)。原生大数据计算服务 MaxCompute(MaxCompute)的RAM代码(RamCode)为 odps,支持的授权粒度为 ...

功能简介

数据查询为用户提供对云计算资源中物理表基本情况的概览能力,帮助用户直观了解物理表基础信息、字段内容分布等情况,建立对数据表的宏观理解,为建立数据标准、定义数据模型、定义数据加工逻辑等工作提供基础依据。数据导入 支持512 MB...

云计算资源类型

通过了解质量评估支持的云计算资源类型,并在系统设置模块添加质量评估需要使用的云计算资源类型对应资源,以备在运行质量检测计划时使用。本文介绍质量评估模块支持的云计算资源类型。质量规则 支持的云计算资源类型:MaxCompute Hive ...

云计算资源类型

数据服务API 数据服务API支持的云计算资源类型为:ApsaraDB for RDS、ApsaraDB for RDS VPC、AnalyticDB MySQL、AnalyticDB MySQL 2.0、AnalyticDB PostgreSQL、MaxCompute、DataHub、Table Store、Object Storage Service、RocketMQ、...

分析计算引擎

面向混合负载的查询执行 羲分析计算引擎也是一代原生数据仓库 AnalyticDB MySQL版 提供一体化的数仓服务重要内核。面向海量数据原生数仓需要满足不同的数据分析场景,包括在线报表,在线交互式分析,以及ETL等。不同的场景依赖...

整体架构

Transaction Table2.0的增量存储处理架构的特殊设计主要集中在五个模块:数据接入、计算引擎、数据优化服务、元数据管理、数据文件组织,其他部分与MaxCompute通用的架构一致。本文为您介绍Transaction Table2.0的核心架构要点。...

Cloudera CDP 企业数据云平台

企业数据云平台Cloudera Data Platform(简称阿里云CDP),是阿里云Cloudera联合打造阿里云上的数据平台。

云盘加密

功能说明 在创建加密云盘后,系统将对以下数据进行加密:云盘中的静态数据 实例间传输的数据(不支持加密系统盘数据)从加密云盘创建的所有快照(即加密快照)注意事项 仅在创建 AnalyticDB PostgreSQL版 实例时可以开启云盘加密,...

物理化逻辑表

通过物理化逻辑表,可以将您在 企业数据智能平台 中创建的逻辑表存储到对应的云计算资源中,成为云计算资源或者数据库中实际存在的表,方便实施后面的管理。本文介绍如何物理化逻辑表。前提条件 已生成待物理化逻辑表的DDL语句,具体操作,...

云计算资源类型

云计算资源是 企业数据智能平台 中数据标准字段使用的基础,通过了解数据标准支持的云计算资源类型,并在系统设置模块添加数据标准需要使用的云计算资源类型对应资源,以备在物理化质量校验函数物理化数据字典时使用。本文介绍数据标准...

就绪检测节点

运行属性 运行属性 用于设置数据检测节点的云计算资源所要检测的数据表,关键参数说明如下:参数 说明 云计算资源类型 节点的云计算资源类型。必须与下游节点的云计算资源类型相同。数据结构 数据模型指代您已经在云资源中创建的物理表。...

工作组成员管理

数据变更:可访问工作组内云计算资源的元数据信息和数据信息,同时可对表内容进行变更。添加完成后,单击 确定。编辑成员角色 登录企业数据智能平台。在页面右上角,单击 图标,选择 系统设置。在左侧导航栏,单击 工作组管理。在 工作组...

数仓分层

在阿里巴巴的数据体系中,我们建议将数据仓库分为三层,自下而上为:数据引入层(ODS,Operation Data Store)、数据公共层(CDM,Common Data Model)和数据应用层(ADS,Application Data Service)。数据仓库的分层各层级用途如下图所...

应用场景

数据分析业务 云数据库 Memcache 版搭配大数据计算服务 MaxCompute。实现对大数据的分布式分析处理,适用于商业分析、挖掘等大数据处理场景。通过数据集成服务可自助实现数据云数据库 Memcache 版与 MaxCompute 间的同步,简化数据操作...

数据库 ClickHouse

云数据库ClickHouse是开源列式数据库ClickHouse的上托管服务,数据库内核完全兼容开源社区版本。阿里提供了一套企业级数据库管理平台,增强了数据安全、集群动态扩容、监控运维等企业级功能,与上其他数据产品打通,可以便捷地构建...

连通性检测

本文介绍云数据库HBase连通性检测云数据库HBase网络不通的可能原因。背景信息 云数据库HBase为了保障安全性,不提供Ping的ICMP协议,请不要使用Ping来访问,判断是否连通云数据库HBase,请使用Telnet。平台提供了公网访问及内网访问,...

E

返回 e 的值。此函数为MaxCompute 2.0扩展函数。命令格式 double e()返回值说明 返回DOUBLE类型。使用示例-返回2.718281828459045。select e();相关函数 E函数属于数学函数,更多数据计算数据转换的相关函数请参见 数学函数。

PI

返回π的值。此函数为MaxCompute 2.0扩展函数。命令格式 double pi()返回值说明 返回DOUBLE类型。使用示例-返回3.141592653589793。select pi();相关函数 PI函数属于数学函数,更多数据计算数据转换的相关函数请参见 数学函数。

云计算资源类型

了解数据同步支持的云计算资源类型,以便后续参考使用。本文介绍数据同步支持的云计算资源。单表任务链路 目前系统支持的任务链路如下表所示。说明 对号(√)代表支持,其他则为不支持。目标端支持版本与源端一致。批量任务链路 目前系统...

新建云计算资源

添加云计算资源为使用数据资源平台做数据支撑。以新建ApsaraDB for RDSMaxCompute云计算资源为例,介绍如何新建云计算资源。前提条件 您已经购买ApsaraDB for RDS云计算资源,并完成RDS快速入门,具体操作,请参见 RDS快速入门。您已经...

NEGATIVE

返回表达式的负值。命令格式 TINYINT|SMALLINT|INT|BIGINT|DOUBLE|DECIMAL negative(TINYINT|SMALLINT|INT|BIGINT|DOUBLE|DECIMAL)参数说明 expr:...相关函数 NEGATIVE函数属于数学函数,更多数据计算数据转换的相关函数请参见 数学函数。

POSITIVE

返回表达式的值。命令格式 TINYINT|SMALLINT|INT|BIGINT|DOUBLE|DECIMAL positive(TINYINT|SMALLINT|INT|BIGINT|DOUBLE|DECIMAL)参数说明 expr:必...相关函数 POSITIVE函数属于数学函数,更多数据计算数据转换的相关函数请参见 数学函数。

数据质量管理流程

数据质量管理是通过划分数据资产等级分析元数据的应用链路,对不同资产等级的数据采取相对应的质量管理方式。数据质量管理流程图如下。数据管理流程说明如下:分析业务场景,根据应用的影响程度,确定当前以及生产链路上的数据资产等级。...

ISNAN

判断表达式的值是否为 NaN,如果值为 NaN,返回True,否则返回False。命令格式 boolean isnan()参数说明 expr:必填。DOUBLE类型。...相关函数 ISNAN函数属于数学函数,更多数据计算数据转换的相关函数请参见 数学函数。

数据库 Redis 版

阿里云数据库Redis版是兼容开源Redis协议标准、提供内存加硬盘混合存储的数据库服务,基于高可靠双机热备架构及可平滑扩展的集群架构,可充分满足高吞吐、低延迟及弹性变配的业务需求。

UNHEX

返回十六进制字符串所代表的字符串。此函数为MaxCompute 2.0扩展函数。命令格式 binary unhex(string)参数说明 number:必填。为十六进制字符串。...相关函数 UNHEX函数属于数学函数,更多数据计算数据转换的相关函数请参见 数学函数。

ATAN2

计算 expr1/expr2 的反正切函数。命令格式 double atan2(,)参数说明 expr1:必填。DOUBLE类型。输入为STRING、BIGINT、DECIMAL类型时,会隐式转换为DOUBLE类型后参与运算。expr2:必填。DOUBLE类型。输入为STRING、BIGINT、DECIMAL类型时,...

数据迁移方案概览

RDS提供了多种数据迁移方案,可满足不同上云或迁的业务需求,使您可以在不影响业务的情况下将数据在其他数据库与阿里云云数据库RDS之间平滑迁移。适用场景 文档链接(迁移上云)自建数据库迁移至阿里 MySQL 5.7、8.0自建数据库全量上云...

新建云计算资源

支持新建多种类型的数据源,为使用 企业数据智能平台 做数据支撑。本文介绍如何新建云计算资源。前提条件 已创建工作组,具体操作,请参见 新建工作组。背景信息 当前支持的云计算资源类型有RDS MySQL、AnalyticDB MySQL、AnalyticDB MySQL...

API概览

本产品(云数据库 SelectDB 版/2023-05-22)的OpenAPI采用 RPC 签名风格,签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK,开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用...

导入数据

本文以导入On Time数据集至clickhouse_demo数据库的分布式表ontime_local_distributed为例,介绍如何使用客户端clickhouse-client工具导入数据云数据库ClickHouse。前提条件 已完成快速入门系列的如下步骤。新建集群 创建账号 设置白...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云服务器 ECS 云原生大数据计算服务 MaxCompute 云数据库 RDS 数据库备份 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用