产品概述
什么是全密态数据库 全密态数据库是 达摩院数据库与存储实验室 与阿里云数据库团队合作的自研产品，以技术为基石，最小化人员、平台管理等不可控因素造成的潜在数据安全隐患，可以有效杜绝云数据库服务（或应用服务等数据拥有者以外的任何...
简介
典型案例&架构 航海船舶大数据平台 场景：全球AIS船舶实时位置数据，每天上亿条轨迹写入，要求轨迹时空/时序查询秒级响应，具体包括：监管区域实时地理围栏判断。轨迹区域回放（指定区域+指定时间段）。轨迹回放（指定时间段查询）。架构...
政务云等保现状及安全资质
阿里云电子政务云平台价格与华北2公共云同等配置价格相同 数据库审计（数据安全）数据库审计服务，可针对数据库SQL注入、风险操作等数据库风险操作行为进行记录与告警。支持RDS云数据库、ECS自建数据库，为云上数据库提供安全诊断、维护、...
授权信息
本文为您介绍 开源大数据平台 E-MapReduce（EMR）为RAM权限策略定义的操作（Action）、资源（Resource）和条件（Condition）。开源大数据平台 E-MapReduce（EMR）的RAM代码（RamCode）为 emr，支持的授权粒度为 OPERATION。权限策略通用...
授权信息
本文为您介绍 开源大数据平台 E-MapReduce（EMR）为RAM权限策略定义的操作（Action）、资源（Resource）和条件（Condition）。开源大数据平台 E-MapReduce（EMR）的RAM代码（RamCode）为 emr，支持的授权粒度为 OPERATION。权限策略通用...
相关的云服务
本文为您介绍典型场景下，使用开源大数据平台E-MapReduce时通常会使用到的其他云服务。云服务名称 说明 云服务器ECS 使用云服务器ECS（Elastic Compute Service）作为集群的节点，每个ECS实例集群中的一个节点。专有网络VPC 专有网络VPC...
概述
DataWorks（数据工场，原大数据开发套件）是阿里云重要的PaaS（Platform-as-a-Service）平台产品，为您提供 数据集成、数据开发、数据地图、数据质量 和 数据服务 等全方位的产品服务，一站式开发管理的界面，帮助企业专注于数据价值的挖掘...
Hive访问云HBase数据
阿里云HBase需要借助外部Hive对多表进行关联分析，本文介绍如何使用E-MapReduce（简称EMR）上的Hive关联阿里云HBase的表。前提条件 已创建DataLake集群。详细步骤，请参见 创建集群。已创建与EMR在同一地域下且共用VPC的HBase实例。说明 ...
UDF访问公网或阿里云内网提示“Network is ...
问题描述 UDF访问公网或阿里云内网提示“Network is unreachable”报错，例如，UDF使用公网访问网站获取地理信息，然后通过内网发送消息给消息队列RocketMQ提示报错。具体报错如下图所示。问题原因 由于沙箱保护机制，UDF禁止所有网络访问...
使用日志服务收集Flink作业日志
本文为您介绍如何通过阿里云日志服务收集结束运行的Flink作业的日志。前提条件 已在E-MapReduce on ACK控制台创建Flink集群，详情请参见 快速入门。已开通阿里云日志服务SLS，详情请参见 快速入门。操作步骤 启用日志服务组件Logtail，详情...
使用CLB实现负载均衡
本文为您介绍如何基于阿里云负载均衡SLB（Server Load Balancer）实现StarRocks负载均衡以及高可用。使用限制 CLB负载均衡器和StarRocks集群须在同一个VPC和安全组下。操作步骤 创建StarRocks高可用集群，详情请参见 创建StarRocks集群。...
支持的云服务
基于MaxCompute的数据仓库能力，您可以与阿里云其他产品集成，实现可视化开发、数据存储、数据迁移、机器学习、业务决策等能力，构建满足实际业务需求的解决方案。本文为您介绍支持与MaxCompute集成的各阿里云产品信息。MaxCompute支持集成...
快速入门
阿里云数据库RDS MySQL基于阿里巴巴的MySQL源码分支，经过双11高并发、大数据量的考验，拥有优良的性能和吞吐量。此外，阿里云数据库MySQL版还拥有经过优化的 读写分离、数据库代理、智能调优 等高级功能。当前RDS MySQL支持5.5、5.6、5.7...
2024年
2024年05月更新记录 时间 特性 类别 描述 产品文档 2024-05-31 新增RoaringBitmap 新说明 RoaringBitmap是一种高效的Bitmap压缩算法，目前已被广泛应用在各种语言和各种大数据平台，适合计算超高基维的数据，常用于去重、标签筛选、时间...
产品架构
EMR自研能力 为让开源大数据组件和服务更好的运行在阿里云技术设施上，EMR自研了如下组件：数据应用平台，提供交互式开发、作业提交、作业调试和工作流一站式数据开发体验，详情请参见 EMR Studio概述。Shuffle Service是EMR在优化计算引擎...
基本概念
数据资产：数据资源平台中存在大量的数据表、标签、API等各类数据资产，数据管理者通过数据汇聚、数据治理、数据分析后，需要对整个平台数据进行统一管控，了解平台的核心数据资产，提供对应的数据资产管理规范。统一服务 应用：是调用API...
快速入门
操作步骤 第一步：进入阿里云官网，打开 大数据专家服务 产品详情。第二步：点击大数据专家服务产品详情页中的“咨询购买”接入钉群与专家服务同学沟通场景需求。第三步：经过双方线下评估确认通过后，阿里云技术专家将 向用户推送购买入口...
产品优势
项目 阿里云物联网平台 自建MQTT集群（基于阿里云ECS）云资源费用 购买同时在线设备数为1万个、消息上下行TPS为100条/秒，规则引擎TPS为100条/秒、最小规格数据存储的标准型的标准版实例即可。总费用：16080元/年。购买页面，请参见 物联网...
数据出口
Link WAN支持通过阿里云物联网平台流转数据，也支持用户自建云服务流转数据。数据出口至 物联网平台控制台，使用内部接口，Link WAN的节点信息会自动映射到物联网平台中的设备中。数据出口至 自建云，使用的是消息队列MQ，透过MQTT订阅与...
客户案例
价值体现 从大数据平台上云整体“降本增效”的方案快速切入，迁移到大数据MaxCompute、实时计算、DataWorks后，部分任务有10倍以上的性能提升，存储从自建Hadoop 3PB降到900T，利用Flink实时数据处理能力，将宝宝树现有的场景实时化（...
云产品集成
常见云产品如下：大数据开发治理平台 DataWorks 实时计算 Flink 版 数据库管理 DMS DataV 数据可视化 Quick BI 数据分析与展现 前提条件 已获取 OceanBase 数据库的基本连接信息，详细步骤请参见 获取连接参数。大数据开发治理平台 ...
教程概述
本案例的原理如下：在设备端模拟两个字段，通过MQTT协议向阿里云物联网平台设备（高级版）发送数据。物联网平台接收到数据后通过规则引擎转发至DataHub。在DataHub中通过DataConnector将数据同步到RDS MySQL数据库中。使用DataV将RDS MySQL...
基于MaxCompute进行大数据BI分析
通过MaxCompute、AnalyticDB MySQL强大的数据加工和分析能力，降低大数据平台建设的门槛，轻松解决了海量数据的计算问题。同时有效降低企业成本，并保障数据安全。与第三方开源生态无缝对接，在不侵入用户应用的情况下，传输日志至日志服务...
查看账单
在 明细账单 页签中，设置查询 账期，并在列表中筛选产品为 开源大数据平台E-MapReduce，产品明细为 EMR StarRocks Serverless按量 或 EMR StarRocks Serverless包年包月。您还可以通过 统计项 和 统计周期 选择账单的展示内容。账单详细...
数据模型概述
DDM目前支持逻辑模型和物理模型建模，其中物理模型又分为关系型数据模型和非关系型数据模型，支持的大数据引擎为MaxCompute、Hive。说明 Hadoop的MR调优参数属于底层，DDM是数据建模工具，支持设置表、字段等物理属性。
数据标准
数据是由特定的环境产生的，这些环境因素包括生产者、时间、系统等，从而造成了同一个语义的数据，有...说明 目前使用DDM进行数据建模可以进行逻辑建模和物理建模，但物理建模仅支持MaxCompute和Hive两种大数据引擎，不支持自定义数据源类型。
购买及登录数据资源平台
使用数据资源平台时，需先购买并登录数据资源平台。本文为介绍如何购买及登录数据资源平台。前提条件 已创建阿里云账号，具体操作，请参见 创建阿里云账号。背景信息 数据资源平台账号登录体系与阿里云保持一致。购买数据资源平台 在数据...
产品架构
物联网平台支持与接入设备进行通信，可将设备通信数据流转到其他阿里云产品中进行存储和处理，是构建物联网应用的基础。本文介绍物联网平台的产品架构。设备 通过物联网平台集成开发的协议和SDK，实现设备上云管理。IP设备：指支持TCP/IP...
阿里云电子政务云大事件
截至文档发布时间，阿里云电子政务云共计上线82款产品，覆盖计算、存储、网络等基础设施产品，以及中间件、大数据、安全等产品，满足您多样化的业务场景需求。2020年至今 2020年至今阿里云电子政务云的大事件如下图所示。2018年至2019年 ...
概述
为了快速使此类设备接入和使用阿里云物联网平台，阿里云联合硬件合作伙伴，共同定义了可以通过简单配置即可接入物联网平台的透传数据DTU设备。本文将以电机转速控制设备为例，介绍如何通过符合阿里云物联网平台接入协议规范的DTU设备，快速...
DTU集成SDK
将收到的阿里云IoT平台的下发数据，转发至本地设备通信口 数据转发实现对云端特定Topic的订阅，从而完成云端至边缘侧的数据下发。具体实现如下：自定义Topic方式。在建立MQTT实例后，订阅如下Topic，具体的订阅操作参考 examples/MQTT/MQTT...
产品优势
产品功能全 功能涵盖数据传输、开发、生产、治理、安全全领域，每个领域深度覆盖大数据全生命周期，轻松帮助企业应对在搭建数仓、搭建数据中台、数字化转型项目中遇到的难题。支持复杂网络环境、常见数据源的数据同步上云以及实时、历史...
安全统计
一、反垃圾过滤统计 阿里邮箱会自动识别垃圾邮件，如果被判定为垃圾邮件，则不会出现在用户的收件箱中（反垃圾级别需要设置为“高”）。反垃圾过滤统计功能支持查看反垃圾邮件数和反垃圾过滤率。支持导出，系统自动下载CSV文件。说明 总...
快速体验
数据采集 数据加工 配置数据质量监控 数据可视化展现 目标人群 开发工程师、数据分析师、产品运营等存在数仓数据获取与数据分析洞察人员。涉及产品 本案例涉及以下产品：一站式大数据开发治理DataWorks 本案例通过DataWorks实现数据采集、...
什么是阿里云电子政务云
您可以将需要等保合规或高安全要求的业务部署于阿里云电子政务云，您无需自建机房，无需担忧物理环境的运营管理，无需增加大量运营人员，无论是机房、资源还是数据库等，同样也无需每年花费经费来通过各类云平台层的合规认证，更无需担忧为...
数据服务概述
阿里云API市场涵盖了金融理财、人工智能、电子商务、交通地理、生活服务、企业管理和公共事务7大类目，目前已有数千款API产品在线售卖，是快速帮您实现数据变现的平台。详情请参见 阿里云API市场。调用API 应用（APP）是您调用API服务时的...
什么是EMR Serverless Milvus
和阿里云上下游产品集成 与阿里云存储、大数据产品集成对接，方便产品间数据调用，为AI应用场景的数据工程提供最大程度的便利。产品计费 公测期间您可以免费试用Milvus，免费试用结束后，实例将开始收费。相关文档 快速创建Milvus实例 ...
构建数据仓库
方案优势：阿里巴巴大数据最佳实践，高性能、低成本、Serverless服务，免运维、全托管模式，让企业的大数据研发人员更聚焦在业务数据的开发、生产、治理。产品组合：MaxCompute+Flink+DataWorks。场景说明 用户数据来源丰富，包括来自云端...
政务舆情分析系统的数据库解决方案
阿里云 表格存储（Table Store）是阿里云自研的面向海量结构化数据存储的Serverless NoSQL多模型数据库，被广泛用于社交、物联网、人工智能、元数据和大数据等业务场景。提供兼容HBase的WideColumn模型以及开创性的消息模型Timeline，可...
解决方案
数据资源平台中的数据标准、数据模型、数据加工场景、数据服务API、云计算资源配置等资产，经过验证最终可沉淀为一个特定的解决方案。支持通过不同的创建方式，灵活的选择解决方案中包含的内容。依托数据资源平台中管理的大量元数据，确保...
- 产品推荐
- 这些文档可能帮助您