概述
Apache Druid是一个分布式内存实时分析系统，用于解决如何在大规模数据集下快速的、交互式的查询和分析问题。基本特点 Apache Druid具有如下特点：支持亚秒级的交互式查询。例如，多维过滤、Ad-hoc的属性分组和快速聚合数据。支持实时的...
产品优势
Hologres兼容PostgreSQL生态，支持快速查询分析MaxCompute的数据、实时查询实时写入的数据、联邦分析实时数据与离线数据，帮助您快速搭建企业实时数据仓库。Hologres专注实时数仓需求，从以下几个方面创新，提高数仓开发效率，降低应用门槛...
Tair助力厦门真有趣游戏业务从容应对流量洪峰
极致性能与稳定性的要求：人机交互式游戏要求业务具备低延迟能力、多人在线要求业务支持高并发访问，因此业务必须满足大量用户同时访问的需求，又具备高并发处理能力和保证游戏服务稳定和可靠的能力。资源快速扩展和弹性的需求：游戏高峰期...
基于混合负载的查询优化
完备数据仓库，首要解决的问题包括：如何更好的支持数据库场景下的交互式分析以及大数据场景下的复杂批计算场景；如何一站式的解决混合负载下的服务能力。新一代云原生数据仓库AnalyticDB MySQL版提供一站式的数仓服务。混合计算引擎 提供...
应用场景
本文介绍 云原生数据仓库AnalyticDB MySQL版 的五个使用场景：实时数仓、精准营销、商业智能报表、多源联合分析、交互式查询。实时数仓 该场景需要在一个平台上提供统一的在线查询和离线计算的能力，简化数据架构，降低开发和运维成本。...
功能特性
基于DLA+DTS同步RDS数据来构建实时数据湖 DLA Serverless Presto DLA Serverless Presto是云原生数据湖团队基于Presto打造的交互式分析引擎，Presto开发的初衷就是为了解决使用Hive来进行在线分析速度太慢的问题，因此它采用全内存流水线化...
什么是云原生数据湖分析
云原生数据湖分析（简称DLA）是新一代大数据解决方案，采取计算与存储完全分离的架构，支持数据库（RDS\PolarDB\NoSQL）与消息实时归档建仓，提供弹性的Spark与Presto，满足在线交互式查询、流处理、批处理、机器学习等诉求，也是传统...
体验智能SQL转换领航助手（Migration on Pilot）
背景 在传统的异构数据库迁移上云场景中，通常存在以下难点和痛点：源/目标两种数据库属于异构数据库，源数据库使用者不一定熟悉如何使用目标数据库及其SQL语法规则。异构数据库之间的SQL语法规则差异，导致在异构数据库迁移前后必须要对...
体验智能SQL转换领航助手（Migration on Pilot）
背景 在传统的异构数据库迁移上云场景中，通常存在以下难点和痛点：源/目标两种数据库属于异构数据库，源数据库使用者不一定熟悉如何使用目标数据库及其SQL语法规则。异构数据库之间的SQL语法规则差异，导致在异构数据库迁移前后必须要对...
分析实例简介
RDS MySQL提供分析实例功能，可以将RDS MySQL主实例中的数据自动同步到分析实例中，解决RDS MySQL复杂分析与查询时卡顿的问题，实现毫秒级针对万亿级数据进行即时的多维分析透视和业务探索。使用场景 随着企业业务发展，精细化实时运营诉求...
SQL其他常见问题
但您需要注意，MaxCompute支持的DECIMAL类型数据的最大长度为38位，但实际业务处理过程中如果数据存储为最大长度，在数据处理过程中很容易出现数据溢出问题，建议调小数据长度。新创建的MaxCompute项目不支持数据类型自动隐式转换，如何...
用自然语言实时查看BI报表
通过交互式地、启发式、迭代地提出问题或指令，如“找到所有购买了产品A的用户，并分析他们的购买行为”，NL2SQL会自动将问题转化为SQL查询，并返回相关数据。业务人员能够更灵活地理解分析数据，提高决策效率。影响 本解决方案不涉及生产...
NL2BI：用自然语言实时查看BI报表
通过交互式地、启发式、迭代地提出问题或指令，如“找到所有购买了产品A的用户，并分析他们的购买行为”，NL2SQL会自动将问题转化为SQL查询，并返回相关数据。业务人员能够更灵活地理解分析数据，提高决策效率。影响 本解决方案不涉及生产...
DataWorks V3.0
交互式分析支持对万亿级数据进行高并发、低延时、多维分析透视和业务探索，可以让您快速对接现有的BI工具。DataWorks V3.0全新推出一站式OLAP开发平台Holo Studio，为您提供标准化、无门槛的开发管理服务和一站式实时数仓构建服务，以及...
上海新能源汽车车辆基础数据
云原生数据湖分析（简称DLA）Spark分析引擎满足在线交互式查询、流处理、批处理、机器学习等业务诉求。客户价值 Lindorm宽表引擎批量写入、高效压缩，线性扩展等特性使得数据采集入库性能更高、成本更低，很好的支撑了业务的快速发展，对于...
产品概述
基于设备资产快速开发数据可视化画面 内置丰富的行业图标与组件库 支持告警规则自定义，及时获取告警通知并处理 提供高并发、高可靠和低时延的设备控制 数据分析：围绕设备资产数据进行交互式分析 提供设备时序数据存储和分析工具 基于资产...
添加适配数据源
背景信息 说明 当前数据集功能支持以下数据源类型：RDS for PostgreSQL、RDS for MySQL、兼容MySQL数据库、交互式分析 Hologres。操作步骤 登录 DataV控制台。在 功能导航 模块单击 数据集，进入数据集管理页面。在数据集卡片上方，单击 ...
创建Hologres数据源
背景信息 Hologres即阿里云交互式分析Hologres，是阿里巴巴自主研发的一款交互式分析产品。如果您使用的是Hologres，在对接Dataphin进行数据开发时，您需要先完成Hologres数据源的创建。更多Hologres信息，请参见 什么是实时数仓。使用限制...
BI分析器交互使用说明
在DataV数据集和组件分析模式的基础上，分析器交互给组件附加了下钻、联动筛选等交互式动态数据查询的能力，将基于您交互反馈的数据模型变更纳入可视化应用的交互，形成完整的可视化分析循环。所有交互可在预览模式和发布结果中进行。本文...
构建数据仓库
实时数据：按实际业务需求使用Flink进行实时ETL（可选）、结果入库，使用交互式分析产品构建实时数据仓库、应用集市，并提供海量数据的实时交互查询和分析。交互式分析：提供实时离线联邦查询。历史离线数据存放于MaxCompute，实时分析数据...
什么是数据传输服务DTS
数据传输服务DTS（Data Transmission Service）是阿里云提供的实时数据流服务，支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，助您构建...
什么是MaxCompute
MaxCompute是适用于数据分析场景的企业级SaaS（Software as a Service）模式云数据仓库，以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化用户运维投入，使您可以经济并高效...
StarRocks概述
MPP框架能够充分的利用多节点的计算能力，整个查询可以并行执行，从而实现良好的交互式分析体验。StarRocks集群不需要依赖任何其他组件，易部署、易维护和极简的架构设计，降低了StarRocks系统的复杂度和维护成本，同时也提升了系统的可靠...
客户案例
基于飞天大数据平台产品DataWorks+MaxCompute大大提高了数据业务的开发效率，构建大润发的数据中台体系。新金融行业：某互联网金融公司湖仓一体案例 客户架构如下。客户简介 公司的第一代数据湖是基于Hadoop+OSS搭建的，同时引入的数据中台...
DataHub数据源
本文介绍如何使用DataHub数据源进行数据分析或者交互式开发。建表语法 CREATE TABLE tbName USING datahub OPTIONS(propertyName=propertyValue[,propertyName=propertyValue]*);Table Schema 创建DataHub表时，无需显式定义表的字段信息，...
典型场景
具体包括构建数据湖、数据ETL、交互式查询、机器学习等功能。构建数据湖 实时数据湖：支持DB的CDC与消息数据（如Kafka）入湖，构建大规模的可以增删改查的数据集，延迟为T+10分钟。一键建仓：支持数据库一键入湖，T+1天。文件上传：数据...
基本概念
J 计算引擎 与Lindorm存储引擎深度融合，基于云原生架构提供的分布式计算服务，满足用户在数据生产、交互式分析、机器学习和图计算等场景的计算需求，兼容开源Spark标准接口。更多信息，请参见 计算引擎介绍。JDBC Java Database ...
产品概述
什么是PolarDB PolarDB 是阿里巴巴自研的新一代云原生数据库，在计算存储分离架构下，利用了软硬件结合的优势，为用户提供具备极致弹性、高性能、海量存储、安全可靠的数据库服务。100%兼容MySQL和PostgreSQL生态，高度兼容Oracle语法。...
概述
PolarDB for AI 功能通过一系列MLOps和内置的模型解决了数据、特征和模型的割裂状态，实现了基于数据库的数据智能的一站式服务。本文介绍了 PolarDB for AI 功能的相关特性。背景信息 随着数据的累积，数据驱动的智能应用（例如：搜索、...
错误码
SDK 集成相关 错误码 错误消息 错误说明 解决方案 DTX-000 dtx component scanner init error.SDK 启动失败，分布式事务不可用。DTX-001 Bean[%s]can not have@DtxTransaction and@TccBusinessAction both.同一个 bean 不能既有@...
产品架构
业务背景 伴随着信息技术的飞速发展，各行各业在业务生产中产生的数据种类越来越多，有结构化的业务元数据、业务运行数据、设备或者系统的量测数据，也有半结构化的业务运行数据、日志、图片或者文件等。按照传统方案，为了满足多种类型...
引擎类型
计算引擎 兼容Spark接口 海量数据生产、交互式分析、计算学习和图计算等场景。计算引擎是基于云原生架构提供的分布式计算服务，支持社区版计算模型以及编程接口，同时深度融合Lindorm存储引擎特性，利用底层数据存储特征以及索引能力，高效...
配置任务常见错误码及排查方法
原因：通讯链路故障，JDBC驱动程序数据包成功发送到源数据库服务器，但未收到来自源数据库的数据包。解决方法：排查数据库的连接数是否过多。参考 communications link failure 处理。联系技术支持解决。DTS.Msg.SQLExecuteError....
新功能发布记录
配置ECS远程命令节点 05月 功能名称 变更类型 功能描述 相关文档 任务编排中新增Lindorm Spark节点 新增 通过Lindorm计算引擎高效地完成分布式计算任务，满足用户在数据生产、交互式分析、机器学习和图计算等场景中的计算需求。配置Lindorm...
文档修订记录
任务调度属性配置概述 2023年2月更新记录 时间 特性 类别 描述 产品文档 2023.2.28 新增功能 数据治理中心 DataWorks支持您根据业务需要，将 治理工作台>治理项问题 页面待解决的治理项问题以通知的形式，通过系统提示、邮件、钉钉群消息等...
Redis数据源
本文介绍如何使用Redis数据源进行数据分析或者交互式开发。建表语法 CREATE TABLE tbName[(columnName dataType[,columnName dataType]*)]USING redis OPTIONS(propertyKey=propertyValue[,propertyKey=propertyValue]*);Table Schema 创建...
公交出行：启迪公交
PolarDB-X 专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题，历经各届天猫双十一及阿里云各行业客户业务的考验，助力企业加速完成业务数字化转型。本文介绍启迪公交如何通过 PolarDB-X 应对业务挑战。所属...
连接失败常见报错
本文介绍连接云数据库MongoDB失败时的常见报错与解决方法。错误信息 报错原因 解决方法 network error while attempting to run command 'isMaster' on host 'dds-bpxxxxxxxx.mongodb.rds.aliyuncs....
某历史养成类游戏开发公司实时计算和数据仓库方案
一站式解决方案：Spark服务原生支持通过SQL读取Lindorm SQL数据能力，具备列裁剪、谓词下推、分区裁剪等优化；高效地把Lindorm SQL在线库的数据ETL后归档到Spark数据仓库；聚焦业务：全托管的Spark服务保证了作业运行的稳定性，释放运维...
DataWorks On EMR使用说明
数据地图概述 安全中心 数据保护伞 审批中心 安全中心是集数据资产分级分类、敏感数据识别、数据授权管理、敏感数据脱敏、敏感数据访问审计、风险识别与响应于一体的一站式数据安全治理界面，帮助用户落地数据安全治理事项。安全中心概述 ...
- 产品推荐
- 这些文档可能帮助您