基本概念
ClickHouse集群 ClickHouse集群包含若干单位计算资源和存储资源，能够提供ClickHouse引擎数据存储和分析服务的PAAS服务。Worker节点 Worker节点是ClickHouse集群内部的副本节点，参与引擎计算的实际资源。CCU CCU（ClickHouse Compute Unit...
引擎简介
支持秒级写入千万级时序数据点，提供高压缩比低成本存储、预降采样、插值、多维聚合计算、可视化查询结果等功能，满足海量时序数据存储与处理。物联网行业 汽车行业 工业物联网行业 访问方式 您可以使用SQL方式连接并访问 云原生多模数据库...
常见问题
教育行业：K12、在线英语等在线教育，将数据存储到OSS，结合OSS传输加速或CDN加速产品，实现海量数据的存储以及内容分发方案。AI/物联网：自动驾驶、物联网等场景。自动驾驶将采集的训练数据通过闪电立方采集与迁移到OSS。物联网家庭视频...
数据操作篇
OSS 是阿里云提供的开放存储服务，用以应对海量数据的存储和访问。OSS 的存储单价比表格存储更低，更适合存储文件。如果应用程序不方便使用 OSS，可以将超过 2 MB 的单个值拆分成多个行，存储在表格存储中。错误重试加入时间间隔 表格存储...
使用场景
云存储扩容和迁移 集成智能缓存算法，自动识别冷热数据，将热数据保留在本地缓存，保证数据访问体验，无感知的将海量云存储数据接入本地数据中心，拓展存储空间。同时在云端保留全量数据（冷+热）保证数据的一致性。具体的使用场景如下所示...
新零售：杭州数云信息技术有限公司
PolarDB 采用共享存储架构，存储和计算分离，能够最大程度的提供单实例的存储能力，最大可达100 TB，对于历史数据存储，海量在线数据存储都有较好的适配能力，降低代码复杂度和维护成本。PolarDB 通过引擎的优化和超强的IOPS能力提供高并发...
开启智能存储分层
重要 存储保存时间配置存在相应限制，具体信息，请参见 数据存储生命周期管理。开启智能存储分层 登录 日志服务控制台。在Project列表区域，单击目标Project。在 日志存储>日志库 页签中，单击目标Logstore对应的 图标，然后单击 修改。在 ...
核心优势
同时，增强版也提供 全文索引服务介绍，智能集成搜索引擎Solr，提供面向海量数据的存储、多维查询、全文索引等统一访问的混合型能力。多租户 内置面向多租户的数据安全和资源隔离能力，提供标准的用户名密码认证、ACL、Quota、Resource ...
基本介绍
背景信息 云数据库HBase增强版是由 云原生多模数据库Lindorm宽表引擎 提供的、完全兼容HBase的云上托管数据库，从2011年开始云数据库HBase增强版正式承载阿里内部业务的海量数据实时存储需求，支撑服务了淘宝、支付宝、菜鸟、优酷、高德等...
客户案例
MaxCompute已被广泛应用于各大领域处理云上大数据，帮助众多企业解决了海量数据分析问题，同时降低企业运维成本，企业人员可更专注于业务开发。本文为您介绍MaxCompute的精选客户案例。MaxCompute的全量客户案例信息，请参见 行业客户案例...
车联网数据存储处理方案
方案总览 Lindorm是一款适用于任何规模、多种模型的云原生数据库服务，支持海量数据的低成本存储处理和弹性按需付费，提供宽表、时序、搜索、文件等多种数据模型，兼容HBase、Cassandra、Phoenix、OpenTSDB、Solr、SQL等多种开源标准接口，...
数据服务系统配置
当您修改时长小于之前设置的时长（例如：之前设置的是30天，现在修改变成20天），保存时需再次确认是否删除统计数据存储周期变小的时间段，如下图对话框中所示的时间区间。单次查询跨度小于等于：默认是31天，维度仅支持天，支持最大数值不...
时序分析存储概述
核心优势 海量数据的实时分析 对于时序的热数据采用 表格存储 行列混合的宽表存储，提供海量数据的实时自增写、覆盖和查询；对于时序全量历史数据采用列存储，当对数据进行查询或者分析时只读取所需的列数据，从而提高查询效率和数据处理...
产品优势
全文检索 智能集成搜索引擎Solr，提供面向海量数据的存储、多维查询、全文索引等统一访问的混合型能力，请参见 全文索引服务。不支持 性能 吞吐性能 单机吞吐是开源HBase的7倍，请参见 测试结果。无优化 请求毛刺 P99延迟是开源HBase的1/10...
数据存储生命周期管理
本文介绍存储保存时间迁移策略。生命周期管理策略 热存储数据至少需保存7天才能转换为低频存储，当数据的存储时间超过配置的 热存储层数据保存 时间后，数据自动由热存储转为低频存储。热存储数据至少需保存30天才能直接转换为归档存储，当...
访问列存数据
背景信息 Lindorm列存是面向海量半结构化、结构化数据设计的列格式分布式存储服务，适用于车联网、物联网、订单、日志等大规模存储场景，核心能力包括：计算分析 Lindorm计算引擎可以访问列存数据，完成海量数据的交互式分析和离线计算。...
云存储网关
适用场景 云存储网关适用于以下场景：云存储扩容和迁移 集成智能缓存算法，自动识别冷热数据，将热数据保留在本地缓存，保证数据访问体验，无感知的将海量云存储数据接入本地数据中心，拓展存储空间。同时在云端保留全量数据，保证数据的...
产品优势
数据安全中心DSC（Data Security Center）可扫描和识别海量数据，帮您实时获取数据的安全状态。本文介绍 数据安全中心 的产品优势。合规性 使用数据安全中心产品，可以帮助企业满足等保2.0对“云计算环境下安全审计”及“个人信息保护”的...
产品优势
依赖外部组件，复杂 支持，但数据非强一致 多维检索 与搜索引擎LindormSearch智能集成，支持海量数据的存储、多维查询、全文检索等统一访问能力，详情请参见 搜索索引介绍。不支持 不支持 性能 吞吐性能 单机吞吐是开源HBase的7倍，详情请...
导出数据
分析型数据库MySQL版对海量数据分析计算后支持输出（DUMP）数据结果，目前支持两种DUMP方式：导出数据到OSS 导出数据到MaxCompute
赛盒广告精细化管理方案
海量历史数据的存储需求 每位用户的广告数据存储在独立的物理库中，部分用户单张表每年将存储超过1亿行的记录，如果历史数据保留一年，300位用户一年预计产生18TB的数据。对数据库的实时、高速查询能力需求 用户通过仪表板实时了解广告的...
使用MongoDB存储日志数据
应对数据增长 分片的方案能提供海量的数据存储支持，但随着数据越来越多，存储的成本会不断的上升。通常很多日志数据有个特性，日志数据的价值随时间递减。比如1年前、甚至3个月前的历史数据完全没有分析价值，这部分可以不用存储，以降低...
功能特性
海量时空数据的快显分析能力 快速时空数据分析能力能够处理海量数据，并支持对千万级矢量数据进行可视化分析，帮助用户实时验证分析结果。内置地理统计分析能力 我们提供内置的地理统计分析功能，可以科学而专业地使用颜色、符号、宽度、...
数据存储
时序数据存储 时序数据库对时序数据的写入、聚合以及检索都做了特定优化，AnalyticDB采集到的时序数据主要存在时序数据库中。目前每个AnalyticDB实例有一个独立的时序数据库进行服务，只保存当前AnalyticDB实例的时序数据。日志数据存储 ...
应用场景
在工业生产过程中对数据存储与分析的需求如下：数据存储：设备状态数据定时上报，通过数据网关上云存储，需要支持海量设备元数据存储，可能达到千万级甚至亿级。数据更新：大规模设备元数据实时更新，需要支持高并发、低延迟的数据更新。...
背景信息及准备工作
数据存储在OSS后，可以通过DLA Severless进行查询分析。Quick BI是专为云上用户量身打造的新一代智能BI服务平台。提供海量数据实时在线分析服务，支持拖拽式操作、提供了丰富的可视化效果。您可以将OSS数据的查询分析结果以BI报表形式展现...
支持的云服务
基于MaxCompute的数据仓库能力，您可以与阿里云其他产品集成，实现可视化开发、数据存储、数据迁移、机器学习、业务决策等能力，构建满足实际业务需求的解决方案。本文为您介绍支持与MaxCompute集成的各阿里云产品信息。MaxCompute支持集成...
设备数据存储和计算实践
面临的挑战 在不同的数据⽣命周期中，您需要采⽤不同的技术⽅案去存储和计算是设备数据，在不同的业务场景中，以下是较为典型的选型模式：场景 说明 监控运维场景 数据存储在RocketMQ等流数据存储产品中，并使⽤实时计算Flink等流计算框架...
引擎简介
云原生多模数据库 Lindorm 核心能力实现的数据库内 高性能、低成本、稳定可靠 的分布式计算服务，满足用户在 云原生多模数据库 Lindorm 支撑场景下的数据生产、交互式分析、机器学习和图计算等场景中的计算需求，支持对海量数据的高并发...
持久内存型
适用场景 海量数据下对性能与成本要求高的场景 计算中间数据对性能的要求很高，采用Redis社区版成本较高，如果采用HBase之类的数据库存储数据则可能无法满足性能需求。采用持久存储型实例保障数据持久化的同时提供近乎Redis社区版的吞吐和...
持久内存型
适用场景 海量数据下对性能与成本要求高的场景 计算中间数据对性能的要求很高，采用Redis社区版成本较高，如果采用HBase之类的数据库存储数据则可能无法满足性能需求。采用持久存储型实例保障数据持久化的同时提供近乎Redis社区版的吞吐和...
使用企业版功能
建议您将SQL审计日志导出并保存至本地后，再减少SQL洞察和审计数据存储时长。登录 DAS控制台。在左侧导航栏中，单击 实例监控。找到目标实例，单击实例ID，进入目标实例详情页。在左侧导航栏，单击 请求分析>SQL洞察和审计。在 SQL洞察和...
产品优势
支持秒级甚至毫秒级对海量数据进行查询和计算，复杂SQL查询速度相比传统的关系型数据库快10倍。支持计算资源按需在线扩缩容、分时弹性和按需弹性等功能；同时支持 冷热数据分层存储，存储空间按实际使用的存储空间计费，大大降低了计算和...
未来规划
如何对海量数据进行在线分析和计算，支持实时在线交互式分析，需要做并行处理（DSP 模型、MPP 模型等等），对并行调度计算进行优化。系统能力提升：智能化+安全（使用方便可靠、运维简易）。如在管控平台的层面如何做智能化的调度、监控...
概述
适用10 T以上的上亿小文件，单个文件100K左右的海量数据迁移。支持数据增量同步。适用Windows操作系统海量数据多线程、断点续传。使用IIS FTP迁移数据 支持众多操作系统平台。提供图形化操作界面。适用IIS服务访问NAS SMB文件系统。使用...
羲和分析计算引擎
面向海量数据的云原生数仓需要满足不同的数据分析场景，包括在线报表，在线交互式分析，以及ETL等。不同的场景依赖分析计算引擎自适应的采用不同的查询优化技术，包括按需的动态代码编译，CPU友好的内存数据布局，以及自适应的并行度调整等...
什么是云数据库SelectDB版
云数据库SelectDB版 是新一代实时数据仓库 SelectDB 在阿里云上的全托管服务，您可以在阿里云上便捷地购买 SelectDB 数仓服务，满足海量数据分析需求。产品优势 高性价比 高性能：支持亚秒级响应海量数据查询、万级高并发点查询以及高吞吐...
基于MaxCompute进行大数据BI分析
AnalyticDB MySQL：用于进行海量数据实时高并发在线分析，详情请参见 云原生数据仓库AnalyticDB MySQL版。DataWorks：可实现ETL功能，对复杂数据集进行采集、加工及分析处理，详情请参见 什么是DataWorks。Quick BI：对处理后的数据进行...
ECS实例说明
大数据型 使用本地SATA盘作存储数据，存储性价比高，是大数据量（TB级别的数据量）场景下的推荐机型。说明 Hadoop、Data Science、Dataflow和Druid类型的集群支持Core节点；Zookeeper和Kafka类型的集群不支持Core节点。本地SSD型 使用本地...
SQL洞察和审计
建议您将SQL审计日志导出并保存至本地后，再减少SQL洞察和审计数据存储时长。登录 DAS控制台。在左侧导航栏中，单击 实例监控。找到目标实例，单击实例ID，进入目标实例详情页。在左侧导航栏，单击 请求分析>SQL洞察和审计。在 SQL洞察和...
- 产品推荐
- 这些文档可能帮助您