配置离线数据集成节点
运行时间与数据规模成正比，数据规模越大，运行耗时时间越长。如果执行日志的最后一行出现 status SUCCEEDED，表明任务试运行成功。试运行成功后，您可以在目标库的SQL窗口中，查询目标表中已迁移的数据。如果执行日志的最后一行出现 ...
发展历程
2017年 TPC的benchmark适配MaxCompute，进行了全球首次基于公共云的BigBench大数据基准测试，数据规模拓展到100 TB，成为首个突破7000分的引擎，性能达到7830 QPM。获得中国国际软件博览会金奖。中国电子学会科技进步特等奖（被业界誉为...
X-Engine简介
因为目标是面向大规模的海量数据存储，提供高并发事务处理能力和降低存储成本，在大部分大数据量场景下，数据被访问的机会是不均等的，访问频繁的热数据实际上占比很少，X-Engine根据数据访问频度的不同将数据划分为多个层次，针对每个层次...
集群版-单副本
使用场景 数据量较大 集群版可以有效地扩展数据规模量大小，相比标准版可提供更大的存储量，例如64 GB、128 GB、256 GB集群版，可以有效的满足数据扩展需求。纯缓存应用 单副本集群版的分片服务器由单节点组成，分片服务器某节点出现故障时...
MongoDB 6.0新特性概览
示例：数据规模特别大的分片表，将数据块规格调整到256 MB。数据规模相对较小但希望在分片上分布更均匀的分片表，将数据块规格调整到64 MB或32 MB。支持自动整理分片集合的磁盘空间碎片。您可以通过 configureCollectionBalancing 命令设置...
基本概念
通过数据集成服务，可将Lindorm数据导入MaxCompute，实现大规模的数据计算。更多信息，请参见 什么是MaxCompute。MongoDB 提供稳定可靠、弹性伸缩、完全兼容MongoDB协议的数据库服务。数据结构多样时，可以选择将结构化数据存储在Lindorm，...
配置跨库Spark SQL节点
大数据量处理：支持快速处理较大规模的数据（十万条以上数据）。Spark SQL语法：基于Spark 3.1.2版本部署，提供该版本所有语法特性和原生函数。原生函数包括聚合函数、窗口函数、数组函数、Map函数、日期和时间处理函数、JSON处理函数等。...
PyODPS概述
PyODPS提供了 to_pandas 接口，可以直接将MaxCompute数据转化成Pandas DataFrame数据结构，但这个接口只应该被用于获取小规模数据做本地开发调试使用，而不是用来大规模处理数据，因为使用这个接口会触发下载行为，将位于MaxCompute中的...
RDS术语
通过数据集成服务，可将RDS数据导入MaxCompute，实现大规模的数据计算。更多信息，请参见 什么是MaxCompute。Microsoft AD Active Directory，活动目录。微软提供的面向Windows Standard Server、Windows Enterprise Server以及Microsoft ...
RDS术语
通过数据集成服务，可将RDS数据导入MaxCompute，实现大规模的数据计算。更多信息，请参见 什么是MaxCompute。Microsoft AD Active Directory，活动目录。微软提供的面向Windows Standard Server、Windows Enterprise Server以及Microsoft ...
RDS术语
通过数据集成服务，可将RDS数据导入MaxCompute，实现大规模的数据计算。更多信息，请参见 什么是MaxCompute。Microsoft AD Active Directory，活动目录。微软提供的面向Windows Standard Server、Windows Enterprise Server以及Microsoft ...
产品整体介绍
在第三方认证层面，AnalyticDB PostgreSQL版 通过了“国际数据库TPC官方TPC-H 30TB认证”（性价比综合排名第一），信通院“分布式事务型数据库基础能力评测”（TPC-C）和“分布式分析型数据库大规模性能认证”（640节点 TPC-DS 100TB）。...
RDS术语
通过数据集成服务，可将RDS数据导入MaxCompute，实现大规模的数据计算。更多信息，请参见 什么是MaxCompute。Microsoft AD Active Directory，活动目录。微软提供的面向Windows Standard Server、Windows Enterprise Server以及Microsoft ...
RDS术语
通过数据集成服务，可将RDS数据导入MaxCompute，实现大规模的数据计算。更多信息，请参见 什么是MaxCompute。Microsoft AD Active Directory，活动目录。微软提供的面向Windows Standard Server、Windows Enterprise Server以及Microsoft ...
基本概念
本文将向您介绍 云数据库ClickHouse 产品中涉及的一些基本名词概念，以便于您更好地理解 云数据库ClickHouse 产品。地域（Region）购买 云数据库ClickHouse 的服务器所处地理位置。您需要在购买 云数据库ClickHouse 服务时指定Region，...
EMR-3.22.x版本说明
发布日期 EMR-3.22.0 2019年7月28日 新功能 服务 变更点 Kudu 新增组件，Kudu填补Hadoop生态圈的功能空白，可提供类似HBase快速数据插入以及随机存取的功能，允许用户进行数据修改，同时还提供类似HDFS或Parquet超大规模的数据分析以及查询...
应用场景
数据驱动的业务 云数据库Cassandra可以支持数百个节点的集群规模，适合大数据量的存储。在一些需要应用大量数据对用户行为进行分析的场景中，可以通过整合多种数据来源，存储用户行为数据，构建用户画像，实时存储在Cassandra中，提供大...
云市场介绍
目前，入驻云市场的千余家优秀 ISV 遍布国内外，提供围绕云计算产品的软件应用及服务，包括基础软件、服务、安全、企业应用、建站、解决方案、API、IoT、新零售、数据智能、开发运维及零售通十二大类市场，商品数量达上万种。云市场致力于...
公交出行：启迪公交
PolarDB-X 专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题，历经各届天猫双十一及阿里云各行业客户业务的考验，助力企业加速完成业务数字化转型。本文介绍启迪公交如何通过 PolarDB-X 应对业务挑战。所属...
JindoFS介绍和使用
规模大，支持10亿以上的文件数。运维 低 一般 需要维护缓存系统能力。较高 需要维护文件系统元数据服务和缓存系统。安全 支持AccessKey认证。支持RAM鉴权。支持OSS访问日志。支持OSS数据加密。支持AccessKey认证。支持RAM鉴权。支持OSS访问...
DataWorks V3.0
MaxCompute：大数据计算服务MaxCompute（原ODPS）是一种快速、完全托管的EB级大数据计算引擎，是大规模离线数据仓库的核心引擎。MaxCompute是DataWorks最早支持，且最成熟完备的计算引擎，目前已基本覆盖MaxCompute的所有功能。详情请参见 ...
与Spark集成分析
用户可以通过DLA Ganos实现Spark加载HBase中的时空数据并进行大规模时空分析操作。DLA Ganos是基于云原生数据湖分析（Data Lake Analytics，DLA）系统设计开发的，面向时空大数据存储与计算的数据引擎产品。基于DLA无服务器化（Serverless...
与Spark集成分析
用户可以通过DLA Ganos实现Spark加载HBase中的时空数据并进行大规模时空分析操作。DLA Ganos是基于云原生数据湖分析（Data Lake Analytics，DLA）系统设计开发的，面向时空大数据存储与计算的数据引擎产品。基于DLA无服务器化（Serverless...
什么是DTS Serverless实例
适用场景 业务初期的数据传输规模较大，而业务后期的数据传输规模则趋于稳定。待传输的数据呈现明显的分时高低峰模型，需要降低持续运行的成本。有存量的数据传输任务，愿意重新购买Serverless实例。待传输的数据量不可预测。个人开发者...
简介
栅格化GIS应用及航天航空遥感应用 HBase Ganos提供了针对栅格数据管理的通用化模型支持，能够有效支撑大规模遥感影像数据和GIS栅格GRID数据的存储、查询和基础分析处理能力，包括ETL工具支持遥感影像重投影、拼接、切片、入库，支持OGC WMS...
在EMR集群运行TPC-DS Benchmark
tpcds-build.sh 步骤三：生成并加载数据 设置数据规模SF（Scale Factor）。SF单位相当于GB，所以SF=1相当于1 GB，SF=100相当于100 GB，SF=1000相当于1 TB，以此类推。本步骤示例采用小规模数据集，推荐使用SF=3。具体命令如下：SF=3 重要 ...
添加数据源
阿里云 云备份 提供大规模文件系统数据备份功能，可以将源端数据源备份至云端。安装备份客户端后，数据备份前，您需要在 云备份 控制台添加数据源。前提条件 已开通阿里云 云备份 服务。开通 云备份 不收取任何费用，使用 云备份 的大规模...
什么是MaxCompute
随着数据收集手段不断丰富，行业数据大量积累，数据规模已增长到了传统软件行业无法承载的海量数据（TB、PB、EB）级别。MaxCompute提供离线和实时的数据接入，支持大规模数据计算及查询加速能力，为您提供面向多种计算场景的数据仓库解决...
创建GreenPlum数据源
其架构主要针对管理大规模分析型数据仓库以及商业智能工作负载而设计。更多详情，请参见 GreenPlum官网。使用限制 Dataphin仅支持超级管理员、数据源管理员、板块架构师、项目管理员角色创建数据源。超级管理员、数据源管理员角色添加与...
轨迹服务
汽车云平台的业务系统每天都会接收到大量的车辆信息，例如车辆的实时位置和车辆的实时属性，其数据规模通常会超过10 TB/天。同时，平台也存在各种类型的时空查询需求，包括但不限于实时的圈选、出入监测和历史轨迹分析，并且由于查询类型的...
数据库画像
数据库画像是数据库评估的基础数据，可以帮助您更好地了解自己的源数据库，在数据库迁移、改造等阶段，可以快速查找源数据库信息，指导迁移与改造。新建画像 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 集成与开发（DTS）>异构数据库迁移...
创建GreenPlum数据源
其架构主要针对管理大规模分析型数据仓库以及商业智能工作负载而设计。更多详情，请参见 GreenPlum官网。使用限制 Dataphin仅支持超级管理员、数据源管理员、板块架构师、项目管理员角色创建数据源。超级管理员、数据源管理员角色添加与...
行业趋势与背景
根据全球权威IT研究咨询公司的数据，2017年全球企业基础软件市场规模1958.52亿美金，其中数据库市场规模388亿美金，占比近20%，是最大组成部分。分布式数据库是发展方向 近年来，随着互联网、大数据的飞速发展，特别是“双十一”指数型的...
什么是数据管理DMS
DMS提供全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，致力于帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。视频介绍 功能特性 详情信息，请参见 功能概览。为什么选择数据管理DMS 全域数据...
强一致分布式事务
另外，分布式数据库通常数据存储规模更大，对于备份恢复的一致性有更大的挑战。PolarDB-X 在存储节点（DN）的数据和变更日志中都保存了分布式事务的中心授时（包含了时间戳信息），任意时间点的数据恢复（PITR，point-in-time recovery）都...
概述
背景信息 随着互联网和物联网的飞速发展、数据规模急剧增长、数据来源多样化，同时数据分析需求及业务流程复杂性不断增加，这使得传统手动处理数据的方式无法满足现有需求。因此，需要一个自动化流程来确保数据处理、分析、备份等多种需求...
InfluxDB®️介绍
云数据库 InfluxDB®版是一款专门处理高写入和查询负载的时序数据库，完全兼容开源InfluxDB 1.8版本，用于存储大规模的时序数据并进行实时分析，包括来自DevOps监控、应用指标和IoT传感器上的数据。主要特点 InfluxDB®是您处理时序数据的...
功能特性
此外，OceanBase 数据库支持超大规模集群（节点超过 1500 台，最大单集群数据量超过 3 PB，单表数量达到万亿行级别）动态扩展，在 TPC-C 场景中，系统扩展比可以达到 1:0.9，使用户投资的硬件成本被最大化的利用。高可用 OceanBase 数据库...
什么是DataWorks
获奖经历 IDC：大数据平台公共云市场份额中国第一 Forrester：全球云数据仓库卓越表现者象限，国内唯一 中国信通院：首个通过577项技术要求的数据平台整体解决方案评测 中国电子学会科技进步特等奖 中国国际软件博览会金奖 浙江省科技进步...
互联网、电商行业离线大数据分析
方案优势 大规模存储：超大规模存储且自动扩容，最大可以支持EB级别的数据。高性能：性能更加高效、稳定。低成本：与自建数据库进行分析相比，成本更低。安全：原生的多租户系统，以工作空间进行隔离，所有计算任务在安全沙箱中运行。可视...
- 产品推荐
- 这些文档可能帮助您