通用数据开发
通常数据开发的总体流程包括数据产生、数据收集与存储、数据分析与处理、数据提取和数据展现与分享。说明 上图中，虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示：数据产生：业务系统每天会产生大量结构化的...
数据资产定级
数据的资产等级，可以根据数据质量不满足完整性、准确性、一致性、及时性对业务的影响程度进行划分。数据等级定义如下：毁灭性质：数据一旦出错，将会引起重大资产损失，面临重大收益损失等。标记为A1。全局性质：数据直接或间接用于企业级...
数据资产定级
数据的资产等级，可以根据数据质量不满足完整性、准确性、一致性、及时性对业务的影响程度进行划分。数据等级定义如下：毁灭性质：数据一旦出错，将会引起重大资产损失，面临重大收益损失等。标记为A1。全局性质：数据直接或间接用于企业级...
新零售：杭州数云信息技术有限公司
PolarDB 采用存储和计算分离的架构，提供分钟级的配置升降级、秒级的故障恢复、全局数据一致性和免费的数据备份容灾服务，既融合了商业数据库稳定可靠、高性能、可扩展的特征，又具有开源云数据库简单开放、自我迭代的优势。本文介绍杭州...
版本及存储引擎
自动合并 MongoDB 7.0为自动均衡器（Balancer）实现了一个新的自动合并器（AutoMerger），当数据或索引分布不均衡、存在过多分片或进行数据迁移时，自动合并器会合并Chunks，以均衡数据并提高性能。MongoDB 7.0默认开启该功能，您也可以...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
2021年
新说明 MaxCompute支持您将MaxCompute项目数据接入观远数据（GuanData），帮助企业的业务人员和数据分析师开展以问题为导向的探索式分析工作以及制作数据卡片和数据看板。观远BI连接MaxCompute 2021年9月更新记录 时间 特性 类别 描述 产品...
使用MongoDB存储日志数据
本文以存储Web服务的访问日志为例，介绍如何使用MongoDB来存储、分析日志数据，让日志数据发挥最大的价值。本文的内容同样适用于其他的日志存储型应用。Web服务器日志 一个典型的Web服务器的访问日志类似如下，包含访问来源、用户、访问的...
IO加速
功能介绍 IO加速功能对应通用云盘三级存储架构中的缓存层，主要是通过高速缓存介质来提升数据库的读写性能，以提高SQL查询处理的速度。针对临时表和查询产生的临时文件，RDS PostgreSQL的IO加速能力允许将这些临时数据存储到高速的缓存介质...
公告
2024年04月16日-Dataphin新版本发布 Dataphin于2024年04月16日发布V3.14版本，本次升级相较于历史版本：新增Python三方包全局管理功能，一次安装多次引用，提升Python任务开发效率。支持页面水印设置功能，支持自定义页面水印内容及设置...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
JindoFS实战演示
使用Checksum迁移HDFS数据到OSS 使用Checksum迁移HDFS数据到OSS 2021-05-11 通过Checksum算法，你可以在大数据迁移场景中校验数据的完整性、对比数据差异并实现增量迁移。本视频为您介绍如何使用Jindo Distcp迁移HDFS数据到OSS，以及在迁移...
聚合支付：Ping+
PolarDB-X 专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题，历经各届天猫双十一及阿里云各行业客户业务的考验，助力企业加速完成业务数字化转型。本文介绍Ping+如何通过 PolarDB-X 应对业务挑战。所属行业...
MongoDB 5.0新特性概览
针对这些情况，MongoDB 5.0采取了以下措施：限制在任何时候驱动程序尝试创建的连接数量，以简单有效的方式防止数据库服务器过载。减少驱动程序监控连接池时的检查频率，给无响应或过载的服务器节点一个缓冲和恢复的机会。驱动程序将工作...
Tair助力厦门真有趣游戏业务从容应对流量洪峰
本文介绍 云原生内存数据库 Tair 助力厦门真有趣信息科技有限公司，升级数据存储、分析系统，助力业务快速迭代和发展。客户感言“Tair（Redis企业版）的高性能和超强的稳定性，在多次大型活动中帮助真有趣从容应对流量洪峰，助力业务快速...
零售行业：伽蓝集团
客户介绍 作为一家数字化驱动的生物科技美妆企业，伽蓝集团始终致力于探索东方女性对美的追求。自2001年建立以来，伽蓝集团先后创立了美素、自然堂等多个品牌，业务规模迅速发展壮大，逐渐成为国货美妆的中坚力量。业务需求 打通线上与线下...
阿里云ES机器学习
Elasticsearch（简称ES）机器学习是一种利用机器学习技术对ES数据进行分析和预测的工具和框架。NLP在ES中的应用，使得ES具备了情感分析、实体识别、文本分类和QA问答等机器学习能力，可以提升ES搜索体验能力和降低ES使用难度。本文介绍机器...
可视化图表概述
可视化图表可以帮助您直观、清晰地展示数据分析结果，本文为您介绍不同类型图表的适用场景，以及不同版本支持的图表类型，辅助您快速选取合适的图表进行数据呈现和展示。Quick BI提供了40余种图表样式，包含了表格类、指标类、线/面图类、...
企业版和标准版功能对比
支持 支持 全密态 PolarDB MySQL版 提供全密态数据库功能，数据在用户侧加密后传入数据库管理系统，数据明文对于数据库服务端不可见，实现了端到端的全程加密的数据强安全性。支持 支持 连接管理 连接池 PolarDB 支持会话级连接池和事务级...
公开数据集概述
简介 MaxCompute开放的公开数据集类别包括：GitHub公开事件数据、国家统计数据、TPC性能测试数据、数字商业类数据、生活服务类数据、金融股票类数据。所有的数据均存储在MaxCompute产品的公开项目BIGDATA_PUBLIC_DATASET的不同Schema中。...
互联网金融：上海富友支付服务股份有限公司
迁移方案 数据传输服务DTS是阿里云提供的实时数据流服务，支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，助力用户构建安全、可扩展、高...
X-Engine简介
这两个问题虽然可以通过扩展数据库节点的分布式方案解决，但是堆机器不是一个高效的手段，我们更想用技术的手段将数据库性价比提升，实现以少量资源换取性能大幅提高的目的。传统数据库架构的性能已经被仔细的研究过，数据库领域的泰斗，...
功能更新动态（2023年）
创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 创建Kafka数据源 离线集成 新增Apache Doris数据源的离线集成。整库迁移任务支持...
文档更新动态（2023年）
更新说明 创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 创建Kafka数据源 离线集成配置优化 新增Apache Doris数据源的离线集成。...
如何对JSON类型进行高效分析
PolarDB 列存索引（In Memory Column Index，IMCI）功能推出了完备的虚拟列与列式JSON功能等，可以快速处理大数据和多种数据类型（包括结构化数据与半结构化数据等），并提供高效的数据分析、查询与流计算能力，适用于数据分析、数据仓库与...
某新能源汽车造车新势力
客户感言 阿里 云原生多模数据库 Lindorm 相比于其他存储引擎和HBase开源版本，提供了更高效的压缩率和同规格下的更大吞吐量，能稳定的支撑高并发、海量数据存储的业务需求。同时提供了成熟的冷热分离方案，大大降低了存储和运维成本，对于...
什么是DataV-Atlas可视分析地图
该工具能够帮助用户快速构建自己的地理分析地图，挖掘时空数据的价值，并支持商业决策和科学研究等领域的应用。适用角色 数据分析科学家 地理信息系统专家 市场营销专家 城市规划专家 产品价值 专业的时空分析工具 提供一系列强大的空间...
RDS术语
X 性能洞察 Performance Insight，是DAS里专注于RDS实例负载监控、关联分析、性能调优的利器，以简单直观的方式帮助用户迅速评估数据库负载，找到性能问题的源头，提升数据库的稳定性。更多信息，请参见 性能洞察。Y 异步复制 应用发起更新...
RDS术语
X 性能洞察 Performance Insight，是DAS里专注于RDS实例负载监控、关联分析、性能调优的利器，以简单直观的方式帮助用户迅速评估数据库负载，找到性能问题的源头，提升数据库的稳定性。更多信息，请参见 性能洞察。Y 异步复制 应用发起更新...
核心自治技术案例解析
通过数据库自治服务DAS，可以帮助企业节省90%的数据库管理成本，降低80%的运维风险，让您可以更集中在业务创新，让业务持续行驶在快车道上。本文以双11期间的实际案例介绍DAS已拥有的核心自治特性：7x24实时异常检测、故障自愈、自动优化、...
使用ETL分析实时订单
应用场景 为满足企业处理实时数据的需求，ETL提供了流式数据抽取、加工和加载功能，能够高效整合海量实时数据，支持拖拽式操作和低代码开发方式，帮助企业轻松完成商业决策分析、报表提速、实时数据计算等。企业在数字化转型过程中，涉及...
圈选
本文通过圈选与其他操作的配合使用，帮助您在分析数据时，从单个维度值提升到多个维度值。使用限制 目前仅以下图表支持圈选功能：趋势类图表：线图、面积图、堆积面积图、百分比堆积面积图、组合图 比较类图表：柱图、堆积柱形图、百分比...
RDS术语
X 性能洞察 Performance Insight，是DAS里专注于RDS实例负载监控、关联分析、性能调优的利器，以简单直观的方式帮助用户迅速评估数据库负载，找到性能问题的源头，提升数据库的稳定性。更多信息，请参见 性能洞察。Y 异步复制 应用发起更新...
DLF+EMR之统一权限最佳实践
DLF 数据权限：DLF所提供的数据湖的数据权限体系，支持配置数据库、数据表、数据列、函数四种维度细粒度权限控制。详见 数据权限概述。业务场景说明 某公司有一个EMR集群，期望Hive/Spark/Presto/Impala引擎可以通过统一的数据权限，控制...
基于Delta lake的一站式数据湖构建与分析实战
数据湖作为一个集中化的数据存储仓库，支持的数据类型具有多样性，包括结构化、半结构化以及非结构化的数据，数据来源上包含数据库数据、binglog 增量数据、日志数据以及已有数仓上的存量数据等。数据湖能够将这些不同来源、不同格式的数据...
FineBI连接MaxCompute
MaxCompute支持您将MaxCompute项目数据接入FineBI，帮助企业的业务人员和数据分析师开展以问题为导向的探索式分析工作。本文为您介绍如何通过MaxCompute JDBC驱动，连接FineBI和MaxCompute项目，并进行可视化数据分析。背景信息 FineBI是帆...
聚水潭：云原生数据仓库助力企业实现商业洞察
客户价值 中国最大的电商SaaS ERP提供商聚水潭引入阿里云 AnalyticDB PostgreSQL版 构建企业级云原生数据仓库，获得了如下方面的提升：海量数据高效 AnalyticDB PostgreSQL版 以其强大的批处理和多维度复杂分析能力支撑用户包括ETL、CRM和...
异构数据源访问
若您需要通过 AnalyticDB PostgreSQL版 访问外部异构数据源（HDFS、Hive和JDBC）时，可以使用异构数据源访问功能将外部数据转换为 AnalyticDB PostgreSQL版 数据库优化后的格式进行查询和分析。功能说明 外部数据源管理提供高性能的结构化...
数据分析概述
数据分析是数据辅助决策的最后一公里，是最终的数据可视化展示与探索分析的部分，选择使用最适合的数据展示方式，可以帮助分析人员大大提升分析效率。仪表板：支持近40种数据图表，操作方便简单，如果您是专业版用户，还可以在群空间下配置...
应用场景
数据自助分析与决策 某科技企业在业务数据化运营中，经常需对用户留存率、活跃率等进行数据报表分析，而Quick BI数据展现丰富，操作便捷，很好地满足了用户全程数据的自助分析与即时决策快节奏，解决了用户的以下问题：取数难 业务人员需...
- 产品推荐
- 这些文档可能帮助您