Databricks 数据洞察lake-阿里云

Delta Lake与Databricks开源和Lakehouse架构的关系是什么？

Delta Lake基础介绍（开源版）【Databricks 数据洞察公开课】

作者：王晓龙（筱龙），阿里云开源大数据平台技术专家一、Delta Lake背景回顾1. 大数据平台架构演进大数据平台经历了三种架构的演进：a.第一代：数仓架构支持的场景有限，不适用于高阶复杂的查询分析场景，比如data science和ML场景；scale-out扩展能力差。b.第二代：数据湖+数仓...

Databricks数据洞察公开课

5 课时 |

54 人已学 |

加入学习

Databricks 企业版 Spark&Delta Lake 引擎助力 Lakehouse 高效访问

作者：李锦桂（锦犀）阿里云开源大数据平台开发工程师王晓龙（筱龙）阿里云开源大数据平台技术专家背景介绍Databricks是全球领先的Data+AI企业，是Apache Spark的创始公司，也是Spark的最大代码贡献者，核心围绕Spark、Delta Lake、MLFlow等开源生态打造企业级...

Delta Lake的演进历史及现状【Databricks 数据洞察公开课】

作者：王晓龙阿里云开源大数据平台技术专家一、Delta Lake介绍大数据平台架构发展至今，已经经历了三个阶段的技术演进：从最早的数仓，到数据湖+数仓的架构，再到最近两年的Lakehouse架构。最早的数仓架构是Schema-on-write的设计。如上图，数据首先由关系型数据库经过ETL导入数据...

如何使用Delta Lake构建批流一体数据仓库【Databricks 数据洞察公开课】

作者：李元健，Deltabricks软件工程师冯加亮，阿里云开源大数据平台技术工程师Delta Lake是一个开源存储层，它为数据湖带来了可靠性。Delta Lake提供了ACID事务、可扩展的元数据处理，并统一了流式处理和批处理数据处理。Delta-Lake运行在现有数据湖之上，并且与Apache...

Delta Lake基础介绍（商业版）【Databricks 数据洞察公开课】

作者：李洁杏，Databrick资深软件工程师一、Lakehouse搜索引擎设计背景1. 数据仓库和Lakehouse数据管理系统从早期的数据仓库（Data Warehouse），已经发展到今天的Lakehouse。Lakehouse可以同时存储结构化、半结构化和非结构化数据，并且支持流分析、BI、...

【实践案例】Databricks 数据洞察 Delta Lake 在基智科技（STEPONE）的应用实践

作者高爽，基智科技数据中心负责人尚子钧，数据研发工程师1、基智科技北京基智科技有限公司是一家提供智能营销服务的科技公司。公司愿景是基于 AI 和大数据分析为 B2B 企业提供全流程的智能营销服务。公司秉承开放，挑战，专业，创新的价值观从线索挖掘到 AI 智达、CRM 客户管理覆盖客户全生命周期，实现...

【译】Databricks使用Spark Streaming和Delta Lake对流式数据进行数据质量监控介绍

原文链接：https://databricks.com/blog/2020/03/04/how-to-monitor-data-stream-quality-using-spark-streaming-and-delta-lake.html 在这个一切都需要进行加速的时代，流数据的使用变得越来越普遍...

共有8条

< 1 >

跳转至： GO

更新时间 2023-05-19 15:02:08

本页面内关键词为智能算法引擎基于机器学习所生成，如有任何问题，可在页面下方点击"联系我们"与我们沟通。

产品推荐

{"moduleinfo":{"card_count":[{"count_phone":1,"count":1}],"search_count":[{"count_phone":4,"count":4}]},"card":[{"des":"阿里云数据库专家保驾护航，为用户的数据库应用系统进行性能和风险评估，参与配合进行数据压测演练，提供数据库优化方面专业建议，在业务高峰期与用户共同保障数据库系统平稳运行。","link1":"https://www.aliyun.com/service/optimization/database","link":"https://www.aliyun.com/service/chiefexpert/database","icon":"https://img.alicdn.com/tfs/TB1a5ZfonnI8KJjy0FfXXcdoVXa-100-100.png","btn2":"数据库紧急救援服务","tip":"还有更多专家帮助您解决云上业务问题：<a href=\"https://www.aliyun.com/service/list#f4\" target=\"_blank\">立即查看</a>","btn1":"云上数据库优化服务","link2":"https://www.aliyun.com/service/databaserescue","title":"数据库专家服务"}],"search":[{"txt":"安全首席专家","link":"https://www.aliyun.com/service/chiefexpert/security"},{"txt":"中间件首席专家","link":"https://www.aliyun.com/service/chiefexpert/middleware"},{"txt":"系统与平台首席专家","link":"https://www.aliyun.com/service/chiefexpert/platform"},{"txt":"存储首席专家","link":"https://www.aliyun.com/service/chiefexpert/storage"}],"countinfo":{"search":{"length_pc":0,"length":0},"card":{"length_pc":0,"length":0}},"simplifiedDisplay":"newEdition","newCard":[{"link":"https://img.alicdn.com/tfs/TB1XY8hGYr1gK0jSZFDXXb9yVXa-1740-328.png","icon":"HybridDB","contentLink":"https://www.aliyun.com/product/ads","title":"云原生数据仓库AnalyticDB MySQL版","des":"云原生数据仓库 AnalyticDB MySQL版是一种支持高并发低延时查询的新一代云原生数据仓库，全面兼容MySQL协议以及SQL：2003 语法标准，可以对海量数据进行即时的多维分析透视和业务探索，快速构建企业云上数据仓库。","btn1":"了解详情","link1":"https://www.aliyun.com/product/ads","btn2":"管理控制台","link2":"https://ads.console.aliyun.com/adb/cn-hangzhou/summary","btn3":"在线咨询","link3":"https://www.aliyun.com/core/online-consult?spm=5176.8789780.7y9jhqsfz.115.47ea55caeL2Mfu&from=OVtXEBmlH8","infoGroup":[{"infoName":"最新活动","infoContent":{"firstContentName":"数据库上云优选推荐","firstContentLink":"https://www.aliyun.com/database/bestoffer","lastContentName":"","lastContentLink":""}},{"infoName":"快速入门","infoContent":{"firstContentName":"产品介绍","firstContentLink":"https://help.aliyun.com/document_detail/93776.html","lastContentName":"产品优势","lastContentLink":"https://help.aliyun.com/document_detail/93818.html"}},{"infoName":"最佳实践","infoContent":{"firstContentName":"OLTP+OLAP架构","firstContentLink":"https://www.aliyun.com/solution/database/htap","lastContentName":"数据库客户案例合集","lastContentLink":"https://www.aliyun.com/database/case"}},{"infoName":"产品推荐","infoContent":{"firstContentName":"云数据库 ClickHouse","lastContentName":"云数据仓库 ADB PG","firstContentLink":"https://www.aliyun.com/product/clickhouse","lastContentLink":"https://www.aliyun.com/product/gpdb"}}],"ifIcon":"icon"}],"visual":{"textColor":"dark","topbg":""}}

{"$env":{"JSON":{}},"$page":{"env":"production"},"$context":{"moduleinfo":{"card_count":[{"count_phone":1,"count":1}],"search_count":[{"count_phone":4,"count":4}]},"card":[{"des":"阿里云数据库专家保驾护航，为用户的数据库应用系统进行性能和风险评估，参与配合进行数据压测演练，提供数据库优化方面专业建议，在业务高峰期与用户共同保障数据库系统平稳运行。","link1":"https://www.aliyun.com/service/optimization/database","link":"https://www.aliyun.com/service/chiefexpert/database","icon":"https://img.alicdn.com/tfs/TB1a5ZfonnI8KJjy0FfXXcdoVXa-100-100.png","btn2":"数据库紧急救援服务","tip":"还有更多专家帮助您解决云上业务问题：<a href=\"https://www.aliyun.com/service/list#f4\" target=\"_blank\">立即查看</a>","btn1":"云上数据库优化服务","link2":"https://www.aliyun.com/service/databaserescue","title":"数据库专家服务"}],"search":[{"txt":"安全首席专家","link":"https://www.aliyun.com/service/chiefexpert/security"},{"txt":"中间件首席专家","link":"https://www.aliyun.com/service/chiefexpert/middleware"},{"txt":"系统与平台首席专家","link":"https://www.aliyun.com/service/chiefexpert/platform"},{"txt":"存储首席专家","link":"https://www.aliyun.com/service/chiefexpert/storage"}],"countinfo":{"search":{"length_pc":0,"length":0},"card":{"length_pc":0,"length":0}},"simplifiedDisplay":"newEdition","newCard":[{"link":"https://img.alicdn.com/tfs/TB1XY8hGYr1gK0jSZFDXXb9yVXa-1740-328.png","icon":"HybridDB","contentLink":"https://www.aliyun.com/product/ads","title":"云原生数据仓库AnalyticDB MySQL版","des":"云原生数据仓库 AnalyticDB MySQL版是一种支持高并发低延时查询的新一代云原生数据仓库，全面兼容MySQL协议以及SQL：2003 语法标准，可以对海量数据进行即时的多维分析透视和业务探索，快速构建企业云上数据仓库。","btn1":"了解详情","link1":"https://www.aliyun.com/product/ads","btn2":"管理控制台","link2":"https://ads.console.aliyun.com/adb/cn-hangzhou/summary","btn3":"在线咨询","link3":"https://www.aliyun.com/core/online-consult?spm=5176.8789780.7y9jhqsfz.115.47ea55caeL2Mfu&from=OVtXEBmlH8","infoGroup":[{"infoName":"最新活动","infoContent":{"firstContentName":"数据库上云优选推荐","firstContentLink":"https://www.aliyun.com/database/bestoffer","lastContentName":"","lastContentLink":""}},{"infoName":"快速入门","infoContent":{"firstContentName":"产品介绍","firstContentLink":"https://help.aliyun.com/document_detail/93776.html","lastContentName":"产品优势","lastContentLink":"https://help.aliyun.com/document_detail/93818.html"}},{"infoName":"最佳实践","infoContent":{"firstContentName":"OLTP+OLAP架构","firstContentLink":"https://www.aliyun.com/solution/database/htap","lastContentName":"数据库客户案例合集","lastContentLink":"https://www.aliyun.com/database/case"}},{"infoName":"产品推荐","infoContent":{"firstContentName":"云数据库 ClickHouse","lastContentName":"云数据仓库 ADB PG","firstContentLink":"https://www.aliyun.com/product/clickhouse","lastContentLink":"https://www.aliyun.com/product/gpdb"}}],"ifIcon":"icon"}],"visual":{"textColor":"dark","topbg":""}}}

云原生数据仓库AnalyticDB MySQL版

云原生数据仓库 AnalyticDB MySQL版是一种支持高并发低延时查询的新一代云原生数据仓库，全面兼容MySQL协议以及SQL：2003 语法标准，可以对海量数据进行即时的多维分析透视和业务探索，快速构建企业云上数据仓库。

了解详情

管理控制台

在线咨询