6、如何区分批处理还是流处理你好,我是蔡元楠。 今天,我将会带领你一起学习在进行大规模数据处理时,无论如何也绕不开的两个处理模式:批处理(Batching Processing)和流处理(Streaming Processing)。 在我看来,大规模的视频流系统、大规模物联网(...2026-01-25大规模数据处理实战
7、Workflow设计模式:让你在大规模数据世界中君临天下你好,我是蔡元楠。 今天我要与你分享的主题是“Workflow设计模式”。 在上一讲中,我们一起学习了大规模数据处理的两种处理模式——批处理和流处理。 利用好这两种处理模式,作为架构师的你就可以运筹帷幄,根据实际需求搭建出一套符合自己应用的数据处理系...2026-01-25大规模数据处理实战
8、发布、订阅模式:流处理架构中的瑞士军刀你好,我是蔡元楠。 今天我想要与你分享的是在处理大规模数据中十分流行的一种设计模式:发布/订阅模式(Publish/Subscribe Pattern),有些地方也称它为Pub/Sub。 在了解发布/订阅模式之...2026-01-25大规模数据处理实战
9、CAP定理:三选二,架构师必须学会的取舍你好,我是蔡元楠。 今天我要与你分享的主题是CAP定理。 在分布式系统的两讲中,我们一起学习到了两个重要的概念:可用性和一致性。 而今天,我想和你讲解一个与这两个概念相关,并且在设计分布式系统架构时都会讨论到的一个定理——CAP定理(CAP Theo...2026-01-25大规模数据处理实战
10、Lambda架构:Twitter亿级实时数据分析架构背后的倚天剑你好,我是蔡元楠。 今天我要与你分享的主题是Lambda架构。 通过这一讲,你可以了解什么是Lambda架构,以及它为什么能够成为Twitter亿级实时数据分析架构背后的“倚天剑”。 在学习了架构师的必备技能后,你是否已经摩拳擦掌,跃跃欲试地想要上手...2026-01-25大规模数据处理实战
11、Kappa架构:利用Kafka锻造的屠龙刀你好,我是蔡元楠。 今天我要分享的主题是Kappa架构。 同样身为大规模数据处理架构,Kappa架构这把利用Kafka锻造的“屠龙刀”,它与Lambda架构的不同之处在哪里呢? 上一讲中,我讲述了在处理大规模数据时所用到经典架构,Lambda架构。我...2026-01-25大规模数据处理实战