你好，我是胡夕。今天我要和你分享的主题是：如何监控Kafka。 监控Kafka，历来都是个老大难的问题。无论是在我维护的微信公众号，还是Kafka QQ群里面，大家问得最多的问题，一定是Kafka的监控。大家提问的内容看似五花八门，但真正想了解的，其...

你好，我是胡夕。今天我要和你分享的主题是：那些主流的Kafka监控框架。 在上一讲中，我们重点讨论了如何监控Kafka集群，主要是侧重于讨论监控原理和监控方法。今天，我们来聊聊具体的监控工具或监控框架。 令人有些遗憾的是，Kafka社区似乎一直没有在...

你好，我是胡夕。今天我要和你分享的主题是：如何调优Kafka。 调优目标在做调优之前，我们必须明确优化Kafka的目标是什么。通常来说，调优是为了满足系统常见的非功能性需求。在众多的非功能性需求中，性能绝对是我们最关心的那一个。不同的系统对性能有不同...

你好，我是胡夕。今天我要和你分享的主题是：从0搭建基于Kafka的企业级实时日志流处理平台。 简单来说，我们要实现一些大数据组件的组合，就如同玩乐高玩具一样，把它们“插”在一起，“拼”成一个更大一点的玩具。 在任何一个企业中，服务器每天都会产生很多的...

你好，我是胡夕。今天我要和你分享的主题是：Kafka Streams与其他流处理平台的差异。 近些年来，开源流处理领域涌现出了很多优秀框架。光是在Apache基金会孵化的项目，关于流处理的大数据框架就有十几个之多，比如早期的Apache Samza、...

你好，我是胡夕。今天我要和你分享的主题是：Kafka Streams DSL开发实例。 DSL，也就是Domain Specific Language，意思是领域特定语言。它提供了一组便捷的API帮助我们实现流式数据处理逻辑。今天，我就来分享一些Ka...