錄製於 SpringOne2GX 2015。演講者：Joe Stein 大資料專場 幻燈片： http://www.slideshare.net/SpringCentral/developing-realtime-data-pipelines-with-apache-kafka-53201942 使用 Apache Kafka 構建即時資料管道 http://kafka.apache.org/ 旨在為開發者介紹為何以及如何使用 Apache Kafka。Apache Kafka 是一個釋出-訂閱訊息系統，被重新構想為一個分散式提交日誌。Kafka 被設計用來允許單個叢集充當中心資料骨幹。單個 Kafka Broker 每秒可以處理來自數千個客戶端的數億位元組的讀寫操作。它可以彈性、透明地擴充套件，而不會停機。資料流被分割槽並分散在機器叢集上，以允許資料流大於任何單臺機器的能力，並允許協調的消費者叢集。訊息會被持久化到磁碟並在叢集內複製，以防止資料丟失。每個 Broker 可以處理 TB 級的資料。對於 Spring 使用者，Spring Integration Kafka 和 Spring XD 提供了與 Apache Kafka 的整合。