))
Kafka: A Distributed Messaging System for Log Processing
Manage episode 487366633 series 3670304
A tartalmat a The Binary Breakdown biztosítja. Az összes podcast-tartalmat, beleértve az epizódokat, grafikákat és podcast-leírásokat, közvetlenül a The Binary Breakdown vagy a podcast platform partnere tölti fel és biztosítja. Ha úgy gondolja, hogy valaki az Ön engedélye nélkül használja fel a szerzői joggal védett művét, kövesse az itt leírt folyamatot https://hu.player.fm/legal.
This paper introduces Kafka, a novel distributed messaging system designed for high-throughput log processing. Kafka addresses limitations in existing messaging systems and log aggregators by offering a scalable, efficient architecture with a simple API. Key features include a pull-based consumption model, efficient storage and data transfer mechanisms, and the use of ZooKeeper for distributed coordination. Performance tests demonstrate Kafka's superior throughput compared to ActiveMQ and RabbitMQ, highlighting its suitability for handling massive volumes of log data. The authors detail Kafka's implementation at LinkedIn, illustrating its use in both online and offline applications.
https://notes.stephenholiday.com/Kafka.pdf
44 epizódok
Megosztás
