什么是Apache Kafka?
Apache Kafka是一个社区分布式流平台,每天能够处理数万亿个事件。
Kafka最初被认为是消息传递队列,它基于分布式提交日志的抽象。自2011年由LinkedIn创建并开源以来,Kafka 已从消息队列迅速发展为功能完善的事件流平台。
由Apache Kafka的原始开发人员创建的Confluent通过Confluent
Platform提供最完整的Kafka分发。Confluent Platform通过其他社区和商业功能改进了Kafka,旨在增强运营商和开发人员在生产中的大规模流媒体体验。
Apache Kafka是开发人员常用的工具,因为它很容易上手,并提供了一个强大的事件流平台,其中包含4个API:生产者,消费者,流和连接。
开发人员通常会从一个单一的用例开始。这可能是使用Apache Kafka作为消息缓冲区来保护无法满足当今工作负载的旧数据库,或者是使用Conneet
API使该数据库与随附的搜索索引引擎保持同步,以便在数据到达时对其进行处理。Streams API即可将表面聚合直接返回到您的应用程序。
简而言之,Apache Kafka及其API使构建数据驱动的应用程序和管理复杂的后端系统变得简单。知道您的数据始终是容错的,可重播的和实时的,Kafka让您安心。通过提供-一个 单一的流平台来处理,存储和连接应用程序和系统并使用实时数据来帮助您快速构建。