Kafka python APIはストリーム処理をサポートしていますか？

Question

私はKafka Javaのストリームを使用しました。Pythonで同様のAPIが見つかりませんでした。ApacheKafkaはPythonでストリーム処理をサポートしていますか？

Answer 1

Kafka StreamsはJVMライブラリとしてのみ利用可能ですが、少なくとも2つのPython実装があります

• wintincode/winton-kafka-streams
• robinhood/faust

理論的には、JythonまたはPy4jで遊んで、JVM実装をサポートすることはできますが、それ以外の場合は、コンシューマ/プロデューサで立ち往生している、またはKSQL RESTインターフェースを呼び出しています。

これらのオプション以外にも、Apache Beam、Flink、Sparkを試すことができますが、スケールアウトするには外部クラスタースケジューラが必要です。