web-dev-qa-db-ja.com

Kafka Amazon MSKで接続

Kafka Amazon MSKでアダプターを接続しますか?AWSのドキュメントによると、それはKafka接続をサポートしていますが、アダプターのセットアップ方法と使用方法について文書化されていません。

AFAIK Amazon MSKはマネージコネクタを提供していないため、自分で実行する必要があります。これは、Kafka Connectワーカープロセス(JVM)を実行し、実行する1つ以上のコネクタ構成を提供することによって行われます。

Kafka接続ワーカーの観点から見ると、Kafka接続するクラスターが必要です。MSKでもオンプレミスでもかまいません。なぜなら、それは最終的には「ただの」消費者/生産者だからです。

ライブデモを含む詳細については、こちらをご覧ください: https://rmoff.dev/bbuzz19-kafka-connect

Kafka Connect to cloud-hosted Kafka platform(この場合、Confluent Cloud)を使用するための接続の例については、 この記事

5
Robin Moffatt