問題タブ [kafka-topic]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
apache-kafka - カフカトピックはいくつの消費者グループを処理できますか?
約 10 個のパーティションを持つ kafka トピックがあるとします。最大の並列処理を実現するには、すべてのコンシューマー グループで、常にトピックから読み取る 10 個のコンシューマーが必要であることを理解しています。
ただし、特定の時点でトピックが処理できる消費者グループの数にも直接的なルールがあるかどうかを知りたいと思いました。（最近のインタビューで聞かれました。）私の知る限りでは、ブローカの構成に依存するため、任意の時点で処理できる接続の数は異なります。
ただし、特定の時点で最大何個のコンシューマー グループ (それぞれに 10 個のコンシューマーを含む) をスケーリングできるか知りたいですか?
apache-kafka - コネクタを使用せずにデータベース データを Kafka トピックにストリーミングする
すべての MySQL データベース データを Kafka トピックにプッシュする必要があるユース ケースがあります。これで、Kafka コネクタを使用してこれを実行できることがわかりましたが、コネクタを使用せずに内部ですべてがどのように機能するかを理解したいと思います。私の春のブートプロジェクトでは、すべての構成を設定し、プロデューサーレコードを作成するなど、Kafka プロデューサーファイルを既に作成しています。
誰かがこのアプローチを以前に試したことがありますか? 誰でもこれに光を当てることができますか？