消費者グループIDを理解する 質問する

消費者グループIDを理解する 質問する

Apache Kafka 0.10.1.0 を新規インストールしました。

コマンドプロンプトでメッセージを送受信できました。

プロデューサー/コンシューマーJavaサンプルを使用しているときに、グループIDConsumer Example のパラメータ。

この問題を解決する方法を教えてください。

以下は私が使用した消費者の例です。

public static void main(String[] args) {
             Properties props = new Properties();
             props.put("bootstrap.servers", "localhost:9092");
             props.put("group.id", "my-topic");
             props.put("enable.auto.commit", "true");
             props.put("auto.commit.interval.ms", "1000");
             props.put("key.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");
             props.put("value.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");
             KafkaConsumer<String, String> consumer = new KafkaConsumer<>(props);
             try {
                 consumer.subscribe(Arrays.asList("my-topic"));

                     ConsumerRecords<String, String> records = consumer.poll(100);
                     System.err.println("records size=>"+records.count());
                     for (ConsumerRecord<String, String> record : records) 
                         System.out.printf("offset = %d, key = %s, value = %s%n", record.offset(), record.key(), record.value());



              }
             catch (Exception ex){
                 ex.printStackTrace();
             }
            finally {
                 consumer.close();
            }
        }

コンシューマーのコマンドを実行すると、プロデューサーによって投稿されたメッセージ(コンソール上)が表示されます。しかし、Javaプログラムからのメッセージは表示されません。

bin\windows\kafka-console-consumer.bat --bootstrap-server localhost:9092 --topic my-topic --from-beginning

ベストアンサー1

コンシューマーはコンシューマー グループ名で自身にラベルを付け、トピックに公開された各レコードは、サブスクライブしている各コンシューマー グループ内の 1 つのコンシューマー インスタンスに配信されます。コンシューマー インスタンスは、別のプロセスまたは別のマシン上に存在できます。

すべてのコンシューマー インスタンスが同じコンシューマー グループを持つ場合、レコードはコンシューマー インスタンス間で効果的に負荷分散されます。

すべてのコンシューマー インスタンスに異なるコンシューマー グループがある場合、各レコードはすべてのコンシューマー プロセスにブロードキャストされます。

group.id は、このコンシューマーが属するコンシューマー プロセスのグループを一意に識別する文字列です。

カフカ入門

おすすめ記事