kafka consumerrecord能進行過濾嗎

是的，Kafka ConsumerRecord 可以進行過濾。在 Kafka 消費者應用程序中，您可以使用 ConsumerRecords 的 filter() 方法來過濾接收到的記錄。filter() 方法接受一個 Predicate 函數作為參數，該函數用于確定哪些記錄應該被保留或丟棄。

以下是一個簡單的示例，展示了如何使用 filter() 方法過濾 Kafka ConsumerRecord：

import org.apache.kafka.clients.consumer.ConsumerRecord;
import org.apache.kafka.clients.consumer.ConsumerRecords;
import org.apache.kafka.clients.consumer.KafkaConsumer;

import java.time.Duration;
import java.util.Arrays;
import java.util.Properties;

public class FilteredKafkaConsumer {
    public static void main(String[] args) {
        Properties props = new Properties();
        props.put("bootstrap.servers", "localhost:9092");
        props.put("group.id", "test");
        props.put("key.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");
        props.put("value.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");

        KafkaConsumer<String, String> consumer = new KafkaConsumer<>(props);
        consumer.subscribe(Arrays.asList("test-topic"));

        while (true) {
            ConsumerRecords<String, String> records = consumer.poll(Duration.ofMillis(100));
            for (ConsumerRecord<String, String> record : records) {
                if (record.value().contains("filtered")) {
                    continue;
                }
                System.out.printf("offset = %d, key = %s, value = %s%n", record.offset(), record.key(), record.value());
            }
        }
    }
}

在這個示例中，我們創建了一個 Kafka 消費者，訂閱了名為 “test-topic” 的主題。然后，我們使用一個無限循環來輪詢新記錄。對于每個接收到的記錄，我們檢查其值是否包含字符串 “filtered”。如果包含，我們使用 continue 語句跳過該記錄；否則，我們打印記錄的偏移量、鍵和值。這樣，只有不包含 “filtered” 字符串的記錄才會被處理。