Kafka使用了偏移量（offset）來解決重復消費問題。
偏移量是一個持久化的標識，用于標記某個消費者在特定分區中已經消費的消息位置。每個分區都有自己的偏移量。
當消費者成功消費一條消息后，會將偏移量提交給Kafka。Kafka會將提交的偏移量保存在內部的主題中。這樣，即使消費者重新啟動，它也可以通過讀取保存的偏移量來確定接下來需要從哪個位置開始繼續消費。
通過使用偏移量，Kafka可以確保消費者不會重復消費消息。當消費者重新加入消費組時，它會從最新的提交的偏移量開始繼續消費。
此外，Kafka還提供了以下兩種處理重復消費的機制：
自動提交偏移量：消費者可以配置為自動提交偏移量。在這種情況下，Kafka會自動定期提交偏移量。但是，如果消費者在提交偏移量之前崩潰，可能會導致重復消費。
手動提交偏移量：消費者可以手動控制何時提交偏移量。在這種情況下，消費者可以根據自身邏輯來決定何時提交偏移量。這樣可以更精確地控制提交的時間點，避免重復消費的問題。
