国产 无码 综合区,色欲AV无码国产永久播放,无码天堂亚洲国产AV,国产日韩欧美女同一区二区

[kafka] 消費沒有數(shù)據(jù)的問題解決Group coordinator lookup failed: The coordinator is not available

這篇具有很好參考價值的文章主要介紹了[kafka] 消費沒有數(shù)據(jù)的問題解決Group coordinator lookup failed: The coordinator is not available。希望對大家有所幫助。如果存在錯誤或未考慮完全的地方,請大家不吝賜教,您也可以點擊"舉報違法"按鈕提交疑問。

[kafka] 消費沒有數(shù)據(jù)的問題解決Group coordinator lookup failed: The coordinator is not available

目錄

前言

一、解決問題


前言

在項目中使用了kafka,生產(chǎn)者可以正常的往里放數(shù)據(jù),但是消費者無法獲取數(shù)據(jù),通過kafka命令獲取也無法獲取,觀察控制臺發(fā)現(xiàn),報了如下錯誤。

DEBUG org.apache.kafka.clients.Metadata - Updated cluster metadata version 133 to Cluster(id = YFJdX6kITzuEPD3F4zdZEw, nodes = [master:9092 (id: 39 rack: null)], partitions = [Partition(topic = fuxi_test, partition = 0, leader = 39, replicas = [39], isr = [39], offlineReplicas = [])], controller = master:9092 (id: 39 rack: null))
[ForkJoinPool-1-worker-5] DEBUG o.a.k.c.consumer.internals.AbstractCoordinator - [Consumer clientId=consumer-1, groupId=test_consumer] Sending FindCoordinator request to broker master:9092 (id: 39 rack: null)
[ForkJoinPool-1-worker-5] DEBUG o.a.k.c.consumer.internals.AbstractCoordinator - [Consumer clientId=consumer-1, groupId=test_consumer] Received FindCoordinator response ClientResponse(receivedTimeMs=1590026706655, latencyMs=4, disconnected=false, requestHeader=RequestHeader(apiKey=FIND_COORDINATOR, apiVersion=2, clientId=consumer-1, correlationId=265), responseBody=FindCoordinatorResponse(throttleTimeMs=0, errorMessage='null', error=COORDINATOR_NOT_AVAILABLE, node=:-1 (id: -1 rack: null)))
[ForkJoinPool-1-worker-5] DEBUG o.a.k.c.consumer.internals.AbstractCoordinator - [Consumer clientId=consumer-1, groupId=test_consumer] Group coordinator lookup failed: The coordinator is not available.
[ForkJoinPool-1-worker-5] DEBUG o.a.k.c.consumer.internals.AbstractCoordinator - [Consumer clientId=consumer-1, groupId=test_consumer] Coordinator discovery failed, refreshing metadata

一、解決問題

排查發(fā)現(xiàn)topic中沒有__consumer_offsets,必須有他才可以正常獲取到值,創(chuàng)建命令如下,創(chuàng)建后重啟kafka服務和zookeeper服務,就可以正常獲取到數(shù)據(jù)了。

kafka-topics --zookeeper 127.0.0.1:2181 --partitions 1 --replication-factor 1 --create --topic __consumer_offsets

kafka-topics.bat在kafka/bin/windows下

kafka消費不到數(shù)據(jù),kafka,kafka,分布式

?一定記得執(zhí)行命令后重啟kafka服務。

到此問題解決。希望對小伙伴們有幫助。文章來源地址http://www.zghlxwxcb.cn/news/detail-733743.html

到了這里,關于[kafka] 消費沒有數(shù)據(jù)的問題解決Group coordinator lookup failed: The coordinator is not available的文章就介紹完了。如果您還想了解更多內(nèi)容,請在右上角搜索TOY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關文章,希望大家以后多多支持TOY模板網(wǎng)!

本文來自互聯(lián)網(wǎng)用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務,不擁有所有權,不承擔相關法律責任。如若轉載,請注明出處: 如若內(nèi)容造成侵權/違法違規(guī)/事實不符,請點擊違法舉報進行投訴反饋,一經(jīng)查實,立即刪除!

領支付寶紅包贊助服務器費用

相關文章

  • Kafka-消費者-Consumer Group Rebalance設計

    Kafka-消費者-Consumer Group Rebalance設計

    在同一個Consumer Group中,同一個Topic的不同分區(qū)會分配給不同的消費者進行消費,那么為消費者分配分區(qū)的操作是在Kafka服務端完成的嗎?分區(qū)是如何進行分配呢?下面來分析Rebalance操作的原理。 Kafka最開始的解決方案是通過ZooKeeper的Watcher實現(xiàn)的。 每個Consumer Group在ZooKeeper下都維

    2024年01月19日
    瀏覽(26)
  • kafka消費者報錯Offset commit ......it is likely that the consumer was kicked out of the group的解決

    2022年10月份接到一個小功能,對接kafka將數(shù)據(jù)寫到數(shù)據(jù)庫,開始的需求就是無腦批量insert,隨著時間的推移,業(yè)務需求有變更,kafka的生產(chǎn)消息頻次越來越高,到今年7月份為止就每秒會有幾十條甚至上百條,然后消費消息的代碼就報錯: Caused by: org.apache.kafka.clients.consumer.Com

    2024年02月07日
    瀏覽(22)
  • kafka消費者的group id從哪里獲取

    kafka消費者的group id從哪里獲取

    今天跑了一下kafka的示例demo,突然意識到一個問題。消費者拉取broker的消息時需要指定group id,而生產(chǎn)者將消息發(fā)送到broker的時候并不會指定group id,那么消費者的group id從哪里獲取呢? 查閱我的這篇文章?kafka消費者?的3.1小節(jié), 如果不配置該參數(shù),則會拋出異常。為此,筆

    2024年02月11日
    瀏覽(16)
  • Kafka中的group_id:實現(xiàn)消息分組消費的關鍵

    Kafka是一種高性能、可擴展的分布式消息系統(tǒng),被廣泛應用于大規(guī)模數(shù)據(jù)流處理的場景。在Kafka中,group_id是一個關鍵概念,用于實現(xiàn)消息的分組消費。本文將詳細介紹group_id的作用和使用方法,并提供相應的源代碼示例。 Kafka消息分組消費的概念是指多個消費者協(xié)同消費同一

    2024年02月03日
    瀏覽(13)
  • Kafka 消費者“group_name”組正在永遠重新平衡

    前些天發(fā)現(xiàn)了一個巨牛的人工智能學習網(wǎng)站,通俗易懂,風趣幽默,忍不住分享一下給大家。點擊跳轉到網(wǎng)站。 卡夫卡:2.11-1.0.1。 主題:并發(fā)度為 5 且分區(qū)為 5 。 當應用程序重新啟動并且在分區(qū)分配之前在主題上發(fā)布消息時,主題的 5 個消費者找到組協(xié)調器并向組協(xié)調器發(fā)

    2024年02月11日
    瀏覽(14)
  • 解決Kafka新消費者組導致重復消費的問題

    ???????? 問題描述 :在使用Kafka時,當我們向新的消費者組中添加消費者時,可能會遇到重復消費的問題。本文將介紹一些解決這個問題的方法,幫助開發(fā)者更好地處理Kafka中的消費者組和消費偏移量。 ????????Kafka是一個強大的分布式消息隊列系統(tǒng),但在使用過程中

    2024年02月07日
    瀏覽(18)
  • kafka消費不到數(shù)據(jù)問題

    出問題現(xiàn)象 最近項目使用到了kafka,別的系統(tǒng)作為生產(chǎn)者,我們系統(tǒng)作為消費者,但是經(jīng)常出現(xiàn)消費者消費一段時間就不消費了,根本就觸發(fā)不了kafkaListener的拉取動作。換一個消費者組,從最新的位置消費又可以消費的到,但是消費一段時間就又消費不到。查看服務端沒任何

    2024年02月11日
    瀏覽(19)
  • kafka消費者詳解,根據(jù)實際生產(chǎn)解決問題

    1.首先kafka每創(chuàng)建一個消費者就是一個消費者組,必須指定groupip 2.兩個消費者組之間不相互影響,消費同一個主題的同一個分區(qū),兩個消費者組不相互影響,各自記錄自己的offset 3.在開發(fā)中如果沒有指定每個消費者去消費特定的分區(qū),那么kafka默認是按照roundRobin輪詢的方式分

    2024年02月10日
    瀏覽(17)
  • 【工作中問題解決實踐 十一】Kafka消費者消費堆積且頻繁rebalance

    【工作中問題解決實踐 十一】Kafka消費者消費堆積且頻繁rebalance

    最近有點不走運,老是遇到基礎服務的問題,還是記著點兒解決方法,以后再遇到快速解決吧,今天遇到這個問題倒不算緊急,但也能通過這個問題熟悉一下Kafka的配置。 正在開會的時候突然收到一連串的報警,趕忙看看是為啥 沒過一會兒基礎服務報警也來了 Kafka 自身的異

    2024年02月13日
    瀏覽(27)
  • Kafka消費者無法消費數(shù)據(jù),解決

    作為一個在項目中邊學邊用的實習生,真的被昨天還好好的今天就不能消費數(shù)據(jù)的kafka折磨到了,下面提供一點建議,希望能對大家有所幫助。 //操作前集群都關了 1.首先去kafka-home的config目錄下找到server.properties文件, 加入advertised.listeners=PLAINTEXT://ip:9092? ? 如果有配置liste

    2024年02月17日
    瀏覽(21)

覺得文章有用就打賞一下文章作者

支付寶掃一掃打賞

博客贊助

微信掃一掃打賞

請作者喝杯咖啡吧~博客贊助

支付寶掃一掃領取紅包,優(yōu)惠每天領

二維碼1

領取紅包

二維碼2

領紅包