国产 无码 综合区,色欲AV无码国产永久播放,无码天堂亚洲国产AV,国产日韩欧美女同一区二区

Kafka系列:查看Topic列表、消息消費情況、模擬生產(chǎn)者消費者

這篇具有很好參考價值的文章主要介紹了Kafka系列:查看Topic列表、消息消費情況、模擬生產(chǎn)者消費者。希望對大家有所幫助。如果存在錯誤或未考慮完全的地方,請大家不吝賜教,您也可以點擊"舉報違法"按鈕提交疑問。

1、查看kafka隊列中topic信息

1.1、查看所有topic

./kafka-topics.sh --zookeeper 10.128.106.52:2181 --list

Kafka系列:查看Topic列表、消息消費情況、模擬生產(chǎn)者消費者

1.2、查看kafka中指定topic的詳情

./kafka-topics.sh --zookeeper 10.128.106.52:2181 --topic ai_jl_analytic --describe

Kafka系列:查看Topic列表、消息消費情況、模擬生產(chǎn)者消費者

2、查看消費者consumer的group列表

2.1 查看所有的group

./kafka-consumer-groups.sh --bootstrap-server 10.128.106.52:9092 --list

Kafka系列:查看Topic列表、消息消費情況、模擬生產(chǎn)者消費者

2.2 查看指定的group

./kafka-consumer-groups.sh --bootstrap-server 10.128.106.52:9092 --group ai-trace --describe

Kafka系列:查看Topic列表、消息消費情況、模擬生產(chǎn)者消費者Kafka系列:查看Topic列表、消息消費情況、模擬生產(chǎn)者消費者

3、創(chuàng)建、修改、刪除topic

3.1 創(chuàng)建topic

./kafka-topics.sh --create --zookeeper 10.128.106.52:2181 --topic test --partitions 8 --replication-factor 1
#創(chuàng)建topic名為test,分區(qū)數(shù)為8,副本數(shù)為1

Kafka系列:查看Topic列表、消息消費情況、模擬生產(chǎn)者消費者Kafka系列:查看Topic列表、消息消費情況、模擬生產(chǎn)者消費者

3.2 修改topic分區(qū)數(shù)量

./kafka-topics.sh --zookeeper 10.128.106.52:2181 -alter --partitions 12 --topic test

Kafka系列:查看Topic列表、消息消費情況、模擬生產(chǎn)者消費者

3.3 刪除topic

./kafka-topics.sh --zookeeper 10.128.106.52:2181 --delete --topic test

Kafka系列:查看Topic列表、消息消費情況、模擬生產(chǎn)者消費者

執(zhí)行topic刪除命令時,出現(xiàn)提示

Topic test is marked for deletion.
Note: This will have no impact if delete.topic.enable is not set to true.

這條命令其實并不執(zhí)行刪除動作,僅僅是在zookeeper上標(biāo)記該topic要被刪除而已,同時也提醒用戶一定要提前打開delete.topic.enable開關(guān),否則刪除動作是不會執(zhí)行的。
解決辦法:
a)在server.properties中設(shè)置delete.topic.enable參數(shù)為ture
b)如下操作:
1.登錄zookee客戶端:./bin/zookeeper-client
2.找到topic所在目錄:ls /brokers/topics
3.執(zhí)行刪除命令:rmr /brokers/topics/test
Kafka系列:查看Topic列表、消息消費情況、模擬生產(chǎn)者消費者

4、模擬生產(chǎn)者/消費者

4.1 生產(chǎn)者生產(chǎn)消息:

./kafka-console-producer.sh --broker-list 10.128.106.52:9092 --topic test

Kafka系列:查看Topic列表、消息消費情況、模擬生產(chǎn)者消費者

4.2 消費者消費消息:

./kafka-console-consumer.sh --bootstrap 10.128.106.52:9092 --topic server

Kafka系列:查看Topic列表、消息消費情況、模擬生產(chǎn)者消費者文章來源地址http://www.zghlxwxcb.cn/news/detail-425923.html

到了這里,關(guān)于Kafka系列:查看Topic列表、消息消費情況、模擬生產(chǎn)者消費者的文章就介紹完了。如果您還想了解更多內(nèi)容,請在右上角搜索TOY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章,希望大家以后多多支持TOY模板網(wǎng)!

本文來自互聯(lián)網(wǎng)用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務(wù),不擁有所有權(quán),不承擔(dān)相關(guān)法律責(zé)任。如若轉(zhuǎn)載,請注明出處: 如若內(nèi)容造成侵權(quán)/違法違規(guī)/事實不符,請點擊違法舉報進行投訴反饋,一經(jīng)查實,立即刪除!

領(lǐng)支付寶紅包贊助服務(wù)器費用

相關(guān)文章

  • 使用kafka-consumer-group.sh查看消息消費情況,CONSUMER-ID,HOST,CLIENT-ID不顯示問題分析

    使用kafka-consumer-group.sh查看消息消費情況,CONSUMER-ID,HOST,CLIENT-ID不顯示問題分析

    在使用使用kafka-consumer-group.sh查看消息消費情況,消息都已經(jīng)消費完了,但是CONSUMER-ID,HOST,CLIENT-ID字段的信息不顯示,而且,消費實例也在運行中,卻出現(xiàn)了 Consumer group \\\'manage.group1\\\' has no active members., 如下圖所示: 消費者的代碼如下: 之所以出現(xiàn)上面的的問題,是因為使

    2024年02月16日
    瀏覽(23)
  • rabbitmq topic模式設(shè)置#通配符情況下 消費者隊列未接收消息問題排查解決

    rabbitmq topic模式設(shè)置#通配符情況下 消費者隊列未接收消息問題排查解決

    生產(chǎn)者配置 Exchange:topic_exchange_shcool Routing key:topic.shcool.# 消費者代碼配置 Exchange:topic_exchange_shcool Routing key:topic.shcool.user 其實以上代碼看著沒有問題,意思是代碼生成一個隊列,并把【topic.shcool.user】隊列和生產(chǎn)者的【topic_exchange_shcool】exchange綁定,但是生產(chǎn)者發(fā)送消息是

    2024年02月11日
    瀏覽(39)
  • Kafka - 主題Topic與消費者消息Offset日志記錄機制

    Kafka - 主題Topic與消費者消息Offset日志記錄機制

    可以根據(jù)業(yè)務(wù)類型,分發(fā)到不同的Topic中,對于每一個Topic,下面可以有多個分區(qū)(Partition)日志文件: kafka 下的Topic的多個分區(qū),每一個分區(qū)實質(zhì)上就是一個隊列,將接收到的消息暫時存儲到隊列中,根據(jù)配置以及消息消費情況來對隊列消息刪除。 可以這么來理解Topic,Partitio

    2024年02月03日
    瀏覽(23)
  • kafka查看topic和消息內(nèi)容命令

    ①創(chuàng)建一個測試用的topic ② 用Kafka的console-producer在topic test 生產(chǎn)消息 ③ 用Kafka的console-consumer 消費topic test的消息 ④查詢topic,進入kafka目錄: ⑤查詢topic內(nèi)容: ⑥查看topic 為 test的 詳細信息 ⑦往topic 為 test的內(nèi)部生產(chǎn)消息 ⑧從topic 為test的內(nèi)部消費消息 ⑨刪除kafka的測試top

    2024年02月11日
    瀏覽(22)
  • 如何查看kafka的topic的消費者組有沒有積壓

    Kafka 自帶的命令行工具 kafka-consumer-groups.sh 來查看消費者組的消費情況,包括是否有積壓。 具體步驟如下: 打開命令行終端,進入 Kafka 安裝目錄下的 bin 文件夾。 輸入以下命令,查看消費者組的消費情況: ./kafka-consumer-groups.sh --bootstrap-server --describe --group kafka-consumer-groups.

    2023年04月18日
    瀏覽(73)
  • kafka 分布式的情況下,如何保證消息的順序消費?

    kafka 分布式的情況下,如何保證消息的順序消費?

    目錄 一、什么是分布式 二、kafka介紹 三、消息的順序消費 四、如何保證消息的順序消費 ? 分布式是指將計算任務(wù)分散到多個計算節(jié)點上進行并行處理的一種計算模型。在分布式系統(tǒng)中,多臺計算機通過網(wǎng)絡(luò)互聯(lián),共同協(xié)作完成任務(wù)。每個計算節(jié)點都可以獨立運行,并且可以

    2024年02月10日
    瀏覽(21)
  • JAVA實時獲取kafka各個主題下分區(qū)消息的消費情況

    通過指定 主題 和 消費者組 調(diào)用方法,實時查看主題下分區(qū)消息的消費情況(消息總數(shù)量、消費消息數(shù)量、未消費的消息數(shù)量)。

    2024年02月13日
    瀏覽(27)
  • Kafka系列之:記錄一次Kafka Topic分區(qū)擴容,但是下游flink消費者沒有自動消費新的分區(qū)的解決方法

    Kafka系列之:記錄一次Kafka Topic分區(qū)擴容,但是下游flink消費者沒有自動消費新的分區(qū)的解決方法

    生產(chǎn)環(huán)境Kafka集群壓力大,Topic讀寫壓力大,消費的lag比較大,因此通過擴容Topic的分區(qū),增大Topic的讀寫性能 理論上下游消費者應(yīng)該能夠自動消費到新的分區(qū),例如flume消費到了新的分區(qū),但是實際情況是存在flink消費者沒有消費到新的分區(qū) 出現(xiàn)無法消費topic新的分區(qū)這種情況

    2024年02月14日
    瀏覽(63)
  • 全網(wǎng)最詳細地理解Kafka中的Topic和Partition以及關(guān)于kafka的消息分發(fā)、服務(wù)端如何消費指定分區(qū)、kafka的分區(qū)分配策略(range策略和RoundRobin策略)

    全網(wǎng)最詳細地理解Kafka中的Topic和Partition以及關(guān)于kafka的消息分發(fā)、服務(wù)端如何消費指定分區(qū)、kafka的分區(qū)分配策略(range策略和RoundRobin策略)

    最近在學(xué)習(xí)kafka相關(guān)的知識,特將學(xué)習(xí)成功記錄成文章,以供大家共同學(xué)習(xí)。 首先要注意的是, Kafka 中的 Topic 和 ActiveMQ 中的 Topic 是不一樣的。 在 Kafka 中, Topic 是一個存儲消息的邏輯概念,可以認為是一個消息集合。每條消息發(fā)送到 Kafka 集群的消息都有一個類別。 物理上

    2024年01月25日
    瀏覽(45)
  • Kafka系列之消息重新消費

    Kafka系列之消息重新消費

    需求來源,在review前人留下的屎山代碼時發(fā)現(xiàn)如下截圖所示的代碼片段: 也就是說代碼是空實現(xiàn)的。另外,從類名定義也知道需求未實現(xiàn)。 于是有此需求:已經(jīng)消費過的消息重新消費。 調(diào)研下來,主要有以下3種可能性方案 修改偏移量,即offset,可通過腳本快速實現(xiàn) 新增

    2024年02月02日
    瀏覽(20)

覺得文章有用就打賞一下文章作者

支付寶掃一掃打賞

博客贊助

微信掃一掃打賞

請作者喝杯咖啡吧~博客贊助

支付寶掃一掃領(lǐng)取紅包,優(yōu)惠每天領(lǐng)

二維碼1

領(lǐng)取紅包

二維碼2

領(lǐng)紅包