国产 无码 综合区,色欲AV无码国产永久播放,无码天堂亚洲国产AV,国产日韩欧美女同一区二区

【ETL工具】本地環(huán)境IDEA遠(yuǎn)程DEBUG調(diào)試Flume代碼

這篇具有很好參考價(jià)值的文章主要介紹了【ETL工具】本地環(huán)境IDEA遠(yuǎn)程DEBUG調(diào)試Flume代碼。希望對(duì)大家有所幫助。如果存在錯(cuò)誤或未考慮完全的地方,請(qǐng)大家不吝賜教,您也可以點(diǎn)擊"舉報(bào)違法"按鈕提交疑問。

【ETL工具】本地環(huán)境IDEA遠(yuǎn)程DEBUG調(diào)試Flume代碼,ETL 工具,etl,intellij-idea,flume,flume代碼調(diào)試,idea遠(yuǎn)程調(diào)試

?? 個(gè)人主頁(yè)——??個(gè)人主頁(yè) ?????

???????????????? 感謝點(diǎn)贊和關(guān)注 ,每天進(jìn)步一點(diǎn)點(diǎn)!加油!????????????????

目錄

?? 個(gè)人主頁(yè)——??個(gè)人主頁(yè) ?????

一、問題說(shuō)明

二、操作步驟

2.1 idea創(chuàng)建遠(yuǎn)程調(diào)試


一、問題說(shuō)明


Flume 自定義 HDFS-Sink,遠(yuǎn)程服務(wù)器進(jìn)行部署flume打包好后的代碼,本地監(jiān)控遠(yuǎn)程flume程序端口,進(jìn)行本地debug和學(xué)習(xí)Flume 整個(gè)運(yùn)行流程和Event 數(shù)據(jù)結(jié)構(gòu)學(xué)習(xí)。


二、操作步驟


2.1 bin/flume-ng 啟動(dòng)腳本配置


[root@hdp105 apache-flume-1.9.0-bin]# cat bin/flume-ng | grep JAVA_OPT
  $EXEC $JAVA_HOME/bin/java $JAVA_OPTS $FLUME_JAVA_OPTS "${arr_java_props[@]}" -cp "$FLUME_CLASSPATH" \
#JAVA_OPTS="-Xmx20m"
JAVA_OPTS="-Xmx1000m -Xdebug -Xrunjdwp:transport=dt_socket,address=8000,server=y,suspend=y"

2.2?idea創(chuàng)建遠(yuǎn)程調(diào)試


新增遠(yuǎn)程debug模式

【ETL工具】本地環(huán)境IDEA遠(yuǎn)程DEBUG調(diào)試Flume代碼,ETL 工具,etl,intellij-idea,flume,flume代碼調(diào)試,idea遠(yuǎn)程調(diào)試

選擇 Remote 配置選項(xiàng)

【ETL工具】本地環(huán)境IDEA遠(yuǎn)程DEBUG調(diào)試Flume代碼,ETL 工具,etl,intellij-idea,flume,flume代碼調(diào)試,idea遠(yuǎn)程調(diào)試

填寫flume 啟動(dòng)的服務(wù)器IP 和端口

【ETL工具】本地環(huán)境IDEA遠(yuǎn)程DEBUG調(diào)試Flume代碼,ETL 工具,etl,intellij-idea,flume,flume代碼調(diào)試,idea遠(yuǎn)程調(diào)試

遠(yuǎn)程啟動(dòng)flume程序,本地也啟動(dòng)該flume程序,打上斷點(diǎn)。就可以了

bin/flume-ng  agent -n ipva_flume  --conf ./conf/  -f ./conf/traffic_ipva_DSCToHBase/traffic_ipva_DSCToHBase.conf -property "flume.monitoring.type=http;flume.monitoring.port=37242"

遠(yuǎn)程的flume 啟動(dòng)

【ETL工具】本地環(huán)境IDEA遠(yuǎn)程DEBUG調(diào)試Flume代碼,ETL 工具,etl,intellij-idea,flume,flume代碼調(diào)試,idea遠(yuǎn)程調(diào)試

文件放到source監(jiān)控的路徑

【ETL工具】本地環(huán)境IDEA遠(yuǎn)程DEBUG調(diào)試Flume代碼,ETL 工具,etl,intellij-idea,flume,flume代碼調(diào)試,idea遠(yuǎn)程調(diào)試

打上斷點(diǎn), 本地的flume 也啟動(dòng),進(jìn)入debug 模式,我們可以看到 如下 :headers和body中的數(shù)據(jù)

【ETL工具】本地環(huán)境IDEA遠(yuǎn)程DEBUG調(diào)試Flume代碼,ETL 工具,etl,intellij-idea,flume,flume代碼調(diào)試,idea遠(yuǎn)程調(diào)試文章來(lái)源地址http://www.zghlxwxcb.cn/news/detail-716018.html

到了這里,關(guān)于【ETL工具】本地環(huán)境IDEA遠(yuǎn)程DEBUG調(diào)試Flume代碼的文章就介紹完了。如果您還想了解更多內(nèi)容,請(qǐng)?jiān)谟疑辖撬阉鱐OY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章,希望大家以后多多支持TOY模板網(wǎng)!

本文來(lái)自互聯(lián)網(wǎng)用戶投稿,該文觀點(diǎn)僅代表作者本人,不代表本站立場(chǎng)。本站僅提供信息存儲(chǔ)空間服務(wù),不擁有所有權(quán),不承擔(dān)相關(guān)法律責(zé)任。如若轉(zhuǎn)載,請(qǐng)注明出處: 如若內(nèi)容造成侵權(quán)/違法違規(guī)/事實(shí)不符,請(qǐng)點(diǎn)擊違法舉報(bào)進(jìn)行投訴反饋,一經(jīng)查實(shí),立即刪除!

領(lǐng)支付寶紅包贊助服務(wù)器費(fèi)用

相關(guān)文章

  • IDEA遠(yuǎn)程DeBug調(diào)試

    IDEA遠(yuǎn)程DeBug調(diào)試

    1. 介紹 當(dāng)我們?cè)陂_發(fā)過(guò)程中遇到一些復(fù)雜的問題或需要對(duì)代碼進(jìn)行調(diào)試時(shí),遠(yuǎn)程調(diào)試是一種非常有用的工具。使用 IntelliJ IDEA 進(jìn)行遠(yuǎn)程調(diào)試可以讓你在遠(yuǎn)程服務(wù)器上的應(yīng)用程序中設(shè)置斷點(diǎn)、查看變量和執(zhí)行調(diào)試操作。 遠(yuǎn)程調(diào)試的好處如下: 提供更方便的調(diào)試環(huán)境:通過(guò)遠(yuǎn)程

    2024年02月11日
    瀏覽(24)
  • Idea實(shí)現(xiàn)遠(yuǎn)程debug調(diào)試
  • jvm開啟遠(yuǎn)程調(diào)試功能;idea遠(yuǎn)程debug

    jvm開啟遠(yuǎn)程調(diào)試功能;idea遠(yuǎn)程debug

    有時(shí)候一些問題本地調(diào)試無(wú)法復(fù)現(xiàn),這個(gè)時(shí)候可以開啟 jvm 的遠(yuǎn)程調(diào)試功能 jdk8 jdk11/17 修改 tomcat 的 bin 下的 catalina.sh 文件 把 jpda_address 對(duì)應(yīng)的 localhost:8000 改為 8000 ,意味著允許任何人訪問。 填上對(duì)應(yīng)的 ip 和端口即可,當(dāng)然要確保被連接的服務(wù)的代碼和本地是一致的,不然代

    2024年02月11日
    瀏覽(22)
  • 使用 IDEA 遠(yuǎn)程 Debug 調(diào)試,太實(shí)用了!

    使用 IDEA 遠(yuǎn)程 Debug 調(diào)試,太實(shí)用了!

    有時(shí)候我們需要進(jìn)行遠(yuǎn)程的debug,本文研究如何進(jìn)行遠(yuǎn)程debug,以及使用 IDEA 遠(yuǎn)程debug的過(guò)程中的細(xì)節(jié)??赐昕梢越鉀Q你的一些疑惑。 遠(yuǎn)程debug的服務(wù),以springboot微服務(wù)為例(springcloud的應(yīng)該差不多,我沒研究過(guò))。首先,啟動(dòng)springboot需要加上特定的參數(shù)。 推薦一個(gè)開源免費(fèi)的

    2024年02月12日
    瀏覽(24)
  • IntelliJ IDEA遠(yuǎn)程調(diào)試:使用IDEA Remote Debug進(jìn)行高效調(diào)試的指南

    IntelliJ IDEA遠(yuǎn)程調(diào)試:使用IDEA Remote Debug進(jìn)行高效調(diào)試的指南

    在開發(fā)分布式系統(tǒng)時(shí),調(diào)試是一個(gè)重要但復(fù)雜的環(huán)節(jié)。開發(fā)者通常需要跨越多個(gè)服務(wù)、模塊和線程來(lái)追蹤和解決問題。在沒有遠(yuǎn)程調(diào)試的情況下,許多開發(fā)者會(huì)在代碼中添加各種日志語(yǔ)句,然后重新部署和上線來(lái)調(diào)試。這種方法不僅費(fèi)時(shí),而且可能引入額外的錯(cuò)誤或問題。

    2024年02月09日
    瀏覽(26)
  • IDEA 遠(yuǎn)程 Debug 調(diào)試,你可以不需要,但是要會(huì)

    IDEA 遠(yuǎn)程 Debug 調(diào)試,你可以不需要,但是要會(huì)

    遠(yuǎn)程debug真的很有用,我個(gè)人的真實(shí)經(jīng)歷就是有一次,我新開發(fā)的功能,在生產(chǎn)上沒生效,我詢問了運(yùn)維多次,運(yùn)維也多次確認(rèn)回復(fù)說(shuō)是最新的包,又是查日志,對(duì)數(shù)據(jù),仍然沒發(fā)現(xiàn)問題,最后我就采用遠(yuǎn)程debug發(fā)現(xiàn)我新開發(fā)的代碼不存在。 所以不需要不要緊,但是要會(huì),作

    2024年02月08日
    瀏覽(21)
  • IDEA Go語(yǔ)言開發(fā)環(huán)境無(wú)法debug調(diào)試

    使用idea 搭建go開發(fā)環(huán)境后如果debug調(diào)試可能會(huì)遇到錯(cuò)誤: could not launch process: decoding dwarf section info at offset 0x0: too short。 有些回答go get -u github.com/derekparker/delve/cmd/dlv 。如果使用go mod方式開發(fā)的話這種方式是行不通的,最直接的方法是把dlv項(xiàng)目下載下來(lái)自己編譯生成dlv.exe。 進(jìn)

    2024年02月14日
    瀏覽(26)
  • 小白如何進(jìn)行代碼調(diào)試Debug(IDEA 2023版)

    小白如何進(jìn)行代碼調(diào)試Debug(IDEA 2023版)

    本篇文章主要介紹如何進(jìn)行斷點(diǎn)調(diào)試 開始調(diào)試主要分為兩步,第一為設(shè)置斷點(diǎn),第二才進(jìn)行調(diào)式操作。 1、設(shè)置斷點(diǎn) 設(shè)置斷點(diǎn)的方法基本上大多數(shù)的 IDE 都一致,當(dāng)我們?cè)诖a行上的數(shù)字旁鼠標(biāo)左鍵點(diǎn)擊一下,便設(shè)置斷點(diǎn)成功(可設(shè)置多個(gè)斷點(diǎn))。斷點(diǎn)還可以進(jìn)行其余設(shè)置

    2024年02月07日
    瀏覽(26)
  • IDEA中快速定位源代碼問題(Debug調(diào)試)

    IDEA中快速定位源代碼問題(Debug調(diào)試)

    視頻講解參考:https://www.bilibili.com/video/BV1EQ4y1y74Y?vd_source=67ae2f0684b162aef8c3f8826109285e 進(jìn)入debug界面后,以上五個(gè)圖標(biāo)功能: 1.回到當(dāng)前斷點(diǎn)所在界面 2.從當(dāng)前斷點(diǎn)處逐行執(zhí)行(碰到自己寫的方法不會(huì)進(jìn)入) 3.逐行執(zhí)行(碰到自己寫的方法會(huì)進(jìn)入) 4.回退 5.運(yùn)行到光標(biāo)處

    2024年03月19日
    瀏覽(28)
  • IDEA遠(yuǎn)程調(diào)試kubernetes環(huán)境中的容器應(yīng)用(Java應(yīng)用)

    IDEA遠(yuǎn)程調(diào)試kubernetes環(huán)境中的容器應(yīng)用(Java應(yīng)用) 應(yīng)用場(chǎng)景:Java開發(fā)的項(xiàng)目在本地運(yùn)行正常,然后將 容器運(yùn)行方式的項(xiàng)目發(fā)布到遠(yuǎn)端服務(wù)器上線運(yùn)行后,出現(xiàn)了異常情況,此時(shí)頻繁去修改代碼發(fā)布鏡像進(jìn)行問題驗(yàn)證,將耗費(fèi)較大的時(shí)間成本。 為了提高問題定位和代碼調(diào)試效率

    2024年02月10日
    瀏覽(21)

覺得文章有用就打賞一下文章作者

支付寶掃一掃打賞

博客贊助

微信掃一掃打賞

請(qǐng)作者喝杯咖啡吧~博客贊助

支付寶掃一掃領(lǐng)取紅包,優(yōu)惠每天領(lǐng)

二維碼1

領(lǐng)取紅包

二維碼2

領(lǐng)紅包