国产 无码 综合区,色欲AV无码国产永久播放,无码天堂亚洲国产AV,国产日韩欧美女同一区二区

Flink1.14提交任務(wù)報(bào)錯(cuò)classloader.check-leaked-classloader問題解決

這篇具有很好參考價(jià)值的文章主要介紹了Flink1.14提交任務(wù)報(bào)錯(cuò)classloader.check-leaked-classloader問題解決。希望對大家有所幫助。如果存在錯(cuò)誤或未考慮完全的地方,請大家不吝賜教,您也可以點(diǎn)擊"舉報(bào)違法"按鈕提交疑問。

我的hadoop版本是3.1.3,F(xiàn)link版本是1.14。不知道是hadoop版本的原因還是Flink版本更新的原因。當(dāng)我運(yùn)行一個(gè)簡單的Flink測試時(shí),雖然結(jié)果出來了但是后面還跟著一段報(bào)錯(cuò)信息。

測試命令:

flink run -m yarn-cluster -p 2 -yjm 2G -ytm 2G $FLINK_HOME/examples/batch/WordCount.jar

報(bào)錯(cuò)信息:

Trying to access closed classloader. Please check if you store classloaders directly or indirectly in static fields. If the stacktrace suggests that the leak occurs in a third party library and cannot be fixed immediately, you can disable this check with the configuration 'classloader.check-leaked-classloader'.

解決方法:

修改:flink/conf 的 flink-conf.yaml文件

添加:

classloader.check-leaked-classloader: false

注意:false前需要加上一個(gè)空格文章來源地址http://www.zghlxwxcb.cn/news/detail-505055.html

到了這里,關(guān)于Flink1.14提交任務(wù)報(bào)錯(cuò)classloader.check-leaked-classloader問題解決的文章就介紹完了。如果您還想了解更多內(nèi)容,請?jiān)谟疑辖撬阉鱐OY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章,希望大家以后多多支持TOY模板網(wǎng)!

本文來自互聯(lián)網(wǎng)用戶投稿,該文觀點(diǎn)僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務(wù),不擁有所有權(quán),不承擔(dān)相關(guān)法律責(zé)任。如若轉(zhuǎn)載,請注明出處: 如若內(nèi)容造成侵權(quán)/違法違規(guī)/事實(shí)不符,請點(diǎn)擊違法舉報(bào)進(jìn)行投訴反饋,一經(jīng)查實(shí),立即刪除!

領(lǐng)支付寶紅包贊助服務(wù)器費(fèi)用

相關(guān)文章

  • Flink1.14 Standalone獨(dú)立集群模式安裝

    Flink1.14 Standalone獨(dú)立集群模式安裝

    一、下載 在Flink 官網(wǎng)下載Flink 1.14,完整的安裝包名是:flink-1.14.4-bin-scala_2.11.tgz。 二、master 配置 解壓安裝包,編輯conf/flink-conf.yaml文件: jobmanager.rpc.address 為master機(jī)器的IP,也可以是master的機(jī)器名;taskmanager.numberOfTaskSlots 為在master上運(yùn)行幾個(gè)taskslots,可以根據(jù)機(jī)器的配置來確

    2023年04月18日
    瀏覽(27)
  • flink1.14 sql基礎(chǔ)語法(一) flink sql表查詢詳解

    flink1.14 sql基礎(chǔ)語法(一) flink sql表查詢詳解

    語法示例: flink從1.13開始,提供了時(shí)間窗口聚合計(jì)算的TVF語法。 表值函數(shù)的使用約束: (1)在窗口上做 分組聚合 ,必須帶上window_start 和 window_end 作為分組的key; (2)在窗口上做 topn計(jì)算 ,必須帶上window_start 和 window_end 作為partition的key; (3)帶條件的 join ,必須包含

    2024年02月06日
    瀏覽(23)
  • flink1.14 sql基礎(chǔ)語法(二) flink sql表定義詳解

    flink1.14 sql基礎(chǔ)語法(二) flink sql表定義詳解

    每一個(gè)表的標(biāo)識由 3 部分組成: catalog name (常用于標(biāo)識不同的“源”,比如 hive catalog,inner catalog 等) database name(通常語義中的“庫”) table name (通常語義中的“表”) 1個(gè)flinksql程序在運(yùn)行時(shí),tableEnvironment 通過持有一個(gè) map 結(jié)構(gòu)來記錄所注冊的 catalog; Flinksql中的表,可以是 vi

    2024年02月14日
    瀏覽(22)
  • 使用Flink1.16.0的SQLGateway遷移Hive SQL任務(wù)

    使用Flink1.16.0的SQLGateway遷移Hive SQL任務(wù)

    使用Flink的SQL Gateway遷移Hive SQL任務(wù) 我們有數(shù)萬個(gè)離線任務(wù),主要還是默認(rèn)的DataPhin調(diào)度CDP集群的Hive On Tez這種低成本任務(wù),當(dāng)然也有PySpark、打Jar包的Spark和打Jar包的Flink任務(wù)這種高成本的任務(wù)【Java和Scala都有】。畢竟SQL上手門檻極低,是個(gè)人都能寫幾下并且跑起來,還可以很容

    2023年04月08日
    瀏覽(22)
  • Flink1.14新版KafkaSource和KafkaSink實(shí)踐使用(自定義反序列化器、Topic選擇器、序列化器、分區(qū)器)

    Flink1.14新版KafkaSource和KafkaSink實(shí)踐使用(自定義反序列化器、Topic選擇器、序列化器、分區(qū)器)

    在官方文檔的描述中,API FlinkKafkaConsumer和FlinkKafkaProducer將在后續(xù)版本陸續(xù)棄用、移除,所以在未來生產(chǎn)中有版本升級的情況下,新API KafkaSource和KafkaSink還是有必要學(xué)會使用的。下面介紹下基于新API的一些自定義類以及主程序的簡單實(shí)踐。 官方文檔地址: https://nightlies.apache.o

    2024年01月21日
    瀏覽(31)
  • flink1.15 savepoint 超時(shí)報(bào)錯(cuò) java.util.concurrent.TimeoutException
  • 【Flink】詳解Flink任務(wù)提交流程

    【Flink】詳解Flink任務(wù)提交流程

    通常我們會使用 bin/flink run -t yarn-per-job -c com.xxx.xxx.WordCount/WordCount.jar 方式啟動任務(wù);我們看一下 flink 文件中到底做了什么,以下是其部分源碼 可以看到,第一步將相對地址轉(zhuǎn)換成絕對地址;第二步獲取 Flink 配置信息,這個(gè)信息放在 bin 目錄下的 config. sh 中;第三步獲取 JV

    2024年02月14日
    瀏覽(17)
  • flink的常見的任務(wù)提交方式

    flink的常見的任務(wù)提交方式

    此方式使用起來相對比較簡單,但是無法滿足需要設(shè)置savepoint暫存點(diǎn)的流式任務(wù)需求。 使用此方式需要先創(chuàng)建Flink遠(yuǎn)方的執(zhí)行環(huán)境,然后按序執(zhí)行FlinkSql,流程如下: java示例如下: 此方式主要通過用java編寫一個(gè)任務(wù),然后打成jar的形式上傳到flink集群。此方式比較靈活,可

    2024年04月26日
    瀏覽(21)
  • 使用Java代碼遠(yuǎn)程提交flink任務(wù)

    導(dǎo)入依賴 參數(shù)格式參考: { ????\\\"jarPath\\\":\\\"C:\\\\flink-1.13.5\\\\examples\\\\streaming\\\\WordCount.jar\\\", ????\\\"parallelism\\\":1, ????\\\"entryPointClassName\\\":\\\"org.apache.flink.streaming.examples.wordcount.WordCount\\\" }

    2024年02月11日
    瀏覽(22)

覺得文章有用就打賞一下文章作者

支付寶掃一掃打賞

博客贊助

微信掃一掃打賞

請作者喝杯咖啡吧~博客贊助

支付寶掃一掃領(lǐng)取紅包,優(yōu)惠每天領(lǐng)

二維碼1

領(lǐng)取紅包

二維碼2

領(lǐng)紅包