国产 无码 综合区,色欲AV无码国产永久播放,无码天堂亚洲国产AV,国产日韩欧美女同一区二区

【已解決】偽分布式Hadoop服務(wù)已經(jīng)開啟,但是無法訪問http://localhost:9870(缺少NameNode進(jìn)程)\http://localhost:8088

這篇具有很好參考價值的文章主要介紹了【已解決】偽分布式Hadoop服務(wù)已經(jīng)開啟,但是無法訪問http://localhost:9870(缺少NameNode進(jìn)程)\http://localhost:8088。希望對大家有所幫助。如果存在錯誤或未考慮完全的地方,請大家不吝賜教,您也可以點(diǎn)擊"舉報違法"按鈕提交疑問。

hadoop啟動cluster/apps成功但是9870沒有,分布式,hadoop,http

一、問題描述

使用如下方法啟動成功hadoop服務(wù)

進(jìn)入相應(yīng)文件夾

cd /usr/local/hadoop/

首先停止啟動所有的節(jié)點(diǎn),使用命令行啟動stop-all.sh腳本

./sbin/stop-all.sh

解決方法是首先停止啟動所有的節(jié)點(diǎn),使用命令行啟動stop-all.sh腳本:

./sbin/start-all.sh

使用jps命令查看當(dāng)前hadoop運(yùn)行
hadoop啟動cluster/apps成功但是9870沒有,分布式,hadoop,http

貌似沒問題

其實(shí)這里就是有問題?。?!后續(xù)解決方法里面說

繼續(xù)打開http://localhost:9870,查看web界面

顯示無法連接到
hadoop啟動cluster/apps成功但是9870沒有,分布式,hadoop,http

二、解決方法和問題分析

下面兩個方法是在網(wǎng)上搜到的,大家可以先試試

  • 1.有博主建議查看防火墻的
    輸入命令發(fā)現(xiàn)我的Linux并沒有防火墻。。。所以不可能是防火墻問題
    詳見:Ubuntu - 查看、開啟、關(guān)閉和永久關(guān)閉防火墻

  • 2.也有博主建議 編輯配置文件hdfs-site.xml

    <configuration>
        <property>
            <name>dfs.replication</name>
            <value>1</value>
        </property>
        <property>
            <name>dfs.namenode.name.dir</name>
            <value>file:/usr/local/hadoop/tmp/dfs/name</value>
        </property>
        <property>
            <name>dfs.datanode.data.dir</name>
            <value>file:/usr/local/hadoop/tmp/dfs/data</value>
        </property>
        <property>
    	<name>dfs.namenode.http-address</name>
    	<value>0.0.0.0:9870</value>
        </property>
    </configuration>
    

這些都有嘗試 但是仍沒有解決

最后我重新看了一下我部署偽分布式Hadoop的那篇博客:Hadoop安裝搭建偽分布式教程(全面)吐血整理發(fā)現(xiàn)我前面啟動節(jié)點(diǎn)時確實(shí)有問題!??!
hadoop啟動cluster/apps成功但是9870沒有,分布式,hadoop,http

PS:其實(shí)至少需要4個進(jìn)程:Namenode、DataNode、SecondaryNameNOde、JPS

再會看我之前的那個命令,居然連NameNode都沒有?。?!我們知道http://localhost:9870就是來查看主節(jié)點(diǎn)情況的,居然連主節(jié)點(diǎn)NameNode都沒有,當(dāng)然會連不上呀~~

hadoop啟動cluster/apps成功但是9870沒有,分布式,hadoop,http

那么現(xiàn)在的思路就變成了:如何啟動主節(jié)點(diǎn)NameNode(其實(shí)還有另外兩個進(jìn)程:NodeManagerResourceManager沒有啟動成功,這也和影響我們通過web界面對其資源管理器的查看等有影響,稍后我們一起說)

2.1:缺少NameNode進(jìn)程

核心:初始化namenode。需要我們先執(zhí)行如下命令

hdfs namenode -format

然后再啟動hadoop服務(wù)(注意,再次啟動前需要先停止之前啟動的,否則會報錯)

然后如下:
hadoop啟動cluster/apps成功但是9870沒有,分布式,hadoop,http

之后我們再次訪問http://localhost:9870即可成功訪問!??
hadoop啟動cluster/apps成功但是9870沒有,分布式,hadoop,http

2.1:沒有ResourceManager和NodeManager

原因:只使用了start-dfs.sh命令(這個命令只會啟動上述四個進(jìn)程)

應(yīng)該使用:命令start-all.sh(該命令是start-dfs.sh與start-yarn.sh這兩個命令的合并)

這樣才會啟動6個進(jìn)程:

hadoop啟動cluster/apps成功但是9870沒有,分布式,hadoop,http

補(bǔ)充:啟動Hadoop時提示 start-all.sh(該命令是start-dfs.sh與start-yarn.sh這兩個命令的合并):找不到命令 的解決方法:

這個問題出現(xiàn)的原因是環(huán)境變量沒有配置
參考這篇博客的3.3.2步配置好環(huán)境變量:Hadoop安裝搭建偽分布式教程(全面)吐血整理

于是我們可以成功訪問hadoop的http://localhost:8088資源管理界面:
hadoop啟動cluster/apps成功但是9870沒有,分布式,hadoop,http

2.3:hadoop拒絕history通過19888端口連接查看已完成的job的日志

原因在于:通過start-all.sh啟動hadoop各項(xiàng)節(jié)點(diǎn)后,historyserver并沒有啟動,需要手動啟動,因此可以通過以下命令來手動啟動historyserver,關(guān)閉命令也給出.

啟動命令:

mr-jobhistory-daemon.sh start historyserver

關(guān)閉命令:

mr-jobhistory-daemon.sh stop historyserver

可能會出現(xiàn)下面兩個警告,沒有關(guān)系
hadoop啟動cluster/apps成功但是9870沒有,分布式,hadoop,http
再次訪問:
hadoop啟動cluster/apps成功但是9870沒有,分布式,hadoop,http文章來源地址http://www.zghlxwxcb.cn/news/detail-852467.html

到了這里,關(guān)于【已解決】偽分布式Hadoop服務(wù)已經(jīng)開啟,但是無法訪問http://localhost:9870(缺少NameNode進(jìn)程)\http://localhost:8088的文章就介紹完了。如果您還想了解更多內(nèi)容,請?jiān)谟疑辖撬阉鱐OY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章,希望大家以后多多支持TOY模板網(wǎng)!

本文來自互聯(lián)網(wǎng)用戶投稿,該文觀點(diǎn)僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務(wù),不擁有所有權(quán),不承擔(dān)相關(guān)法律責(zé)任。如若轉(zhuǎn)載,請注明出處: 如若內(nèi)容造成侵權(quán)/違法違規(guī)/事實(shí)不符,請點(diǎn)擊違法舉報進(jìn)行投訴反饋,一經(jīng)查實(shí),立即刪除!

領(lǐng)支付寶紅包贊助服務(wù)器費(fèi)用

相關(guān)文章

  • Hadoop3.3.5云耀云服務(wù)器安裝教程-單機(jī)/偽分布式配置

    Hadoop3.3.5云耀云服務(wù)器安裝教程-單機(jī)/偽分布式配置

    華為云耀云服務(wù)器試用領(lǐng)取 領(lǐng)取的試用云耀云服務(wù)器在哪 阿里云服務(wù)器免費(fèi)試用領(lǐng)取 Hadoop3.3.5云耀云服務(wù)器安裝教程-單機(jī)/偽分布式配置 阿里云服務(wù)器ECS安裝圖形界面 本篇文章是基于上一篇所配置好的云服務(wù)器進(jìn)行實(shí)驗(yàn)軟件安裝,該系列文章是根據(jù)林子雨所講述的課程就在

    2024年01月21日
    瀏覽(54)
  • 【hadoop】centos7.6+hadoop3.1.1搭建分布式hadoop環(huán)境——包含各類問題解決方案

    【hadoop】centos7.6+hadoop3.1.1搭建分布式hadoop環(huán)境——包含各類問題解決方案

    本文針對centos7.4即以上版本的hadoop環(huán)境搭建,因?yàn)檫@部分搭建是個很復(fù)雜且很容易出錯的內(nèi)容,所以在結(jié)合了多種搭建方案后給出最適宜當(dāng)前版本的搭建。 本教程適用于CentOS 7.4即以上版本,如果是Ubuntu等其它linux內(nèi)核版本則不適合。 查看系統(tǒng)版本: 軟件 版本 獲取方法 Ope

    2024年02月16日
    瀏覽(24)
  • 解決Hadoop完全分布式集群中從節(jié)點(diǎn)jps沒有datanode節(jié)點(diǎn)問題

    解決Hadoop完全分布式集群中從節(jié)點(diǎn)jps沒有datanode節(jié)點(diǎn)問題

    當(dāng)用start-dfs.sh和start-yarn.sh后,在slave節(jié)點(diǎn)(從節(jié)點(diǎn))中用jps命令查看進(jìn)程 正常情況: 有時候可能發(fā)現(xiàn)沒有Datanode,即只有兩項(xiàng)(第一項(xiàng)和最后一項(xiàng))。原因可能是 重復(fù)格式化 namenode 后,導(dǎo)致 datanode 的 clusterID 和 namenode 的 clusterID 不一致。 解決方法: 在master節(jié)點(diǎn)(namenode): 找到你

    2024年02月06日
    瀏覽(33)
  • Redis實(shí)現(xiàn)方式開啟新篇章,解決分布式環(huán)境下的資源競爭問題,提升系統(tǒng)穩(wěn)定性

    Redis實(shí)現(xiàn)方式開啟新篇章,解決分布式環(huán)境下的資源競爭問題,提升系統(tǒng)穩(wěn)定性

    分布式鎖一般有三種實(shí)現(xiàn)方式: 數(shù)據(jù)庫樂觀鎖; 基于Redis的分布式鎖; 基于ZooKeeper的分布式鎖 本篇博客將介紹第二種方式,基于Redis實(shí)現(xiàn)分布式鎖。 雖然網(wǎng)上已經(jīng)有各種介紹Redis分布式鎖實(shí)現(xiàn)的博客,然而他們的實(shí)現(xiàn)卻有著各種各樣的問題,為了避免誤人子弟,本篇博客將

    2024年02月07日
    瀏覽(27)
  • 華為云云耀云服務(wù)器L實(shí)例評測|偽分布式環(huán)境下部署hadoop2.10.1

    華為云云耀云服務(wù)器L實(shí)例評測|偽分布式環(huán)境下部署hadoop2.10.1

    #【中秋征文】程序人生,中秋共享# 這是Maynor創(chuàng)作的華為云云耀云服務(wù)器L實(shí)例測評的第二篇,上篇傳送門: 華為云云耀云服務(wù)器L實(shí)例評測|單節(jié)點(diǎn)環(huán)境下部署ClickHouse21.1.9.41數(shù)據(jù)庫 云耀云服務(wù)器L實(shí)例簡介 ? 云耀云服務(wù)器L實(shí)例 是新一代的輕量應(yīng)用云服務(wù)器,專門為中小企業(yè)

    2024年02月07日
    瀏覽(23)
  • HBase偽分布式配置下,報錯:org.apache.hadoop.hbase.PleaseHoldException: Master is initializing的解決方案

    HBase偽分布式配置下,報錯:org.apache.hadoop.hbase.PleaseHoldException: Master is initializing的解決方案

    今天在使用HBase Java API編程實(shí)踐時發(fā)現(xiàn)出現(xiàn)報錯,同樣在創(chuàng)建表和查看HBase集群狀態(tài)信息時也出現(xiàn)報錯,以下是錯誤截圖: 這是由于HBase的主節(jié)點(diǎn)正在初始化過程中,無法處理請求。通常發(fā)生在啟動HBase集群或進(jìn)行主節(jié)點(diǎn)故障轉(zhuǎn)移時。HBase主節(jié)點(diǎn)在啟動或重啟時需要一些時間來

    2024年02月05日
    瀏覽(22)
  • hadoop完全分布式

    hadoop完全分布式

    三臺虛擬機(jī),關(guān)閉防火墻,關(guān)閉selinux 查看防火狀態(tài) systemctl status firewalld 暫時關(guān)閉防火墻 systemctl stop firewalld 永久關(guān)閉防火墻 systemctl disable firewalld 查看 selinux狀態(tài) getenforce 暫時關(guān)閉 selinux setenforce 0 永久關(guān)閉 selinux 在/etc/selinux/config文件中將SELINUX改為disabled 修改主機(jī)名: hostn

    2023年04月12日
    瀏覽(29)
  • Hadoop分布式安裝

    Hadoop分布式安裝

    首先準(zhǔn)備好三臺服務(wù)器或者虛擬機(jī),我本機(jī)安裝了三個虛擬機(jī),安裝虛擬機(jī)的步驟參考我之前的一篇 virtualBox虛擬機(jī)安裝多個+主機(jī)訪問虛擬機(jī)+虛擬機(jī)訪問外網(wǎng)配置-CSDN博客 jdk安裝 參考文檔:Linux 環(huán)境下安裝JDK1.8并配置環(huán)境變量_linux安裝jdk1.8并配置環(huán)境變量_Xi-Yuan的博客-CSDN博

    2024年02月08日
    瀏覽(24)
  • hadoop分布式計算組件

    hadoop分布式計算組件

    ·計算:對數(shù)據(jù)進(jìn)行處理,使用統(tǒng)計分析等手段得到需要的結(jié)果 ·分布式計算:多臺服務(wù)器協(xié)同工作,共同完成一個計算任務(wù) 分布式計算常見的2種工作模式 分散-匯總(MapReduce就是這種模式) 中心調(diào)度-步驟執(zhí)行(大數(shù)據(jù)體系的Spark、Flink等是這種模式) MapReduce是“分散-匯總”模

    2024年04月11日
    瀏覽(22)

覺得文章有用就打賞一下文章作者

支付寶掃一掃打賞

博客贊助

微信掃一掃打賞

請作者喝杯咖啡吧~博客贊助

支付寶掃一掃領(lǐng)取紅包,優(yōu)惠每天領(lǐng)

二維碼1

領(lǐng)取紅包

二維碼2

領(lǐng)紅包