国产 无码 综合区,色欲AV无码国产永久播放,无码天堂亚洲国产AV,国产日韩欧美女同一区二区

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六)

這篇具有很好參考價值的文章主要介紹了Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六)。希望對大家有所幫助。如果存在錯誤或未考慮完全的地方,請大家不吝賜教,您也可以點擊"舉報違法"按鈕提交疑問。

一.Centos 虛擬機配置

阿里云鏡像站

VmWare 安裝 Centos 7

1.新建虛擬機,選擇【典型】

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java

2.下一步,【稍后安裝操作系統(tǒng)】

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java

3.下一步,選擇【Linux】【Centos7 64位】

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java

4.下一步,設(shè)置虛擬機名稱和安裝目錄

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java

5.下一步,默認

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java

6.下一步,【自定義硬件配置】選擇下載的鏡像

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java
Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java

7.完成,啟動虛擬機

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java

自動分區(qū)

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java
Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java

開始安裝

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java

設(shè)置用戶名密碼

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java

重啟系統(tǒng)

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java

8.登錄并綁定網(wǎng)卡設(shè)置地址

## 修改網(wǎng)卡配置
vi /etc/sysconfig/network-scripts/ifcfg-ens33
## 增加以下配置
IPADDR=192.168.1.100
NETMASK=255.255.255.0
GATEWAY=192.168.1.1
ONBOOT=yes
## 刪除 dhcp : BOOTPROTO=dhcp 并重啟系統(tǒng)

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java

二.Zookeeper 配置

1.Zookeeper 下載

Apache Zookeeper 下載

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java

2.單機配置

## 1.解壓縮 zookeeper
tar zxvf apache-zookeeper-3.8.2-bin.tar.gz
## 2.移動位置
mv apache-zookeeper-3.8.2-bin /usr/local/zookeeper
## 3.解壓縮 jdk
tar zxvf jdk-11.0.19_linux-x64_bin.tar.gz
## 4.移動位置
mv jdk-11.0.19 /usr/local/java
## 5.配置環(huán)境變量
echo 'export JAVA_HOME=/usr/local/java' >> /etc/profile
echo 'export ZOOKEEPER_HOME=/usr/local/zookeeper' >> /etc/profile
echo 'export PATH=${JAVA_HOME}/bin:${ZOOKEEPER_HOME}/bin:${PATH}' >> /etc/profile
## 6.刷新環(huán)境變量
source /etc/profile
## 7.復(fù)制配置
cp $ZOOKEEPER_HOME/conf/zoo_sample.cfg $ZOOKEEPER_HOME/conf/zoo.cfg
## 8.單機啟動
zkServer.sh start

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java

## 1.停止服務(wù)
zkServer.sh stop

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java

3.集群配置

地址分配如下:

節(jié)點 地址 Host
192.168.1.100 zk1
192.168.1.101 zk2
192.168.1.102 zk3

zoo.cfg 配置說明

配置項 默認值 含義
tickTime 2000 通信心跳
initLimit 10 Leader 和 Follower 初始化容忍最多心跳書
syncLimit 5 Leader 和 Follower 同步超時時間,超過此心跳數(shù)則剔除 Follower
dataDir /tmp/zookeeper 數(shù)據(jù)目錄
clientPort 2181 客戶端端口
server.A=B:C:D A 服務(wù)器序號
B 本機地址
C Leader 和 Follower 通信端口
D 選舉通信端口
## 分別設(shè)置集群內(nèi)虛擬機域名(查看域名:hostname)
hostnamectl set-hostname zk1
hostnamectl set-hostname zk2
hostnamectl set-hostname zk3
## 分別設(shè)置集群內(nèi)虛擬機域名解析
echo '192.168.1.100 zk1' >> /etc/hosts
echo '192.168.1.101 zk2' >> /etc/hosts
echo '192.168.1.102 zk3' >> /etc/hosts
## 創(chuàng)建數(shù)據(jù)目錄并修改 zoo.cfe 配置的 dataDir 為新創(chuàng)建目錄
mkdir -p $ZOOKEEPER_HOME/data
## 創(chuàng)建文件 myid 用于標識服務(wù)器序號
touch $ZOOKEEPER_HOME/data/myid
## 修改 zoo.cfg 配置,增加集群配置
echo 'server.1=zk1:3188:3288' >> $ZOOKEEPER_HOME/conf/zoo.cfg
echo 'server.2=zk2:3188:3288' >> $ZOOKEEPER_HOME/conf/zoo.cfg
echo 'server.3=zk3:3188:3288' >> $ZOOKEEPER_HOME/conf/zoo.cfg
## 分發(fā)當前配置和文件到 zk2 zk3
scp -r /usr/local/zookeeper root@zk2:/usr/local/
scp -r /usr/local/zookeeper root@zk3:/usr/local/
scp -r /usr/local/java root@zk2:/usr/local/
scp -r /usr/local/java root@zk3:/usr/local/
scp /etc/profile root@zk2:/etc/profile
scp /etc/profile root@zk3:/etc/profile
## 刷新 zk2 zk3 環(huán)境變量并分別設(shè)置服務(wù) ID
source /etc/profile
echo 1 >> $ZOOKEEPER_HOME/data/myid
echo 2 >> $ZOOKEEPER_HOME/data/myid
echo 3 >> $ZOOKEEPER_HOME/data/myid

配置免密登錄

## 修改 192.168.1.100 服務(wù)器
ssh-keygen -t rsa -P "" -f ~/.ssh/id_rsa
ssh-copy-id -i ~/.ssh/id_rsa root@zk2
ssh-copy-id -i ~/.ssh/id_rsa root@zk3
## 修改 192.168.1.101 服務(wù)器
ssh-keygen -t rsa -P "" -f ~/.ssh/id_rsa
ssh-copy-id -i ~/.ssh/id_rsa root@zk1
ssh-copy-id -i ~/.ssh/id_rsa root@zk3
## 修改 192.168.1.102 服務(wù)器
ssh-keygen -t rsa -P "" -f ~/.ssh/id_rsa
ssh-copy-id -i ~/.ssh/id_rsa root@zk1
ssh-copy-id -i ~/.ssh/id_rsa root@zk2
## 分別配置本地登錄
ssh-copy-id -i ~/.ssh/id_rsa root@localhost
## 1.關(guān)閉防火墻
systemctl stop firewalld && systemctl disable firewalld
## 2.分別啟動集群內(nèi) zookeeper 服務(wù)
zkServer.sh start && ssh root@zk2 "source /etc/profile && zkServer.sh start && exit" && ssh root@zk3 "source /etc/profile && zkServer.sh start && exit"
## 3.查看狀態(tài)
zkServer.sh status
## 4.關(guān)閉
zkServer.sh stop && ssh root@zk2 "source /etc/profile && zkServer.sh stop && exit" && ssh root@zk3 "source /etc/profile && zkServer.sh stop && exit"

ZK1

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java

ZK2

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java

ZK3

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java

停止

Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六),Hadoop,hadoop,centos,zookeeper,集群,java文章來源地址http://www.zghlxwxcb.cn/news/detail-605366.html

到了這里,關(guān)于Hadoop 之 Centos 7 搭建 Zookeeper 3.8.2 集群(六)的文章就介紹完了。如果您還想了解更多內(nèi)容,請在右上角搜索TOY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章,希望大家以后多多支持TOY模板網(wǎng)!

本文來自互聯(lián)網(wǎng)用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務(wù),不擁有所有權(quán),不承擔相關(guān)法律責任。如若轉(zhuǎn)載,請注明出處: 如若內(nèi)容造成侵權(quán)/違法違規(guī)/事實不符,請點擊違法舉報進行投訴反饋,一經(jīng)查實,立即刪除!

領(lǐng)支付寶紅包贊助服務(wù)器費用

相關(guān)文章

  • CentOS7搭建hadoop集群

    CentOS7搭建hadoop集群

    說明: ? ? ? ? 1.準備三臺虛擬機,參考:CentOS7集群環(huán)境搭建(以3臺為例) ? ? ? ? 2.配置虛擬機間免密登陸:參考:CentOS7集群配置免密登錄 ? ? ? ? 3.虛擬機分別安裝jdk:參考:CentOS7集群安裝JDK1.8 ? ? ? ? 4.hadoop安裝包下載,下載地址 準備開始搭建hadoop集群,以下操作在第

    2024年02月09日
    瀏覽(22)
  • 云計算集群搭建記錄[Hadoop|Zookeeper|Hbase|Spark | Docker |OpenStack]更新索引 |動態(tài)更新

    云計算集群搭建記錄[Hadoop|Zookeeper|Hbase|Spark | Docker |OpenStack]更新索引 |動態(tài)更新

    為了能夠更好的查看所更新的文章,講該博文設(shè)為索引 為了解決在編輯文件等操作的過程中的權(quán)限問題,博主一律 默認采用 root 賬戶登錄 對于初次安裝的用戶可以采用如下命令行: 另外推薦一款終端工具:Tabby,既能夠連接自己的服務(wù)器,也能夠連接自己本地的虛擬機,還

    2023年04月13日
    瀏覽(27)
  • CentOS 搭建 Hadoop3 高可用集群

    CentOS 搭建 Hadoop3 高可用集群

    spark101 spark102 spark103 192.168.171.101 192.168.171.102 192.168.171.103 namenode namenode journalnode journalnode journalnode datanode datanode datanode nodemanager nodemanager nodemanager recource manager recource manager job history job log job log job log 1.1 升級操作系統(tǒng)和軟件 升級后建議重啟 1.2 安裝常用軟件 1.3 修改主機名 1

    2024年02月06日
    瀏覽(26)
  • 大數(shù)據(jù)平臺搭建——hadoop集群(基于CentOS-7)的搭建

    大數(shù)據(jù)平臺搭建——hadoop集群(基于CentOS-7)的搭建

    目錄 總序 一、下載相關(guān)軟件的壓縮包 二、配置虛擬機上主節(jié)點相關(guān)設(shè)置 1、修改主機用戶名 2、進行ip地址映射 3、配置虛擬機網(wǎng)絡(luò)設(shè)置 ? 三、解壓并配置java、hadoop環(huán)境 1、解壓jdk、hadoop壓縮文件 ?2、配置jdk、hadoop環(huán)境 3、修改hadoop中的相關(guān)配置文件信息(最重要) 四、克隆

    2024年02月06日
    瀏覽(48)
  • 實操Hadoop大數(shù)據(jù)高可用集群搭建(hadoop3.1.3+zookeeper3.5.7+hbase3.1.3+kafka2.12)

    前言 純實操,無理論,本文是給公司搭建測試環(huán)境時記錄的,已經(jīng)按照這一套搭了四五遍大數(shù)據(jù)集群了,目前使用還未發(fā)現(xiàn)問題。 有問題麻煩指出,萬分感謝! PS:Centos7.9、Rocky9.1可用 集群配置 ip hostname 系統(tǒng) CPU 內(nèi)存 系統(tǒng)盤 數(shù)據(jù)盤 備注 192.168.22.221 hadoop1 Centos7.9 4 16 250G 19

    2024年02月03日
    瀏覽(26)
  • 大數(shù)據(jù)集群搭建全部過程(Vmware虛擬機、hadoop、zookeeper、hive、flume、hbase、spark、yarn)

    大數(shù)據(jù)集群搭建全部過程(Vmware虛擬機、hadoop、zookeeper、hive、flume、hbase、spark、yarn)

    1.網(wǎng)關(guān)配置(參照文檔) 注意事項:第一臺虛擬機改了,改為centos 101 ,地址為192.168.181.130 網(wǎng)關(guān)依然是192.168.181.2,但是一定要注意,它在D盤的文件名稱是Hadoop 101,后面重新搭建的會命名文件夾為hadoop 101,hadoop 102和hadoop 103,然后發(fā)到一個總的文件夾hadoop_03里面去 VMnet8的IP地址一定

    2024年02月02日
    瀏覽(29)
  • 搭建Hadoop3.x完全分布式集群(CentOS 9)

    搭建Hadoop3.x完全分布式集群(CentOS 9)

    虛擬機相關(guān): VMware workstation 16:虛擬機 vmware_177981.zip CentOS Stream 9:虛擬機 CentOS-Stream-9-latest-x86_64-dvd1.iso Hadoop相關(guān) jdk1.8:JDK jdk-8u261-linux-x64.tar.gz Hadoop 3.3.6:Hadoop Hadoop 3.3.6.tar.gz 輔助工具 putty:tools putty.exe mtputty:tools mtputty.exe winscp:tools WinSCP-6.3.1-Portable.zip 本文相關(guān)資源可以

    2024年04月14日
    瀏覽(32)
  • Centos7原生hadoop環(huán)境,搭建Impala集群和負載均衡配置

    Centos7原生hadoop環(huán)境,搭建Impala集群和負載均衡配置

    Impala集群包含一個Catalog Server (Catalogd)、一個Statestore Server (Statestored) 和若干個Impala Daemon (Impalad)。Catalogd主要負責元數(shù)據(jù)的獲取和DDL的執(zhí)行,Statestored主要負責消息/元數(shù)據(jù)的廣播,Impalad主要負責查詢的接收和執(zhí)行。 Impalad又可配置為coordinator only、 executor only 或coordinator and exe

    2024年02月04日
    瀏覽(50)
  • Zookeeper+Hadoop+Spark+Flink+Kafka+Hbase+Hive 完全分布式高可用集群搭建(保姆級超詳細含圖文)

    Zookeeper+Hadoop+Spark+Flink+Kafka+Hbase+Hive 完全分布式高可用集群搭建(保姆級超詳細含圖文)

    說明: 本篇將詳細介紹用二進制安裝包部署hadoop等組件,注意事項,各組件的使用,常用的一些命令,以及在部署中遇到的問題解決思路等等,都將詳細介紹。 ip hostname 192.168.1.11 node1 192.168.1.12 node2 192.168.1.13 node3 1.2.1系統(tǒng)版本 1.2.2內(nèi)存建議最少4g、2cpu、50G以上的磁盤容量 本次

    2024年02月12日
    瀏覽(37)
  • 三臺CentOS7.6虛擬機搭建Hadoop完全分布式集群(一)

    三臺CentOS7.6虛擬機搭建Hadoop完全分布式集群(一)

    這個是筆者大學(xué)時期的大數(shù)據(jù)課程使用三臺CentOS7.6虛擬機搭建完全分布式集群的案例,已成功搭建完全分布式集群,并測試跑實例。 1.1安裝完虛擬機發(fā)現(xiàn)沒有sudo命令和hadoop用戶執(zhí)行命令失敗 我在安裝CentOS 7.6虛擬機后,我發(fā)現(xiàn)不能執(zhí)行sudo命令,同時hadoop用戶執(zhí)行命令失敗。

    2024年02月03日
    瀏覽(29)

覺得文章有用就打賞一下文章作者

支付寶掃一掃打賞

博客贊助

微信掃一掃打賞

請作者喝杯咖啡吧~博客贊助

支付寶掃一掃領(lǐng)取紅包,優(yōu)惠每天領(lǐng)

二維碼1

領(lǐng)取紅包

二維碼2

領(lǐng)紅包