相關(guān)文章

• 

  大數(shù)據(jù)學(xué)習(xí)06-Spark分布式集群部署

  配置好IP vim /etc/sysconfig/network-scripts/ifcfg-ens33 修改主機(jī)名 vi /etc/hostname 做好IP映射 vim /etc/hosts 關(guān)閉防火墻 systemctl status firewalld systemctl stop firewalld systemctl disable firewalld 配置SSH免密登錄 ssh-keygen -t rsa 下載Scala安裝包 配置環(huán)境變量 添加如下配置 使環(huán)境生效 驗(yàn)證 Spark官網(wǎng) 解壓 上

  2024年02月10日

  瀏覽(98)
• 

  大數(shù)據(jù)學(xué)習(xí)02-Hadoop分布式集群部署

  操作系統(tǒng)：centos7 軟件環(huán)境：jdk8、hadoop-2.8.5 1.下載VMware,建議支持正版 2.安裝到Widows目錄下任意位置即可，安裝目錄自定義。打開(kāi)VMware，界面如下： 3.創(chuàng)建虛擬機(jī) 創(chuàng)建虛擬機(jī)—選擇自定義 這一步按照默認(rèn)的配置就好 選擇系統(tǒng)，安裝程序光盤映像文件iso，這里需要下載cenos鏡像

  2024年02月16日

  瀏覽(22)
• 

  zookeeper+kafka分布式消息隊(duì)列集群的部署

  目錄 一、zookeeper 1.Zookeeper 定義 2.Zookeeper 工作機(jī)制 3.Zookeeper 特點(diǎn) 4.Zookeeper 數(shù)據(jù)結(jié)構(gòu) 5.Zookeeper 應(yīng)用場(chǎng)景 （1）統(tǒng)一命名服務(wù) （2）統(tǒng)一配置管理 （3）統(tǒng)一集群管理 （4）服務(wù)器動(dòng)態(tài)上下線 6.Zookeeper 選舉機(jī)制 （1）第一次啟動(dòng)選舉機(jī)制 （2）非第一次啟動(dòng)選舉機(jī)制 7.部署zookeepe

  2024年02月14日

  瀏覽(25)
• 

  JMeter分布式集群---部署多臺(tái)機(jī)器進(jìn)行性能壓力測(cè)試

  有些時(shí)候，我們?cè)谶M(jìn)行壓力測(cè)試的時(shí)候，隨著模擬用戶的增加，電腦的性能（CPU,內(nèi)存）占用是非常大的，為了我們得到更加理想的測(cè)試結(jié)果，我們可以利用jmeter的分布式來(lái)緩解機(jī)器的負(fù)載壓力，分布到多臺(tái)機(jī)器同時(shí)運(yùn)行。 1.Jmeter分布式執(zhí)行原理： 1、Jmeter分布式測(cè)試時(shí)，選擇

  2024年02月11日

  瀏覽(27)
• 

  【簡(jiǎn)單認(rèn)識(shí)zookeeper+kafka分布式消息隊(duì)列集群的部署】

  Zookeeper是一個(gè)開(kāi)源的分布式的，為分布式框架提供協(xié)調(diào)服務(wù)的Apache項(xiàng)目。 Zookeeper從設(shè)計(jì)模式角度來(lái)理解：是一個(gè)基于觀察者模式設(shè)計(jì)的分布式服務(wù)管理框架，它負(fù)責(zé)存儲(chǔ)和管理大家都關(guān)心的數(shù)據(jù)，然后接受觀察者的注冊(cè)，一旦這些數(shù)據(jù)的狀態(tài)發(fā)生變化，Zookeeper就將負(fù)責(zé)通知已

  2024年02月13日

  瀏覽(24)
• 

  Hadoop集群部署-（完全分布式模式，hadoop-2.7.4）

  相關(guān)軟件下載準(zhǔn)備：（推薦） 虛擬機(jī)運(yùn)行環(huán)境：VMware 16.1.1 映像文件：CentOS-7-x86_64-DVD-1810.iso 遠(yuǎn)程登錄工具：Xshell-7.0.0090.exe Xftp傳輸工具：Xftp-7.0.0111p.exe 首先掌握VMware的下載與安裝，有l(wèi)inux學(xué)習(xí)基礎(chǔ)的同學(xué)可以略看。 參考鏈接：https://mp.weixin.qq.com/s/CUiauodcjCFPIXEFEx8fOw 【軟件名

  2024年02月09日

  瀏覽(22)

• 分布式數(shù)據(jù)庫(kù)Apache Doris HA集群部署

  ???????????? 哈嘍！大家好，我是【IT邦德】，江湖人稱jeames007，10余年DBA及大數(shù)據(jù)工作經(jīng)驗(yàn) 一位上進(jìn)心十足的【大數(shù)據(jù)領(lǐng)域博主】！?????? 中國(guó)DBA聯(lián)盟(ACDU)成員，目前服務(wù)于工業(yè)互聯(lián)網(wǎng) 擅長(zhǎng)主流Oracle、MySQL、PG、高斯及Greenplum運(yùn)維開(kāi)發(fā)，備份恢復(fù)，安裝遷移，性能優(yōu)

  2024年02月06日

  瀏覽(23)

• 四種部署模式的優(yōu)缺點(diǎn)（單機(jī)、集群、分布式、微服務(wù)）

  單機(jī) 部署含義：所有的業(yè)務(wù)全部寫在一個(gè)項(xiàng)目中，部署服務(wù)到一臺(tái)服務(wù)器上。 單機(jī) 部署優(yōu)點(diǎn)：方便開(kāi)發(fā)、學(xué)習(xí)成本低，方便部署。 單機(jī) 部署缺點(diǎn)：當(dāng)一個(gè)模塊出現(xiàn)問(wèn)題，整個(gè)系統(tǒng)全部停止更新。 集群 部署含義：集群就是單機(jī)的“復(fù)制”，同一個(gè)業(yè)務(wù)，部署在多個(gè)服務(wù)器上

  2024年02月04日

  瀏覽(35)
• 

  基于kubernetes集群分布式部署gpmall Web應(yīng)用系統(tǒng)

  【說(shuō)明】 gpmall是一個(gè)基于SpringBoot+Dubbo構(gòu)建的開(kāi)源電商平臺(tái)，許老師針對(duì)在k8s集群部署中出現(xiàn)的一些問(wèn)題，修復(fù)了該項(xiàng)目的部分bug并再次發(fā)布到gitee，建議從他的gitee下載學(xué)習(xí)，gpmall的更多介紹以及源碼下載鏈接為：gpamll 以下部署過(guò)程借簽了許老師的有道云筆記，并做了優(yōu)化和

  2024年02月08日

  瀏覽(83)
• 

  Hadoop3.3.5最新版本安裝分布式集群部署

  Index of /dist/hadoop/common https://archive.apache.org/dist/hadoop/common ?集群規(guī)劃： 注意： NameNode和SecondaryNameNode不要安裝在同一臺(tái)服務(wù)器 ResourceManager也很消耗內(nèi)存，不要和NameNode、SecondaryNameNode配置在同一臺(tái)機(jī)器上。 機(jī)器 ip 分配節(jié)點(diǎn) node01 192.168.56.201 NameNode 、DataNode、NodeManager node02 192.

  2024年02月01日

  瀏覽(42)