-
-
理論知識(shí)
- Docker
-
理論知識(shí)
Docker 是一個(gè)開源的應(yīng)用容器引擎,基于?Go 語(yǔ)言?并遵從 Apache2.0 協(xié)議開源。Docker 可以讓開發(fā)者打包他們的應(yīng)用以及依賴包到一個(gè)輕量級(jí)、可移植的容器中,然后發(fā)布到任何流行的 Linux 機(jī)器上,也可以實(shí)現(xiàn)虛擬化。容器是完全使用沙箱機(jī)制,相互之間不會(huì)有任何接口,容器性能開銷極低。
Docker 能夠?qū)?yīng)用程序與基礎(chǔ)架構(gòu)分開,從而可以快速交付軟件。借助 Docker,開發(fā)者可以與管理應(yīng)用程序相同的方式來(lái)管理基礎(chǔ)架構(gòu)。通過利用 Docker 的方法來(lái)快速交付,測(cè)試和部署代碼,可以大大減少編寫代碼和在生產(chǎn)環(huán)境中運(yùn)行代碼之間的延遲。
1.快速,一致地交付應(yīng)用程序。Docker 允許開發(fā)人員使用應(yīng)用程序或服務(wù)的本地容器在標(biāo)準(zhǔn)化環(huán)境中工作,從而簡(jiǎn)化了開發(fā)的生命周期。
2.響應(yīng)式部署和擴(kuò)展。Docker 是基于容器的平臺(tái),允許高度可移植的工作負(fù)載。Docker 容器可以在開發(fā)人員的本機(jī)上,數(shù)據(jù)中心的物理或虛擬機(jī)上,云服務(wù)上或混合環(huán)境中運(yùn)行。
3.在同一硬件上運(yùn)行更多工作負(fù)載。Docker 輕巧快速,它為基于虛擬機(jī)管理程序的虛擬機(jī)提供了可行、經(jīng)濟(jì)、高效的替代方案。
-
-
- HDFS
-
HDFS(Hadoop Distributed File System),作為Google File System(GFS)的實(shí)現(xiàn),是Hadoop項(xiàng)目的核心子項(xiàng)目,是分布式計(jì)算中數(shù)據(jù)存儲(chǔ)管理的基礎(chǔ),是基于流數(shù)據(jù)模式訪問和處理超大文件的需求而開發(fā)的,可以運(yùn)行于廉價(jià)的商用服務(wù)器上。它所具有的高容錯(cuò)、高可靠性、高可擴(kuò)展性、高獲得性、高吞吐率等特征為海量數(shù)據(jù)提供了不怕故障的存儲(chǔ),為超大數(shù)據(jù)集(Large Data Set)的應(yīng)用處理帶來(lái)了很多便利。
HDFS由四部分組成,HDFS Client、NameNode、DataNode和Secondary NameNode。
HDFS是一個(gè)主/從(Mater/Slave)體系結(jié)構(gòu),HDFS集群擁有一個(gè)NameNode和一些DataNode。NameNode管理文件系統(tǒng)的元數(shù)據(jù),DataNode存儲(chǔ)實(shí)際的數(shù)據(jù)。
HDFS特點(diǎn):高容錯(cuò)性、可構(gòu)建在廉價(jià)機(jī)器上;適合批處理;適合大數(shù)據(jù)處理;流式文件訪問。
HDFS局限:不支持低延遲訪問;不適合小文件存儲(chǔ);不支持并發(fā)寫入;不支持修改。文章來(lái)源:http://www.zghlxwxcb.cn/news/detail-400363.html
HDFS結(jié)構(gòu)圖文章來(lái)源地址http://www.zghlxwxcb.cn/news/detail-400363.html
-
- 實(shí)驗(yàn)?zāi)康?/strong>
到了這里,關(guān)于基于Docker搭建hdfs分布式實(shí)驗(yàn)環(huán)境的文章就介紹完了。如果您還想了解更多內(nèi)容,請(qǐng)?jiān)谟疑辖撬阉鱐OY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章,希望大家以后多多支持TOY模板網(wǎng)!