關(guān)于大數(shù)據(jù)處理架構(gòu)Hadoop是什么?

在CGFT特許全球金融科技師科目中,《大數(shù)據(jù)原理及應(yīng)用》作為基礎(chǔ)學(xué)科中的一門(mén)關(guān)鍵學(xué)科,學(xué)員們要充分理解其中的內(nèi)容,這樣才能夠更深刻的進(jìn)行學(xué)習(xí)。那么,大數(shù)據(jù)處理架構(gòu)Hadoop是什么?

Hadoop是什么?

Hadoop是Apache軟件基金會(huì)旗下的一個(gè)開(kāi)源分布式計(jì)算平臺(tái),為用戶(hù)提供了系統(tǒng)底層細(xì)節(jié)透明的分布式基礎(chǔ)架構(gòu)。Hadoop是基于Java語(yǔ)言開(kāi)發(fā)的,具有很好的跨平臺(tái)特性,并可以部署在廉價(jià)的計(jì)算機(jī)集群中。Hadoop的核心是分布式文件系統(tǒng)和MapRaduce。

CGFT

Hadoop的特點(diǎn)有哪些?

Hadoop是一個(gè)能夠?qū)Υ罅繑?shù)據(jù)進(jìn)行分布式處理的軟件框架,并且是以一種可靠、高效、可伸縮的方式進(jìn)行處理的,具有高可靠性、高效性、高擴(kuò)展性、高容錯(cuò)性、成本低、運(yùn)行在Linux平臺(tái)上,同時(shí)具有支持多種編程語(yǔ)言的特點(diǎn)。

Hadoop的項(xiàng)目結(jié)構(gòu)是怎樣的?

Hadoop 的項(xiàng)目結(jié)構(gòu)經(jīng)過(guò)多年的發(fā)展,Hadoop項(xiàng)目不斷完善和成熟,目前已經(jīng)包含多個(gè)子項(xiàng)目。除核心的HDFS和MapReduce以外,Hadoop項(xiàng)目還包括Common、Avro、Zookeeper,HBase、E Chukwa、Pig等子項(xiàng)目,它們提供了互補(bǔ)性服務(wù)或在核心層上提供了更高層的服務(wù)。