今天我們換一個(gè)CGFT考試科目知識(shí)說一說,我們知道CGFT考試中的科技模塊是有兩部分組成的,今天我們看看《大數(shù)據(jù)技術(shù)原理及應(yīng)用》大數(shù)據(jù)是金融科技之源與基中的Region服務(wù)器的工作原理!
Region服務(wù)器是HBase中核心的模塊,Region服務(wù)器內(nèi)部管理了一系列Region對(duì)象和一個(gè)HLog文件,其中,HLog是磁盤上面的記錄文件,它記錄著所有的更新操作。
每個(gè)Region對(duì)象又是由多個(gè)Store組成的,每個(gè)Store對(duì)應(yīng)了表中的一個(gè)列族的存儲(chǔ)。每個(gè)Store又包含了一個(gè)MemStore和若干個(gè)StoreFile,其中,MemStore是在內(nèi)存中的緩存,保存*近更新的數(shù)據(jù),StoreFile是磁盤中的文件,這些文件都是B樹結(jié)構(gòu)的,方便快速讀取。StoreFile在底層的實(shí)現(xiàn)方式是HDFS文件系統(tǒng)的HFile,HFile的數(shù)據(jù)塊通常采用壓縮方式存儲(chǔ),壓縮之后可以大大減少網(wǎng)絡(luò)I/O和磁盤I/O。
學(xué)習(xí)交流群(掃碼免費(fèi)加群)
- 1、新手入門
- 2、學(xué)習(xí)資料
- 3、免費(fèi)課程
- 4、考試動(dòng)態(tài)
- 5、備考干貨
- 6、答疑沖刺