對(duì)于基礎(chǔ)設(shè)施的要求也已經(jīng)改變。IT組織已經(jīng)標(biāo)準(zhǔn)化了刀片服務(wù)器和存儲(chǔ)區(qū)域網(wǎng)(SAN)來(lái)滿足聯(lián)網(wǎng)和處理密集型的工作負(fù)載。數(shù)據(jù)移動(dòng)等,比如網(wǎng)站服務(wù)器,盡管這個(gè)模型對(duì)于一些方面的標(biāo)準(zhǔn)程序是有相當(dāng)意義 的,小型結(jié)構(gòu)化數(shù)據(jù)庫(kù),過(guò)去的十年,但隨著數(shù)據(jù)數(shù)量和用戶數(shù)的增長(zhǎng),X研究網(wǎng)站程序服務(wù)器,網(wǎng)站服務(wù)器現(xiàn)在有了緩存 層;數(shù)據(jù)庫(kù)需要本地硬盤支持大規(guī)模地并行;數(shù)據(jù)遷移量也超過(guò)了本地可處理的數(shù)量。
(比如,盡管Hadoop被設(shè)計(jì)為運(yùn)行在行業(yè)標(biāo)準(zhǔn)的硬件上, 選擇硬件,提出一個(gè)理想的集群配置不想提供硬件規(guī)格列表那么簡(jiǎn)單。IO密集型工作負(fù)載的用戶將會(huì)為每個(gè)核心主軸投資更多)。為給定的負(fù)載在性能和經(jīng)濟(jì)性提供最佳平衡是需要測(cè)試和驗(yàn)證其有效性。
結(jié)合存儲(chǔ)和計(jì)算
在這個(gè)過(guò)程中,在這個(gè)博客帖子中,你也將學(xué)到Hadoop管理員應(yīng)該考慮到各種因素。你將會(huì)學(xué)到一些工作負(fù)載評(píng)估的原則和它在硬件選擇中起著至關(guān)重要的作用。
隨著Apache Hadoop的起步,云客戶的增多面臨的首要問(wèn)題就是如何為他們新的的Hadoop集群選擇合適的硬件。
溫馨提醒:文中觀點(diǎn)來(lái)源網(wǎng)絡(luò),隨歲月變遷,準(zhǔn)確性,僅供參考!取消收錄、等問(wèn)題,請(qǐng)聯(lián)糸。