隨著Apache Hadoop的起步,云客戶的增多面臨的首要問題就是如何為他們新的的Hadoop集群選擇合適的硬件。
盡管Hadoop被設(shè)計(jì)為運(yùn)行在行業(yè)標(biāo)準(zhǔn)的硬件上,提出一個(gè)理想的集群配置不想提供硬件規(guī)格列表那么簡(jiǎn)單。 選擇硬件,為給定的負(fù)載在性能和經(jīng)濟(jì)性提供最佳平衡是需要測(cè)試和驗(yàn)證其有效性。(比如,IO密集型工作負(fù)載的用戶將會(huì)為每個(gè)核心主軸投資更多)。
在這個(gè)博客帖子中,你將會(huì)學(xué)到一些工作負(fù)載評(píng)估的原則和它在硬件選擇中起著至關(guān)重要的作用。在這個(gè)過程中,你也將學(xué)到Hadoop管理員應(yīng)該考慮到各種因素。
結(jié)合存儲(chǔ)和計(jì)算
過去的十年,IT組織已經(jīng)標(biāo)準(zhǔn)化了刀片服務(wù)器和存儲(chǔ)區(qū)域網(wǎng)(SAN)來滿足聯(lián)網(wǎng)和處理密集型的工作負(fù)載。盡管這個(gè)模型對(duì)于一些方面的標(biāo)準(zhǔn)程序是有相當(dāng)意義 的,比如網(wǎng)站服務(wù)器,程序服務(wù)器,小型結(jié)構(gòu)化數(shù)據(jù)庫,數(shù)據(jù)移動(dòng)等,但隨著數(shù)據(jù)數(shù)量和用戶數(shù)的增長(zhǎng),對(duì)于基礎(chǔ)設(shè)施的要求也已經(jīng)改變。網(wǎng)站服務(wù)器現(xiàn)在有了緩存 層;數(shù)據(jù)庫需要本地硬盤支持大規(guī)模地并行;數(shù)據(jù)遷移量也超過了本地可處理的數(shù)量。
上線了是由 YC 孵化的首支華人團(tuán)隊(duì)Strikingly發(fā)布的面向中國(guó)市場(chǎng)的專業(yè)建站平臺(tái),不需要任何編程和設(shè)計(jì)經(jīng)驗(yàn),用戶就可以在10分鐘內(nèi)創(chuàng)建一個(gè)適合所有平臺(tái)瀏...
OpenSNS是領(lǐng)先級(jí)SNS社交app軟件開發(fā)公司,提供網(wǎng)站建設(shè),APP定制開發(fā),微博開發(fā)等服務(wù),專業(yè)為用戶提供輕量級(jí)的社交方案。
迅馬數(shù)據(jù)是專業(yè)的互聯(lián)網(wǎng)業(yè)務(wù)平臺(tái)服務(wù)提供商,擁有豐富的國(guó)內(nèi)BGP、雙線高防等資源為大家提供服務(wù)。
e購手機(jī)每日為你提供最新華強(qiáng)北水貨手機(jī)報(bào)價(jià)單、華強(qiáng)北手機(jī)報(bào)價(jià)、深圳水貨手機(jī)報(bào)價(jià)、深圳手機(jī)批發(fā)等服務(wù),實(shí)施售后聯(lián)合保修,所有產(chǎn)品保證讓客戶售后無憂。
迅雷遠(yuǎn)程下載可以遠(yuǎn)程遙控異地下載器來下載任務(wù),為你用戶提供脫機(jī)下載,實(shí)現(xiàn)隨時(shí)隨地下載的目的。
設(shè)計(jì)中國(guó)主要為你分享各種優(yōu)秀的設(shè)計(jì)作品,包括平面設(shè)計(jì)、網(wǎng)頁設(shè)計(jì)、裝修設(shè)計(jì)、建筑設(shè)計(jì)等設(shè)計(jì)作品鑒賞。