【杭州網(wǎng)站設計】Facebook為何選擇Hadoop和HBase
分享 2011.06.11 瀏覽次數(shù):6884次
前段時間Facebook的新版消息系統(tǒng)發(fā)布,F(xiàn)acebook對HBase的成功使用也使得很多的HBase案例得以出現(xiàn),F(xiàn)acebook的Hadoop工程師Dhruba Borthakur發(fā)表了Hadoop系列文章對Facebook選擇Hadoop和HBase的原因做了一個說明。
Dhruba Borthakur首先總結(jié)了Hadoop和HBase的優(yōu)勢。他認為HBase橫向擴展性強。對Facebook這種少量數(shù)據(jù)存儲場景來說,擴容幾乎是家常便飯,HBase能夠使數(shù)據(jù)擴容非常容易。并且支持很高的寫吞吐。Facebook的消息數(shù)據(jù)很龐大,每天的寫量也很大。同時在同一個數(shù)據(jù)中心,能夠保證有較強的一致性。Facebook用HBase來存儲消息數(shù)據(jù),業(yè)務上需要一個能夠保證一致性的數(shù)據(jù)存儲(這也是Facebook并沒有采用Cassandra的原因之一)。HBase還具有良好的隨機讀性能。消息系統(tǒng)的業(yè)務邏輯導致會有很多穿透緩存層的隨機讀操作。
由于數(shù)據(jù)量大,分布的機器也可能很多,出故障或者進行一些日常升級工作會比較頻繁。所以高可用性和故障可恢復性也顯得極其重要。錯誤隔離性是指一個結(jié)點的錯誤不會影響到其它結(jié)點,磁盤故障只會對相應的小規(guī)模的數(shù)據(jù)產(chǎn)生影響。同時提供原子性的read-modify-write操作。原子性的increment或者對比后修改的操作,對很多業(yè)務上的處理非常方便。最后提供獲取某個范圍的數(shù)據(jù)的功能。比如像獲取某人最近100條消息這樣的功能,在消息系統(tǒng)里也是很常見的需求。
當然,下面幾個Hadoop和HBase不太擅長的方面也值得一說。首先是同一個數(shù)據(jù)中心網(wǎng)絡割裂下的容災性。同一個數(shù)據(jù)中心的網(wǎng)絡出現(xiàn)問題了,導致各結(jié)點之間無法正常溝通,這種情況通??梢酝ㄟ^配置一些備用的網(wǎng)絡設備來避免。其次某個數(shù)據(jù)中心故障不會影響服務。這個情況更是少之又少。最后在多個數(shù)據(jù)中心間的實時數(shù)據(jù)交換。這個不太現(xiàn)實,通常這一點是用Cache層來實現(xiàn)用戶對無端數(shù)據(jù)的實時訪問的。
杭州網(wǎng)站建設 杭州網(wǎng)站設計 杭州網(wǎng)站制作 杭州精典網(wǎng)站設計公司
-
杭州網(wǎng)站設計公司:品牌網(wǎng)站開發(fā)助力企業(yè)成長
日期:2024-12-20瀏覽次數(shù):735次
-
杭州網(wǎng)站建設公司:商城網(wǎng)站建設的六大關(guān)鍵步驟
日期:2024-12-18瀏覽次數(shù):777次
-
杭州網(wǎng)站制作:醫(yī)院網(wǎng)站設計與域名備案的復雜性探討
日期:2024-12-18瀏覽次數(shù):771次
-
杭州網(wǎng)站制作公司:打造安全可靠的醫(yī)院網(wǎng)站
日期:2024-12-11瀏覽次數(shù):950次
-
杭州網(wǎng)站設計公司:數(shù)據(jù)庫在高端網(wǎng)站制作中的關(guān)鍵作用
日期:2024-12-11瀏覽次數(shù):915次
相關(guān)新聞
整合同類新聞,相關(guān)新聞一手掌握
-
如何設計企業(yè)內(nèi)部培訓學習APP
日期:2020-07-01瀏覽次數(shù):2261次
-
開發(fā)美容化妝品小程序有什么益處?
日期:2020-06-17瀏覽次數(shù):2485次
-
為什么要建設微網(wǎng)站?
日期:2020-06-02瀏覽次數(shù):2325次
-
杭州網(wǎng)站建設,維護工作也至關(guān)重要
日期:2020-05-22瀏覽次數(shù):2390次
-
杭州裝修企業(yè)開發(fā)小程序如何選擇開發(fā)類型?
日期:2020-05-07瀏覽次數(shù):2309次
最新新聞
與互聯(lián)網(wǎng)同行,實時掌握網(wǎng)建行業(yè)最新動態(tài)
-
【杭州網(wǎng)站設計】用數(shù)據(jù)創(chuàng)造價值——透視大數(shù)據(jù)技術(shù)的背后
日期:2011-10-25瀏覽次數(shù):6533次
-
萍鄉(xiāng)網(wǎng)站優(yōu)化,打造您的企業(yè)專屬IP
日期:2020-09-28瀏覽次數(shù):2086次
-
2021年杭州APP開發(fā)新趨向
日期:2020-12-28瀏覽次數(shù):4204次
-
杭州定制小程序,簽訂合同應注意這幾點
日期:2021-06-16瀏覽次數(shù):3919次
-
杭州網(wǎng)站優(yōu)化之視頻網(wǎng)站的優(yōu)化
日期:2021-08-03瀏覽次數(shù):3937次
隨機新聞
新聞新動態(tài),您需要的新聞管家
洞悉市場趨勢演變讓傳播回歸社會
免費獲取網(wǎng)站建設與網(wǎng)絡推廣方案報價
-
關(guān)于我們
杭州帷拓科技有限公司,是一家新型的全案網(wǎng)絡開發(fā)公司,作為以互聯(lián)網(wǎng)高端網(wǎng)站建設、APP開發(fā)、小程序開發(fā)為核心的專業(yè)網(wǎng)絡技術(shù)服務供應商,帷拓科技致力于全面分析市場環(huán)境、衡量與預測市場需求、整合區(qū)別于行業(yè)競爭對手的絕對優(yōu)勢,結(jié)合品牌理念深度挖掘項目優(yōu)勢和產(chǎn)品價值,提升客戶品牌認知、認可度。
-
我們的客戶
帷拓科技歷經(jīng)十年沉淀,與國內(nèi)外上千家客戶達成合作關(guān)系,其中穩(wěn)定合作的公司有:浙江華為、浙江移動、浙江5G產(chǎn)業(yè)聯(lián)盟、浙江省社科院、綠城足球俱樂部、娃哈哈雙語學校、健康中國杭州峰會、科雷機電等,帷拓科技始終堅持“帷有專業(yè),才能拓展無限”的服務理念,堅持“認真堅持細節(jié)”的優(yōu)質(zhì)服務理念,不斷完善自身,成就企業(yè),最終實現(xiàn)共贏。
-
我們的業(yè)務
帷拓科技主營業(yè)務范圍包含互聯(lián)網(wǎng)高端網(wǎng)站建設、APP開發(fā)、小程序開發(fā)、商城網(wǎng)站建設、公眾號運營以及數(shù)字營銷等,涵蓋了服務、房產(chǎn)、數(shù)碼、服裝、物流貿(mào)易等行業(yè),根據(jù)品牌現(xiàn)狀,為每個客戶量身定制項目整體服務方案,以敏銳的市場洞察力、創(chuàng)新的市場策劃能力,全面把握市場變化,為客戶實現(xiàn)從企業(yè)到消費者的價值轉(zhuǎn)換。