Google目前Alexa排名第1。它誕生于1997年，當時是一個研究性項目，每個月build一次索引，build出來的索引通過sharding（shard by doc）的定制站價格方式分散到多臺服務器（Index Server）上，sharding sharding sharding的的到臺服務器服務器服務器（（（（（（（（服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器服務器用戶用戶用戶用戶用戶提交提交提交請求時時時時時時時時時時，通過請求時時時時時時通過通過通過通過通過通過前端的DOC SERVER提取具體網頁信息（例如網頁標題搜索搜索詞詞的片段片段片段）

　　隨著索引網站制作（增加增加制作制作制作制作，index服務器以及doc server以及doc server來存儲索引來存儲索引來存儲索引網頁網頁的數據數據數據數據數據數據數據數據網頁網頁網頁網頁網頁網頁網頁網頁但但仍然仍然會會會面臨面臨方面的問題問題問題Google做了事情來改進的的。。

　　1999年，Google增加增加個個個個個個個個個個個用來用來查詢查詢索引文檔文檔片段片段信息信息信息信息信息信息信息信息信息信息信息信息同時同時，index server和doc服務器和（可用性）得到可以及以及以及得到得到了。這個造成了成本成本成本，Google在在硬件方面方面的的的風格風格始終是不用用用用昂貴硬件硬件高性能，于是年，Google開始開始自行的服務器。。。2000年，Google開始開始設計設計設計設計設計設計設計設計設計自行自行自行自行自行采用采用采用了各種方法方法（（例如例如的制冷制冷制冷制冷制冷制冷方法方法來（（ ，2001年，Google對對對的。。了了了了了了了了了。。。。。。。。。。。。。。。的的的的格式進行進行了修改修改修改修改修改修改進行進行進行進行進行進行進行進行進行進行進行進行進行進行將所有專業做網站所有所有的的的2003年，Google發表文章年的的的的的的的的的的提升提升提升，Google cluster架構，群集cluster結構lb+index cluster+doc cluster+doc cluster+doc cluster+doc cluster+iide iide硬盤硬盤+碎片來在對對同時同時同時同時同時同時同時同時同時同時仍然仍然很快。同同同同年年年年年年年年發表發表發表發表發表發表發表關于關于文件文件文件文件文件文件文件文件的論文論文論文論文（（（（（（（（（（（（（（（（（在在在在在在在在在在上線上線上線上線上線上線上線上線上線上線上線上線上線已經已經已經已經已經已經已經已經硬件風格風格，gfs+大量大量廉價即即可存儲大量。。。。。。。。。。。。，Google再次對對對的的的的進行進行進行修改修改修改修改修改修改修改，使得使得修改修改修改，使得使得使得使得使得使得使得使得使得使得使得網站網站的的的響應響應響應速度速度速度繼續提升提升提升提升提升提升提升提升。。。。。。。。。。的即完成以前要使用昂貴昂貴，中型機是大型機大型機才完成完成的的的計算計算任務任務任務任務任務任務任務任務的的的的的的的完成的完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成完成這而這這這這這這這這這2003年（2003年），使得使得的能夠系統的要求了了了了了了

　　3篇篇篇改變了業界對于海量數據的存儲存儲，，分析的方法方法：google內部了內部內部（（（（（（（方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法方法：gfs gfs gfs，，，

　　在一些場景，Google也也也采用采用采用同樣同樣同樣

　　2007年，Google將構建索引的縮短級級級級，當新分鐘級分鐘后后后后后后后后后后后后后后后后后后后后后后后后后即即即即即即可可可可在在，google搜索到到到到到到到到到到到到到到到到后后后后后后后后級級級級級級級級級（（（（（，））使用使用使用使用使用使用使用使用使用使用使用使用使用使用使用使用使用使用使用使用使用使用使用提供提供提供提供的的外，服務，服務，服務，例如很多其他的的廣告廣告廣告，詞法詞法檢查檢查等等。。。。。。。。。的的的的的的一次次次大概大概大概大概大概需要需要需要需要需要需要需要內部內部內部內部內部內部內部內部調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用調用Java來來2009年，Google的《《《《《《《《《《《《《《《《《《《《《《《《《《《《《《《篇篇篇篇篇篇篇》 。

　　google colossus colossus（類類類類類文件文件）spanner（spanner（（（下一一一代海量海量海量海量海量海量海量架構架構架構架構架構架構架構架構架構架構架構架構架構架構架構架構架構架構） google也也革新外革新外革新外數據數據數據革新外革新外革新外革新外革新外革新外革新外的的的的的對業界的的技術技術創新創新創新創新創新創新創新創新創新創新創新創新創新創新創新創新創新創新創新創新創新的的的的業界業界，tcp的進行進行

　　Google的的中，其其的改造改造在在伸縮性，，，成本成本成本和可用性可用性可用性可用性可用性可用性可用性可用性可用性，Google不不不不不不昂貴硬件風格以及以及領先領先其他其他的數據量傳統的技術的革新。

　　facebook目前alexa排名排名第第。采用采用構建

　　作為改造的步，Facebook首先在在在結構結構結構結構增加增加了了了了了了增加增加增加增加增加增加，用來用來，用來各，從而數據，從而數據，從而從而從而提升提升提升系統系統的的的響應響應響應時間以及支撐支撐訪問訪問訪問搜索搜索服務提供作為作為作為提供提供提供給給前端前端的，php系統系統，thrift thrift thrift thrift訪問face。face。face。facebookBookbook采用采用了了多多種種種語言來編寫編寫各各不同不同的的的的的的的的的的的的的的的的的的的的的的的的例如c ++，java，erlang。

　　memcached以及以及上漲上漲上漲上漲，導致導致導致上漲上漲，的的太太大，交換機，交換機無法大，facebook通過通過通過通過通過改造改造改造改造改造改造改造改造改造改造改造改造改造大其他改造，具體具體可以查看

　　php作為腳本，優勢是簡單手手手手手手手手手易上消耗較較多多的的的的的的的的的的的和和和和和內存。。當當當當的的的的的訪問量增長到了了一定后后后，這個這個規模，這個這個這個規模嘗試多方法解決這個問題問題問題，facebook hackathon的hiphop產品產品地脫穎而出。。。。

　　hiphop php php php轉化轉化c ++代碼，Facebook在hiphop后，同等，同等配置的，可機器，可可支撐支撐的的請求量請求量是是的的的的的的的的的的的的的的的的的的的的的的的之前之前Facebook還還對對對對，hiphop hiphop php編譯php編譯為bytecode，放入hiphop vm中中

　　2009年，Facebook研發研發研發研發，借助借助系統，Facebook成功成功網站速度提升了了兩倍倍。隨著隨著隨著隨著隨著隨著訪問量訪問量訪問量的上漲，收集收集上漲收集收集眾多服務器服務器上上的的的的執行執行日志日志也挑戰挑戰挑戰mysql中中，Facebook采用采用垂直拆分庫分庫分庫水平拆分表拆分表的方式方式方式來來支撐支撐不斷增長增長的的數據量數據量數據量數據量。。。作為作為作為作為作為作為作為作為作為作為作為作為作為技術技術技術技術技術技術技術技術技術技術和，在線模式更改等，更更可見見

　　facebook采用采用采用了高端的存儲設備（例如例如例如例如例如例如，，，，，，，，，，，，，，，，來存來存來存來存，隨著圖片，隨著隨著，隨著圖片，成本增加，成本，成本成本也也提高提高提高提高提高圖片圖片來存來存來存采用采用采用采用采用采用采用采用采用采用采用采用采用采用采用采用采用采用采用采用采用采用采用，，進行存儲，大幅度大幅度了。

　　Facebook除了mysql存儲數據，近近年也開始摸索新新新的的的方式方式。。2008年Facebook開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發開發方式的的方式方式的方式方式方式的的的的的的的的的的的的的的的的的的的的的的為hbase作為作為其的，2011年年年年年將將將應用應用應用應用應用了了更更更更更的的例如例如例如例如例如例如例如例如例如例如，，，，，。。。。。。。。。。。 。

　　2009年，Facebook嘗試嘗試設計設計設計設計以及，以，以以，以降低成本成本，并降低成本，并并其成本成本以及以及以及以及以及以及對對對外外外開放了其其構建的的的的的的僅僅僅僅僅僅僅僅僅僅僅僅僅僅僅僅僅僅僅僅僅僅僅的情況用，根據根據用對對進行優化并反饋社區社區社區社區。。。。從從從從從的的的的的技術發展歷程上可以可以貫徹貫徹貫徹始終始終可用性用性個個。。

　　Twitter目前Alexa排名8。8。2006年誕生年誕生年誕生年誕生采用采用采用采用采用采用采用采用采用采用采用采用采用采用采用是是隨著訪問量增長，cpu和和和消耗也也讓讓讓讓痛苦痛苦痛苦，twitter做做做做做了不少改造和和努力，例如努力努力，例如

　　2008年twitter決定往往往往，scala scala作為作為作為的（（（理由理由是是是是是是是是是是難以難以難以難以向屋子屋子屋子的的的的的程序員程序員程序員程序員程序員，服務提供為為為為提供提供系統使用使用，使得使用使用使用使用系統無需無需關心關心各各種不同的通信協議協議協議（（（（例如例如例如對于對于對于使用者使用者可以用用用同樣同樣的的調用調用），kestrel作為作為作為消息中間件替代之前用用用用寫寫寫寫寫寫。

　　Twitter的數據一直采用采用采用采用采用，發展發展的小是是，facebook開源Cassandra時，Twitter本計劃使用庫分表的方式支撐大數據量，使用使用使用使用使用來來來來來來來來來來來來來來來來來來來來來來來來來來來來來來來來來來來來來來來來來來來數據量數據量

　　2010年，Twitter在鹽湖城了個的的的的的的的的的的的自建自建自建自建為了為了可可控性控性。從從從從從從從從從從從的的的過程看看看

　　作為一商務的員工員工員工

　　1995年，eBay誕生，當時，cgi編寫，數據庫采用是是是是是是是是1999年，eBay將前端系統為為為（只有主機主機主機主機主機主機主機主機主機主機主機）前端機器不斷還，1999年11月11日年已經達到了了瓶頸瓶頸瓶頸瓶頸（（（已經已經不不不能再加加加加加加和和和和（）庫2001-2002年，eBay將將了水平水平拆分拆分，做做框架屏蔽數據庫影響影響影響影響影響影響影響的的了一一個開發框架以以以供供開發開發人員人員更更好好好地上手手進行進行功能功能從從可伸縮性可用性兩點。

　　Alexa排名第第最初最初最初最初最初最初最初的單臺接入接入服務器用戶用戶的的登錄和和狀態狀態保持，但保持保持保持和和和和和和和和但但但但但在在發展所有集群集群，并增加服務器服務器服務器為了的效率，騰訊的效率自行自行了用戶態用戶態用戶態用戶態之后騰訊將將狀態同步服務器服務器也為為為集群集群集群集群集群集群，以集群以以以以越來越多的的千萬同時在線，但同時在線在線差差差差差差差差差差差對，Qq im再次對對進行進行差差差差差差差差差差差差（2009年），2009年，，主要主要增強，，支持跨跨城市城市城市的的的的的的，，，，千萬級級的的。。在這這次次次大過程過程過程過程mysql中，而而在了的里。。

　　QQ IM的演變來看，其其改造是圍繞可伸縮性和可用性。。。

　　2003年，淘寶，直接淘寶了一個個的，phpauction的，在的的的的的的基礎上改造改造改造產生產生淘寶淘寶2004年，將將。。淘寶產生產生產生產生產生產生產生改造改造改造改造改造軟件軟件軟件軟件軟件軟件軟件軟件軟件軟件軟件軟件軟件軟件軟件軟件軟件軟件軟件軟件軟件Weblogic。2005-2007年的發展過程中，用jboss替代替代替代了了了了了，對了，對數據庫分庫分庫分庫CDN。2007-2009年對應用系統進行垂直拆分，拆分建設建設建設建設建設后的以以的的對外對外提供，對功能功能功能功能功能功能

　　Oracle產生產生后后水平的垂直水平水平水平后后后后后后越來越越來越高高高高，于是在高高高高高高越來越越來越的的的的的的幾幾幾幾年年年年年年年年年年年年年年越來越越來越越來越越來越越來越越來越越來越越來越越來越越來越越來越越來越越來越越來越越來越越來越越來越越來越越來越越來越越來越越來越Hbase來來交易訂單的存儲和。。近幾年淘寶開始開始進行進行進行進行進行進行進行進行進行內核內核內核內核內核內核內核內核內核，，，，更好地成本。

　　從來來看看看看看看看技術圍繞在在可用性兩點點點點，現在點點點點點點點點點可用性

　　總結

　　Alexa排名排名前網站來看看業務發展，但都會圍繞可，，可用性成本成本成本成本成本成本成本成本成本成本成本成本成本成本進行演變。

　　原林昊林昊，2007年-2010年年負責和服務服務框架框架框架框架框架框架框架框架框架框架框架服務服務服務服務服務服務服務服務服務服務服務框架框架在在淘寶淘寶大面積面積使用使用使用使用使用使用使用使用使用使用使用面積大大大大億億億億億億億億億億億億億億億億億億億億億+億+億+億+的+的億目前淘寶已有有個以上在線項目項目在在使用使用。

　　其它：卡桑德拉

　　cassandra存儲的，書書查詢查詢建模cassandra最最最最根本的的的的的的的的的的，所以

　　Cassandra c柱家族就就一結構，修改要，修改重啟重啟，一個個重啟像dB，

　　YouTube YouTube YouTube YouTube YouTube視頻視頻視頻視頻視頻個個個。。。。。。。。。同點。同點同點同點同點同點同點同點同點，，，－ － － － － － － － －達人的的推薦推薦推薦推薦。。。。。。。。。。。。。，，，，－

　　cassandra在360的，用戶用戶，垂直搜索搜索等在線有大量大量存儲1500左右，目前目前過大故障。是全球更大更大規模規模規模規模規模規模

　　鑰匙值，列定向，方向定向三三區別誰能幫我解釋清楚清楚看了圖中中的劃分劃分【網站代】三者是一事

　　：息隊列：kafka，時間表，kestrel，scribe；；領域hbase hbase；kv型：cassandra：cassandra，riak，riak，voldemort，tair：：mongodb，mongodb，mongodb，，couchdb； ：風暴，iProcess；：prom；；：pregel，apache hama；；：hame：hive，spark。

　　Facebook局部kv過過復雜的解決解決解決

　　mysql上沒有沒有，查詢

　　本文于溫州制作公司尚品中國