Hostlogy O čem píší české webhostingy

Hostovat Facebook je práce pro 30 tisíc serverů

Nedávno byl na serveru Center for Networked Systems publikován záznam přednášky Jeffa Rothschilda, který je viceprezidentem pro technologie ve Facebooku. Přednáška s názvem „High Performance at Massive Scale: Lessons Learned at Facebook“ přinesla mnoho zajímavých faktů, které jsou především ze středoevropské perspektivy těžko představitelné. Posuďte sami.

Jaký nápor musí servery Facebooku vydržet?

• Facebook je globálně na 2. místě, pokud se budeme bavit o webech z pohledu času, který uživatelé stráví na jeho stránkách
• Každý měsíc uživatelé shlédnou 200 miliard stránek.
• Více než 15 000 serverů využívá Facebook Connect.
• V roce 2004 zaznamenal Facebook exponenciální růst se 2 miliony uživatelů, dnes má růstová křivka také exponenciální průběh, ale s 350 miliony uživatelů.

Uživatelé Facebooku rádi sdílejí fotky:

• Uloženo je celkem 20 miliard fotek ve 4 různých rozlišeních.
• Každý měsíc nahrají uživatelé 2 až 3 miliardy nových fotek.
• Uživatelé si každou sekundu vyžádají 600 tisíc fotek.
• Tohle vše zajišťuje systém Haystack, který při „servírování“ fotek snižuje počet nutných I/O operací o 90% na principu spojování více souborů do jednoho velkého.

Výpočetní infrastruktura Facebooku se skládá z následujících částí:

• Prezentační vrstva je založena na PHP z důvodu „simple to learn, simple to write, simple to read“
• Neblahým důsledkem je vysoké vytížení procesorů a operační paměti serverů.
• Back-end je napsán v jazyce C++, Facebook si pro tento účel vytvořil vlastní framework Thrift, který usnadňuje vytváření nových služeb.
• Logování? V určitém stádiu přestalo fungovat tradiční logování, proto bylo nutné najít nové řešení. Scribe dnes zpracuje 25 TB zpráv každý den.
• Data jsou uložena ve velkém clusteru MySQL serverů, většina těchto dat je ale zároveň uložena v paměti memcached serverů pro rychlejší přístup. Hlavním důvodem je hlavně vysoká provázanost všech uložených dat.
• Původní zátěž serverů se pohybovala okolo 15-20 tisíc požadavků za sekundu na každý stroj. Dnes se zátěž zvýšila na 250 tisíc požadavků/sekunda/stroj.
• Facebook provozuje 2 obří datová centra, jedno na západním a druhé na východním pobřeží Spojených států.

Až tedy budete příště aktualizovat svůj profil na Facebooku nebo nahrávat fotku svého miláčka, dvounohého či čtyřnohého, do fotoalba na Facebooku, vězte, že někde za oceánem se technika řádně potí :)

Prosím napište komentář nebo upozorněte na článek na Facebooku: