La gestion de la croissance chez facebook

July 1, 2010

croissance facebook
Aditya Agarwal
est ‘Director of Engineering’ chez Facebook et il nous fait de nouveau bénéficier de son expérience au sein de cette énorme système de plusieurs dizaines de milliers de serveurs (60 000 à ce jour). Dans cette nouvelle présentation il nous explique notamment comment il a fait évoluer les outils internes afin de les optimiser au fur et à mesure de la croissance du site.

Lire la suite »


Une équipe de 3 admins pour être serein

June 2, 2010

noc3Je reprends ici une discussion commencée sur un Thread à propos de 37signal, et repris sur ce post car je trouve que le sujet est intéressant : La taille minimum d’une équipe d’administration système et réseau.

Alors bien sur, il n’est pas question ici des grosses structures qui doivent et peuvent mettre en place des équipes  d’exploitation dédiées. Les échanges concernent surtout le nombre d’admins nécessaire pour permettre une exploitation/surveillance quasi continue sans pour autant courir au burn out.

Lire la suite »


Test de charge : Simuler 1 million d’utilisateurs sur MySpace

March 7, 2010

mySpaceLancer un nouveau site, un nouveau service nécessite de faire des tests, fonctionnels mais aussi de charge. En fin d’année dernière (décembre 2009) MySpace a lancé un nouveau service de streaming de vidéo musicale.

Ce type de service nécessite de gros besoins en bande passante et en nombre de connexion simultanées. Pour tester ce service il est nécessaire d’avoir à disposition une infrastrucuture capable de simuler un nombre très important d’utilisateurs ainsi que leurs bandes passante. Il faut donc mettre en place une architecture pour tester l’architecture…

Lire la suite »


Les secrets et conseils d’Ebay pour servir la planète

November 22, 2009

Architecture et conseils technique ebayUn bon papier de Randy Shoup, un des architectes d’Ebay. Il nous explique en dix leçons comment ils contrôlent les évolutions de l’architecture du site. Avant d’entrer dans les “leçons”, Randy nous fait un petit rappel sur quelques chiffres impressionants. Pour ceux qui ne mesurent pas la taille de ce géant en voici quelques extraits : Lire la suite »


Analyse technique de l’architecture LAMP de Facebook

July 22, 2009

lamp-facebook1Si l’architecture interne du système Facebook vous intéresse je vous conseille de pendre une heure (et oui!) pour regarder la présentation “Facebook: Science and the Social Graph

Il s’agit de l’enregistrement vidéo d’une présentation d’Aditya Agarwal. Aditya est ‘Director of Engineering’ chez Facebook et il manage les ingénieurs en charge de l‘architecture et du design des nouveaux systèmes. Lire la suite »


LucasFilm, DreamWorks, la haute volumétrie pour le cinéma

June 25, 2009

lucasfilmLors d’un récent billet j’avais déjà évoqué en quoi l’augmentation de puissance des composants informatique permettait de créer des vidéos impossibles il y a encore quelques années. Ici nous changeons de dimension puisqu’il s’agit de deux leaders sur le marché de la création des effets spéciaux pour le cinéma et/ou les films d’animation comme : Star Wars, Terminator and Indiana Jones, Shrek, etc …
Lire la suite »


Contrer facebook et son milliard de message par jour

June 18, 2009

fbDeux annonces dans la même semaine pour Facebook. La première concerne ce chiffre d’un milliard de message échangés par jour (message via le chat intégré au site). Une petite division rendra ce chiffre plus parlant : 1 000 000 000 / (24 x 3600) = 11 574 requêtes par seconde !!!

Lire la suite »


Qui a le plus de serveurs

May 17, 2009

datacenterQuelle société possède le plus de serveurs ? C’est un des post qui a enregistré le plus de commentaires ces derniers jours sur le site www.datacenterknowledge.com. Chacun ajoutant, en fonction de ses connaissances une information sur le sujet pour venir compléter les chiffres de Netcratf.

Au final nous obtenons une liste assez complète des ressources informatique des sociétés les plus en vues sur le Web. J’ai compilé cette liste avec les informations figurants dans les commentaires, plus celle que je connaissais déjà pour faire à mon tour, cette petite estimation :
Lire la suite »


A l’intérieur d’un Datacenter Google (bonus: Les serveurs Web Google)

April 2, 2009

googleBeaucoup d’informations sur le géant de Mountain View ces derniers jours. En effet lors du “ Google Data Center Energy Summit” Google a mis en ligne plusieurs vidéos décrivant l’architecture  de ces datacenters et de ses serveurs web. Point intéressant, on découvre que Google utilise des conteneurs. IBM, Sun et les autres sont sur segment depuis quelques années également mais il semble que Google ait compris l’intérêt de cette structure depuis déjà bien longtemps.

Lire la suite »


Système d’email haute volumétrie

April 1, 2009

lavabitComment gérer des centaines de milliers de mails par jour, soit environ une dizaine d’email par seconde de manière continue ou encore des dizaines de Tera de données par jour… C’est ce que vous pourrez apprendre en consultant cette page.

Il s’agit d’un document extrêmement complet sur la manière dont Lavabit traite les 260 000 comptes emails qu’ils ont en gestion. L’architecture est basée sur une petite trentaine de serveurs. Au programme : un cluster Cyrus, du SMTP, du POP, du PostFix et au niveau de la consultation, la charge est répartie par un load balancer Alteon AD4.

Lire la suite »