Haute-Disponibilite

Aditya Agarwal est ‘Director of Engineering’ chez Facebook et il nous fait de nouveau bénéficier de son expérience au sein de cette énorme système de plusieurs dizaines de milliers de serveurs (60 000 à ce jour). Dans cette nouvelle présentation il nous explique notamment comment il a fait évoluer les outils internes afin de les optimiser au fur et à mesure de la croissance du site.

Lire la suite »

Je reprends ici une discussion commencée sur un Thread à propos de 37signal, et repris sur ce post car je trouve que le sujet est intéressant : La taille minimum d’une équipe d’administration système et réseau.

Alors bien sur, il n’est pas question ici des grosses structures qui doivent et peuvent mettre en place des équipes  d’exploitation dédiées. Les échanges concernent surtout le nombre d’admins nécessaire pour permettre une exploitation/surveillance quasi continue sans pour autant courir au burn out.

Lire la suite »

Lancer un nouveau site, un nouveau service nécessite de faire des tests, fonctionnels mais aussi de charge. En fin d’année dernière (décembre 2009) MySpace a lancé un nouveau service de streaming de vidéo musicale.

Ce type de service nécessite de gros besoins en bande passante et en nombre de connexion simultanées. Pour tester ce service il est nécessaire d’avoir à disposition une infrastrucuture capable de simuler un nombre très important d’utilisateurs ainsi que leurs bandes passante. Il faut donc mettre en place une architecture pour tester l’architecture…

Lire la suite »

Un bon papier de Randy Shoup, un des architectes d’Ebay. Il nous explique en dix leçons comment ils contrôlent les évolutions de l’architecture du site. Avant d’entrer dans les “leçons”, Randy nous fait un petit rappel sur quelques chiffres impressionants. Pour ceux qui ne mesurent pas la taille de ce géant en voici quelques extraits : Lire la suite »

Si l’architecture interne du système Facebook vous intéresse je vous conseille de pendre une heure (et oui!) pour regarder la présentation “Facebook: Science and the Social Graph”

Il s’agit de l’enregistrement vidéo d’une présentation d’Aditya Agarwal. Aditya est ‘Director of Engineering’ chez Facebook et il manage les ingénieurs en charge de l‘architecture et du design des nouveaux systèmes. Lire la suite »

Lors d’un récent billet j’avais déjà évoqué en quoi l’augmentation de puissance des composants informatique permettait de créer des vidéos impossibles il y a encore quelques années. Ici nous changeons de dimension puisqu’il s’agit de deux leaders sur le marché de la création des effets spéciaux pour le cinéma et/ou les films d’animation comme : Star Wars, Terminator and Indiana Jones, Shrek, etc …
Lire la suite »

Deux annonces dans la même semaine pour Facebook. La première concerne ce chiffre d’un milliard de message échangés par jour (message via le chat intégré au site). Une petite division rendra ce chiffre plus parlant : 1 000 000 000 / (24 x 3600) = 11 574 requêtes par seconde !!!

Lire la suite »

Quelle société possède le plus de serveurs ? C’est un des post qui a enregistré le plus de commentaires ces derniers jours sur le site www.datacenterknowledge.com. Chacun ajoutant, en fonction de ses connaissances une information sur le sujet pour venir compléter les chiffres de Netcratf.

Au final nous obtenons une liste assez complète des ressources informatique des sociétés les plus en vues sur le Web. J’ai compilé cette liste avec les informations figurants dans les commentaires, plus celle que je connaissais déjà pour faire à mon tour, cette petite estimation :
Lire la suite »

Beaucoup d’informations sur le géant de Mountain View ces derniers jours. En effet lors du “ Google Data Center Energy Summit” Google a mis en ligne plusieurs vidéos décrivant l’architecture  de ces datacenters et de ses serveurs web. Point intéressant, on découvre que Google utilise des conteneurs. IBM, Sun et les autres sont sur segment depuis quelques années également mais il semble que Google ait compris l’intérêt de cette structure depuis déjà bien longtemps.

Lire la suite »

Comment gérer des centaines de milliers de mails par jour, soit environ une dizaine d’email par seconde de manière continue ou encore des dizaines de Tera de données par jour… C’est ce que vous pourrez apprendre en consultant cette page.

Il s’agit d’un document extrêmement complet sur la manière dont Lavabit traite les 260 000 comptes emails qu’ils ont en gestion. L’architecture est basée sur une petite trentaine de serveurs. Au programme : un cluster Cyrus, du SMTP, du POP, du PostFix et au niveau de la consultation, la charge est répartie par un load balancer Alteon AD4.

Lire la suite »