BlogBang

Google Spanner

googleimageat5 Google Spanner

On sait depuis longtemps que la société Google développe et fabrique elle-même son hardware et notamment ses serveurs et Jeff Dean, employé de Google, vient donner plus d’infos sur la très secrète architecture distribuée que le géant du web a adopté.

Baptisée Spanner, cette plateforme permet de déplacer et de répliquer certaines données entre ses 36 data centers de part le monde et de réaliser des calculs distribués en fonction des contraintes et des usages du moment.

Globalement, Spanner permet d’éviter la perte de paquet, la surconsommation d’énergie, la surcharge de bande passante et de mémoire, et permet surtout passer outre les problèmes matériels que les différents data center de Google pourraient rencontrer.

googlespanner Google Spanner

Tout ceci bien évidement, entièrement automatisé et les ressources sont allouées automatiquement aux machines. Cela leur permettra à terme de faire grossir progressivement leur parc de 1 à 10 millions de serveurs, ce qui représentera 1 millions de milliards de de bits de stockage répartis dans un milliers d’endroits différents dans le monde.

Ces chiffres donnent le vertige surtout lorsqu’on sait que cela est le fruit d’une seule et même société qui produit tout cela seule. On s’approche de plus en plus d’une énorme hydre impossible à abattre car suffisamment intelligente pour autogérer les millions de requêtes auquelles il doit répondre chaque seconde.

Publicité

Je vous recommande aussi la lecture des sujets suivants


Faites un lien vers cette news sur votre site



19 commentaires

  1. Manu Reply to this comment


    Putain tu sais que tu me fais flipper toi des fois…

    On s’approche de plus en plus d’un énorme hydre impossible à abattre car suffisamment intelligent pour autogérer les millions de requêtes auquelles il doit répondre chaque seconde.

    PS : hydre c’est féminin.

    Posté le 26 octobre 2009 à 10:44:16

  2. Anonym Reply to this comment


    Certes Google pose de plus en plus de problèmes de Monopole et de respect de la vie privée etc. Mais on doit au moins reconnaitre une chose à ce Géant : si il en est arrivé là c’est justement grâce à la qualité de ses produits/services ce qui estune conséquence directe de la qualité de leur infrastructure et de leurs algos.

    Tout le monde ne peut pas en dire autant ( oui c’est à toi que je parle Billou )

    Posté le 26 octobre 2009 à 10:45:37

  3. Leno Reply to this comment


    Don’t be evil…
    En faite on crée un dieu surpuissant c’est ca ?

    Posté le 26 octobre 2009 à 11:14:16

  4. maniT4c Reply to this comment


    En effet ça fait peur des chiffres pareils. Google c’est le prototype même du développement exponentiel et s’ils devenaient fou chez Google qui pourrait les arrêter ?

    Posté le 26 octobre 2009 à 11:24:25

  5. Tatsu-Kan Reply to this comment


    C’est quand même une super infrastructure qu’ils ont mis en place.

    J’aime beaucoup les chiffres ’standard’ de crash et autres du début du document ^^

    Posté le 26 octobre 2009 à 11:26:09

  6. ZykoW Reply to this comment


    Ouais c’est flippant quand même.

    Posté le 26 octobre 2009 à 11:28:26

  7. lemulot Reply to this comment


    C’est bien aussi qu’ils essaye de limiter la conso electrique..
    J’image qu’un datacenter, il lui faut la central nucleaire a cote.

    Posté le 26 octobre 2009 à 11:29:51

  8. Nounours Bleu Reply to this comment


    Skynet!!!!!!!!!

    Posté le 26 octobre 2009 à 11:36:15

  9. David Reply to this comment


    Lemulot :

    Pour les très gros hébergeurs, y compris en France (ou l’électricité est l’une des moins cher au monde), l’énergie est le poste de dépenses numéro 1 (devant le hardware, le foncier, ou les ressources humaines)

    Un haut responsable de google avait d’ailleurs dit un jour « si vous cherchez nos datacenters (aux usa), cherchez là ou l’énergie est la moins cher… »

    Posté le 26 octobre 2009 à 11:42:30

  10. remrem Reply to this comment


    @Nounours Bleu> Je pensais la même chose … Skynet … :D

    Pour avoir été admin réseau dans une grosse infra, je dois avouer que là … chapeau bas ! Un modèle d’infrastructure ! Mais bon, ça ne m’étonne pas vu les moyens économique et ‘human’s brain / skill’ de chez google …

    Posté le 26 octobre 2009 à 12:52:03

  11. Anis Reply to this comment


    « On s’approche de plus en plus d’un énorme hydre impossible à abattre car suffisamment intelligent pour autogérer les millions de requêtes auquelles il doit répondre chaque seconde. »

    J’ai une super idée pour résoudre ce problème :
    Il faut tous passer à Bing !

    Ouaiiii qui est avec moi! personne? m’enfin!

    Posté le 26 octobre 2009 à 13:01:52

  12. Zozo Reply to this comment


    J’ai peur :( .

    Posté le 26 octobre 2009 à 14:28:04

  13. Socketubs Reply to this comment


    Un monstre.. Google est un monstre à lui même qui va nous ramener à l’état du minitel..>_<

    Posté le 26 octobre 2009 à 18:38:05

  14. Pyrrah Reply to this comment


    Ca fait peur en effet…

    Posté le 26 octobre 2009 à 20:45:33

  15. Alphonso Reply to this comment


    dans le titre du flux j’ai lu « Google Scanner » je me suis dit enfin on y est

    Posté le 26 octobre 2009 à 21:33:51

  16. SolykZ Reply to this comment


    Chaud ! :o
    Les tentacules se déploient, l’heure est grave. Imaginez qu’un jour ils pètent une case… :)

    @lemulot: ils sont en train de monter un truc à quelques kilomètres de chez moi (à Ghlin, près de Mons) et il semblerait qu’ils génèrent leur propre électricité via une centrale juxtaposée. O_ô

    Posté le 26 octobre 2009 à 21:59:51

  17. Rejulk Reply to this comment


    En fait Google devrait s’appeler Skynet…

    Posté le 26 octobre 2009 à 23:13:18

  18. jallatte Reply to this comment


    j’ai aimé la pagination avec l’intégration de Scribd dans la page

    Posté le 27 octobre 2009 à 09:48:18

  19. Infernux Blog » Générer des graphiques avec Google Reply to this comment


    [...] peu de Google et plus particulièrement d’une des très nombreuses APIs fournies par « l’énorme hydre impossible à abattre car suffisamment intelligente pour autogérer les millio… ». J’ai nommé the Google chart API [...]

    Posté le 28 octobre 2009 à 00:29:23