Quina mida té el núvol?

Gran núvol

El mes passat us va revelar 2007es.com la veritable escala del porno a Internet. En qualsevol moment, la transmissió de vídeos per a adults probablement utilitzi al voltant del 30% de l’amplada de banda total d’Internet, la qual cosa equival a consumir al voltant de 6 terabytes de porno cada segon. Però, què passa amb l’altre 70%? Netflix, YouTube i altres llocs de vídeo que no són per a adults són enormes amplades de banda, possiblement representen fins al 40% del trànsit a Internet. Els armaris de fitxers digitals, com ara Rapidshare i Megaupload, representen al voltant del 10% del trànsit a tot el món. La navegació per Internet i el correu electrònic (i el correu brossa!) Són un altre 15%. I després hi ha la informàtica en núvol.

Avui en dia, la gran majoria de serveis i llocs web s’allotgen al núvol. Amb això vull dir que, en lloc d’empreses (com Ziff Davis / 2007es.com) que gestionen el seu propi maquinari, s’utilitzen serveis informàtics d’emmagatzematge en núvol de tercers. Amazon Web Services (AWS), Microsoft Azure i Google són tres exemples destacats d’enormes clústers de núvols, però hi ha centenars d’operacions més petites que van des de tot un centre de dades fins a alguns racks.



El poder del núvol es confereix al fet que pot ser coaccionat i calçat en tasques tan dispars com un superordinador basat en el núvol, a correu web, a emmagatzematge de documents senzill. En un únic clúster de núvol, Google pot allotjar i publicar petabytes de vídeos de YouTube i emmagatzemar tots els vostres correus electrònics i documents. De totes les facetes del núvol, però, avui ens centrarem en l’emmagatzematge al núvol.



Un centre de dades de Microsoft

Un centre de dades de Microsoft

Tot i que l’emmagatzematge pot no ser tan atractiu com els terabytes de RAM i milers de nuclis de CPU, és la forma més fiable de mesurar la mida del núvol, especialment quan tenim en compte l’ús de l’amplada de banda. A partir de la quantitat total d'emmagatzematge també podem calcular el cost d’emmagatzematge al núvol i, a partir d’aquí, finalment podem treballar Per què Google, Microsoft i Dropbox cauen sobre ells mateixos per proporcionar serveis d'emmagatzematge al núvol.



Com la història del porno, primer començarem amb alguns números teòrics i després passarem a algunes figures del món real (i maquinari) de Backblaze, un proveïdor de còpia de seguretat al núvol.

Petabytes

En la seva major part, les xifres reals de les grans empreses, com Google, Facebook, Amazon i Microsoft, són escasses. Si feu un recorregut per la xarxa, apareixen algunes figures aproximades:

  • Facebook, en la seva presentació de la sortida a borsa, va dir que emmagatzema més de 100 petabytes (PB) de suports (fotos i vídeos). No és poc realista dir que probablement Facebook tingui un total d’emmagatzematge de capacitat molt més enllà d’això, un cop tingueu en compte les còpies de seguretat i altres dades (actualitzacions d’estat, m’agrada, etc.), possiblement en el rang de 300PB.
  • Microsoft va admetre recentment que Hotmail emmagatzema més de 100 petabytes i que SkyDrive, amb '17 milions de clients', emmagatzema 10PB de dades. Igual que Facebook, la capacitat total de Microsoft, una vegada que tinguem en compte la resta d’Azure i les seves propietats web, probablement superi els 300 petabytes.
  • Megaupload és relativament petit en comparació, aparentment només emmagatzema 25 petabytes.
  • Amazon, en lloc de donar-nos un nombre senzill i senzill de petabytes, anuncia el nombre total d’objectes emmagatzemats pel seu servei d’emmagatzematge en núvol S3. A l'abril de 2012, Amazon S3 emmagatzemava 905.000 milions d'objectes. Si suposem una mida mitjana de 100 KB, això suposa uns 90 petabytes; si la mida mitjana és d’1 MB, això suposa 900 petabytes, gairebé un exabyte.
  • Dropbox, fa un any, emmagatzemava 'més de 10 petabytes' de dades. Aleshores comptava amb 25 milions d’usuaris i 100 milions d’usuaris, de manera que totes les coses iguals, la companyia emmagatzema ara uns 40PB de dades.

Per posar aquestes xifres en perspectiva, probablement un ordinador mitjà té un disc dur de 500 GB o 1 TB i un petabyte és de 1024 TB. Com a mínim, doncs, els centres de dades de Microsoft i Facebook acullen més de 100.000 discs durs. Sense crear maquinari personalitzat, podeu extreure 48 unitats en un recinte de 4U. Després d’haver tingut en compte l’engranatge de xarxa, això vol dir que probablement estigueu veient uns 400 discs durs per cada rack 40U, o 250 bastidors, cadascun dels quals ocupa al voltant d’un metre quadrat d’espai. Pot semblar molt, però si teniu en compte que Google, Amazon, Facebook i Microsoft presenten regularment centres de dades amb plànols de més de 30.000 metres quadrats (300.000+ peus quadrats), realment no és tant. A gran escala, es dedica molt més espai als servidors (és a dir, CPU) i a l’engranatge de xarxa.



Ample de banda

Commutador de centre de dadesQuant a l’amplada de banda, tenim encara menys dades dels nois grans. Sabem que, a l’any passat, s’estaven desant un milió de fitxers cada cinc minuts, de manera que avui, amb quatre vegades més usuaris, és a dir, 800.000 fitxers per minut. Amazon S3, que és significativament més gran que Dropbox, gestiona '650.000 sol·licituds per segon'.

Si suposem que el fitxer mitjà emmagatzemat a Dropbox és de 500 KB (una barreja de fotos, vídeos i documents), Dropbox emmagatzema un total de 400.000 megabytes (0,4 TB) per minut, o 6,7 GB per segon (54 Gbps). No tenim dades sobre quantes dades Dropbox envia per minut (és a dir, les persones que descarreguen fitxers del seu Dropbox), però probablement es troben entre els 10 i els 20 Gbps.

Amazon S3, que s’utilitza principalment per emmagatzemar fitxers estàtics per a llocs web (imatges, fulls d’estil, vídeos), probablement tingui una mida mitjana inferior a Dropbox. Si suposem una mida mitjana de 100 KB per fitxer, 650.000 sol·licituds per segon representen un total de 61 gigabytes de dades transferides per segon, o 488 Gbps. Això s’acosta molt a la xifra de 800 Gbps que vam estimar per a un lloc porno gran, que equival al voltant del 2% del trànsit total d’Internet: Amazon és força maleït.

Facebook i Microsoft, amb entre 100 i 300PB d’emmagatzematge cadascun, probablement es troben entre Dropbox i Amazon en termes d’ús d’amplada de banda, potser 200 Gbps per peça.

Però prou teoria! Parlem d'alguns números del món real i maquinari del món real.

Copyright © Tots Els Drets Reservats | 2007es.com