Amazon Web Services viert het twintigjarig bestaan van zijn opslagdienst Amazon S3, die meer dan 500 biljoen objecten opslaat en wereldwijd meer dan 200 miljoen verzoeken per seconde verwerkt.
Amazon S3 werd gelanceerd op 14 maart 2006 en startte destijds met ongeveer één petabyte opslagcapaciteit verdeeld over 400 opslagnodes in drie datacenters. Vandaag beheert S3 honderden exabytes aan data verspreid over 123 availability zones in 39 AWS-regio’s, weet The Register.
Van petabytes naar exabytes
AWS benadrukt dat de schaal van het platform enorm is gegroeid. Volgens een blogpost van Amazon zouden de tientallen miljoenen harde schijven die S3 gebruikt, op elkaar gestapeld bijna tot het International Space Station reiken en weer terug.
Een belangrijk kenmerk van de dienst is volgens AWS de stabiliteit van de API. Code die ontwikkelaars twintig jaar geleden voor S3 schreven, werkt vandaag nog steeds zonder aanpassingen. De S3-API is ondertussen uitgegroeid tot een industrienorm. Veel opslagplatformen bieden tegenwoordig S3-compatibele interfaces om integratie met cloudapplicaties te vergemakkelijken.
Basis voor cloud en streamingdiensten
S3 speelde een belangrijke rol in de groei van cloudgebaseerde diensten. Bedrijven konden plots grote hoeveelheden data opslaan zonder dure lokale infrastructuur. Streamingdiensten zoals Netflix en Spotify maakten gebruik van de dienst om hun platformen wereldwijd te schalen. Het platform kende ook enkele incidenten. Een grote storing in 2017 in de AWS-regio US-East-1 legde meerdere grote websites tijdelijk plat.
Rust en AI in de toekomst van S3
AWS zegt dat S3 momenteel een duurzaamheid van 11 negens (99,999999999 procent) biedt. Dat wordt bereikt via microservices die constant elk datapakket controleren en automatisch herstelacties uitvoeren wanneer degradatie wordt gedetecteerd. Daarnaast herschrijft AWS steeds meer componenten van S3 in Rust, waaronder systemen voor data-verplaatsing en opslag.