Složitosti archivace v síti roste: Wayback Machine a Wikimedia trpí nedostatkem prostoru na HDD.

Krize ukládání dat: jak rostoucí ceny úložišť zpomalují největší archivní projekty

Úložiště se stávají stále dražšími a vzácnějšími, což ztěžuje práci organizací, které denně uchovávají obrovské množství informací z internetu.

1. Proč ceny rostou
* Pevné disky (HDD) nyní stojí třikrát dražší než dříve.
* Vzestupní poptávka od velkých korporací a cloudových poskytovatelů přiměla výrobce omezit dodávky, což vedlo k nedostatku.

2. Jak to ovlivňuje Internet Archive
Ukazatel Hodnota
Objem úložiště ~210 PB
Denní tok dat (Wayback Machine) ~100 TB
* Umělá inteligence zvyšuje zatížení: modely se trénují na obrovských datech, která často pocházejí z archivů.
* Ideální úložiště – 28–30 TB HDD – téměř nejsou k dispozici nebo jsou dražší než je reálné.
* Organizace musí hledat sponzory a dostává jen rady od komunity.

3. Problémy Wikimedia
* Na platformě je více než 65 milionů článků – vyžaduje to velké výpočetní zdroje a pečlivě rozdělený rozpočet.
* Obtíže nastávají při:
* Nákupu pamětí a disků;
* Dodávkách serverů;
* Plánování budoucích objednávek.

4. Ztížení archivace
* Velké jazykové modely AI používají obrovská data, která někdy získává nelegálně.
* Vlastníci webových stránek blokují přístup ke svým zdrojům bez rozlišování „zlodějů“ a „dobrovolných služeb“, které sbírají data pro vzdělávání.
* Výsledkem je:
* Malí nadšenci musí zkracovat nebo pozastavovat práci;
* Čekání na stabilizaci cen úložišť.

Závěr
Růst ceny a nedostatek HDD vytváří vážné překážky pro nekomerční archivy. Bez nových zdrojů financování a dostupnějších technologií může zachování historie internetu stát se prakticky nemožným.