Yapay zeka (YZ) alanındaki hızlı gelişmeler ve buna bağlı olarak artan veri depolama ihtiyacı, internetin arşivlenmesini zorlaştırıyor. Özellikle NAND ve mekanik sabit disklerde yaşanan arz sıkıntısı, bu depolama birimlerinin fiyatlarını adeta uçurmuş durumda. Büyük veri merkezleri ve teknoloji devleri, üretim kapasitelerinin büyük bir kısmını şimdiden uzun vadeli anlaşmalarla kapatmış durumda, bu da standart kullanıcılar ve arşivleme kuruluşları için 28-30 TB gibi yüksek kapasiteli sabit disklerin bulunmasını imkansız hale getiriyor.
Bu durumdan en çok etkilenen kuruluşlardan biri, misyonu "bilgiye evrensel erişim" sağlamak olan İnternet Arşivi. 210 petabayt civarında bir arşive sahip olan ve her gün yüzlerce terabayt veri ekleyen kuruluş, YZ patlamasının getirdiği depolama krizinin ciddi bir maliyet ve zaman sorunu yarattığını belirtiyor. Sabit disk fiyatlarındaki astronomik artışlar, İnternet Arşivi gibi kuruluşların normal hızda veri koruma çabalarını ciddi şekilde sekteye uğratıyor.
Benzer sorunlarla karşı karşıya olan bir diğer önemli kuruluş ise Wikipedia'nın çatı kuruluşu Wikimedia Vakfı. Milyonlarca makaleyi barındıran vakıf, mevcut ekonomik türbülansın sadece depolama birimleri alımını değil, aynı zamanda sunucu teslim sürelerini ve gelecekteki sipariş kapasitelerini de olumsuz etkilediğini ifade ediyor.
Depolama sıkıntısının yanı sıra, YZ için kullanılan veri toplama (scraping) yöntemleri de internet arşivleme çabalarını tehdit ediyor. Yapay zeka modelleri, internetten toplanan devasa veri kümeleriyle eğitiliyor ve bu süreçte bazen yasa dışı yollarla veri elde edildiği durumlar da yaşanıyor. Birçok web sitesi, veri tabanlarının YZ eğitimi için izinsiz olarak kullanılmasını engellemek amacıyla önlemler alıyor. Bu durum, sadece YZ şirketlerinin değil, bilgi koruma amacıyla web sitelerini arşivleyen botların da engellenmesine yol açıyor.
Topluluk içinde internetin arşivlenmesine katkıda bulunan bireysel kullanıcılar da benzer zorluklar yaşıyor. Artan sabit disk fiyatları nedeniyle, veri arşivleme konusunda hevesli kişiler bile mevcut durumda arşivleme yapmayı durdurmuş ve fiyatların normale dönmesini bekliyor. Büyük kapasiteli diskleri liste fiyatından bulmak neredeyse imkansız hale gelmiş durumda.
Bireysel kullanıcıların yanı sıra, daha küçük ölçekli arşiv projeleri de bu durumdan nasibini alıyor. Örneğin, farklı yönetimler arasındaki devlet web sitelerini arşivlemeye adanmış bir proje, maliyetlerin düşmesini umarak mevcut durumu idare etmeye çalışıyor. Bu durum, internetin gelecekteki nesiller için korunması adına önemli bir endişe kaynağı oluşturuyor.
