Сегодня 20 октября 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Новости Software

Архивировать интернет становится всё сложнее: Wayback Machine и Wikimedia страдают от дефицита HDD

Архивирование данных интернета оказывается всё более неподъёмной задачей из-за дефицита накопителей и роста цен на них. Жёсткие диски подорожали втрое, потому что оказались востребованными крупными компаниями. Это сильно осложняет работу таких проектов как Wayback Machine и Wikimedia.

 Источник изображения: Patrick Lindenberg / unsplash.com

Источник изображения: Patrick Lindenberg / unsplash.com

Некоммерческая организация Internet Archive, которая ставит своей целью обеспечить «доступ ко всем знаниям для всех», оказалась одной из организаций, пострадавших от кризиса. В её распоряжении хранилище объёмом около 210 Пбайт, и ещё 100 Тбайт ежедневно требует сервис Wayback Machine. Бум искусственного интеллекта превратил этот проект в «проблему, отнимающую у нас время и деньги», признаются его руководители. Для этой задачи идеально подходят жёсткие диски объёмом 28–30 Тбайт, но они часто отсутствуют на складах или продаются по сильно завышенным ценам. Отчасти эти проблемы помогают смягчить спонсоры проекта и сообщество — последнее, правда, только советами.

Ответственный за «Википедию» некоммерческий фонд Wikimedia испытывает сложные проблемы: 65 млн статей на платформе требует внушительных ресурсов, а главное — тщательно спланированного распределения бюджета, и текущая ситуация лишь усугубила эту проблему. Организация ощутила кризис при «закупке памяти и жёстких дисков, а также в отношении сроков поставки серверов и нашей способности размещать будущие заказы».

Ещё одна проблема состоит в том, что усложнились механизмы архивирования информации. Большие языковые модели ИИ обучаются на огромных массивах данных, которые подчас добываются незаконным путём — из-за этого владельцы многих сайтов блокируют доступ для средств сбора данных, не проводя различия между ИИ-ботами и добросовестными сервисами, которые собирают эту информацию в образовательных целях. Из-за подобных блокировок и роста цен на накопители не только крупные некоммерческие организации, но и одиночные энтузиасты вынуждены либо сокращать масштабы деятельности, либо вообще приостанавливать её — в ожидании, когда ситуация стабилизируется.

Было интересно? Скажите об этом Google, чтобы чаще получать ссылки на наши новости про науку и космос

Источник:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Материалы по теме

window-new
Soft
Hard
Тренды 🔥
Хакеры взломали серверы российских хостинг-провайдеров и похитили данные клиентов через брешь в VMmanager 6 26 мин.
Хакеры взломали российских хостеров через дыру в VMmanager — могли утечь пароли, SSH-ключи и токены 55 мин.
Альтман предложил три способа спасти мир от опасного ИИ — один из них лишит конкурентов видеокарт 2 ч.
Хакер взломал новейшую прошивку PS5, но пиратская GTA VI пока под вопросом 3 ч.
Инди-разработчики начали скрывать новые игры от публики из страха перед ИИ-клонами 4 ч.
Microsoft решила проблему, которую сама создала: защитой бизнеса от её ИИ займутся «агенты-хранители» 4 ч.
DeepSeek объявили нежелательной в госструктурах США: власти опасаются утечки данных в Китай 7 ч.
Слухи: Lucasfilm может доверить разработку Star Wars Battlefront 3 не DICE, а Bungie 7 ч.
Лавкрафтианский хоррор Stygian: Outer Gods готов вырваться из пучины раннего доступа Steam — дата выхода и детали версии 1.0 8 ч.
Календарь релизов 19–25 октября: CoD: MW4, Stupid Never Dies и We Were Here Tomorrow 18 ч.
Спутниковая связь из iPhone появится на Android-смартфонах — Globalstar заключила сделку со Skylo 2 мин.
Не больше двух iPhone Duo в одни руки: Apple ограничила продажи для борьбы со спекулянтами 9 мин.
Qualcomm отвергла слухи о перегреве флагманских чипов Snapdragon 8 Elite Extreme Gen 6 19 мин.
Производители оборудования связи попросили упростить требования к системным платам 3 ч.
Представлен мини-компьютер Sipeed MaixStation — конкурент NVIDIA DGX Spark с чипом Axera AX8860P 4 ч.
Xiaomi выпустила 25-долларовый фитнес-браслет Redmi Band 4 — до 21 дня автономной работы 4 ч.
Электричество из-под морского дна: эксперимент у подводного вулкана завершился первым успехом 4 ч.
Глава Кемеровской области предложил разместить ЦОД в отработанных угольных карьерах 4 ч.
Tenstorrent завершила раунд финансирования на $1,5 млрд с оценкой $6,2 млрд 5 ч.
Долговая бомба для всей ИИ-индустрии: облигации CoreWeave стали «проблемными», а акции рухнули на 20 % 6 ч.