Сегодня 21 октября 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Теги → бекап

GIF с танцем Рейчел из «Друзей» разросся до сотен гигабайт и сломал бэкапы Discourse

Discourse — широко используемая платформа для обсуждений, которая в настоящее время поддерживает более 22 000 онлайн-сообществ. Резервное копирование сайта было нарушено из-за GIF-файла размером 1,6 Мбайт, который был скопирован пользователями 246 173 раза, что превысило лимит файловой системы Linux ext4 на жёсткие ссылки. В результате анимация танца радости Рейчел из сериала «Друзья» в исполнении Дженнифер Энистон (Jennifer Aniston) заняла в бэкапе 377 Гбайт.

 Источник изображений: warnerbros.com

Источник изображений: warnerbros.com

Платформа Discourse позволяет пользователям вставлять эмодзи и GIF-изображения в свои обсуждения. «Когда файл перемещается между контекстами безопасности (например, из личного сообщения в публикацию), система создаёт новую копию со случайным SHA1, — пояснил технический блогер Discourse Джейк Голдсборо (Jake Goldsborough). — Исходное содержимое идентично, но Discourse рассматривает его как новый файл».

Таким образом, популярное изображение или GIF-реакция распространяется по постам, репостам и личным сообщениям, и каждый контекст создаёт ещё одну копию файла. Файл, создавший 377 Гбайт избыточного размера бэкапа — это Рейчел из сериала «Друзья», танцующая свой танец радости. Эта GIF-анимация, по словам Discourse, «постоянно использовалась в постах, личных сообщениях, повсюду».

Первая попытка Discourse решить проблему перегрузки системы дубликатами заключалась в отслеживании оригинального контента по его хешу. Во время резервного копирования загрузки группировались по хешу, и загружался только первый файл в каждой группе. Для всех дубликатов создавались жёсткие ссылки.

Это казалось элегантным решением, пока компания не столкнулась с ограничением файловой системы ext4 на примерно 65 000 жёстких ссылок на один индексный дескриптор (inode). В результате, по словам Discourse, «вместо одной загрузки для всех 246 173 дубликатов мы получили одну загрузку плюс 181 000 резервных загрузок после достижения лимита».

Discourse всё же удалось найти решение. Оно начинается так же, как и старое, с создания жёстких ссылок. Но когда файловая система выдаёт сообщение об ошибке EMLINK («превышение лимита жёстких ссылок»), следующая копия файла становится «основной», пока снова не будет достигнут лимит. Эта новая мера, по словам Discourse, «работает на любой файловой системе, никакой настройки не требуется».

«Теперь мы знаем, что Дженнифер Энистон может проводить стресс-тестирование инфраструктуры», — с иронией прокомментировала ситуацию Discourse в своём блоге.


window-new
Soft
Hard
Тренды 🔥
ChatGPT научился прятать переписки от посторонних — чаты теперь можно закрыть PIN-кодом или Face ID 2 ч.
ИИ-агенты OpenAI дважды за октябрь обошли систему, которая должна контролировать их поведение 2 ч.
Dying Light: The Beast не получит новых крупных обновлений, потому что это «законченная» игра — фанаты хотят слишком много 2 ч.
«Яндекс» восстановил часть функций «Диска» и других сервисов «Яндекс 360» 3 ч.
Романы, обустройство замка, исследование океана: разработчики Crimson Desert показали, чем заняться в дополнении Charting the Unknown 3 ч.
Amazon и Google облегчили побег от Nvidia: запускать модели под PyTorch на ИИ-чипах Trainium и TPU стало проще 3 ч.
«Нам страшно продолжать работу над игрой»: приключение «Чёртова служба» про беса на службе у Петра Первого стало жертвой «обеспокоенных граждан» 4 ч.
Восемь TLS-сертификатов с примитивными ключами поставили под угрозу безопасность всего интернета 6 ч.
Динамичный шутер The Finals получил масштабное обновление Prime Time с улучшенной разрушаемостью и одиночным режимом 17 ч.
Утечка: блогер случайно «слил» главные подробности обновления 2.5 для Cyberpunk 2077 18 ч.
Anthropic отчиталась об убытках на $80,7 млрд — в шесть раз больше прошлогодних, но есть нюанс 48 мин.
Две буквы — и робот направил нож на человека: учёные показали опасность взлома ИИ 53 мин.
Не только ноутбуки и смартфоны: Минпромторг готовит техсбор на маршрутизаторы и другое телекомоборудование 60 мин.
Samsung и SK hynix собрались выпускать более современную NAND в Китае — без нарушения санкций США 2 ч.
Мегафабрика Terafab Илона Маска начнёт серийно выпускать чипы в 2028 году — но это не точно, признал сам Маск 3 ч.
Самый маленький в мире монитор активности мозга создали в Китае — он весит 1 грамм и работает без проводов 3 ч.
Marvell представила ретаймер и DSP-чип нового поколения для ИИ-кластеров 4 ч.
SpaceX и Tesla могут объединиться в компанию стоимостью $3,6 трлн — Маск не против 6 ч.
Выручка SpaceX в сфере ИИ выросла более чем в девять раз, а общая увеличилась на 161 % 7 ч.
Слухи: консоль Xbox Project Helix может стоить от $1200 до $1800 — и выйдет к концу 2028 года 14 ч.