10 000 000 000 000 000 байтов заархивировано

25 октября активисты и сотрудники Internet Archive провёл торжественную церемонию по поводу знаменательного события: архив интернета перевалил за 10 петабайт (10¹⁶ байт). Благодаря этому архиву с Машиной времени мы можем посмотреть, как выглядели знаменитые сайты много лет назад, найти сохранённые копии веб-страниц или восстановить сайт из «бесплатного бэкапа».

К сожалению, праздник был немного омрачён отключением электричества.

Ещё один интересный факт: Internet Archive объявил, что впервые всё литературное достояние целого народа полностью оцифровано и выложено в интернете. Этим народом стали балийцы, народ древней высокой культуры с острова Бали.

Вдобавок к этому, объявлено о раздаче 80-терабайтных образцов выборки за 2011 год всем желающим для исследований. Файлы в формате WARC содержат около 2,7 млрд URIs. Они включают в себя весь текстовый контент и всё остальное, что удалось сохранить, в том числе изображения, видео, флэш и т.д.

Выборка:
Дата начала: 09 марта 2011
Дата окончания: 23 декабря 2011
Количество уникальных URL: 2 273 840 159
Количество хостов: 29 032 069

Паук Heritrix сначала скачал 1 миллион самых популярных сайтов по версии Alexa (Хабр там уже был), а потом пошёл по ссылкам.

Праздничные торжества Internet Archive почтил своим присутствием легендарный учёный и идеолог программирования Дональд Кнут. Он сыграл на органе, открыв церемонию.