Заархивировать интернет, чтобы помочь студентам, журналистам и исследователям: зачем создавался сервис Wayback Machine
В 1996 году программист Брюстер Кейл придумал сервис, чтобы сохранять веб-страницы. Он не принёс ни цента, но хранит в себе около 700 млрд сайтов, книг, игр и фильмов. Откуда идея и с какими проблемами Кейл столкнулся — в пересказе 2727 показов9.7K9.7K открытий22 репоста
Одна из первых идей при создании https://structura.app/ у нас была как раз связана с веб архивом
Во что превратилось можете посмотреть :)
Краулер в итоге ушел в развитии в другую сторону. Содержать тонну террабайт мы можем себе пока позволить :)