Архивации тред

Выбираясь за пределы локализации по доскам из времени во время и следуя за намерением популяризации идеи/стремления/постулатов, провожу создание данного треда как пункта координации, общения и обмена отчётами касательно хобби "архивации" - сохранения исчезающего интернет-наследия и его дальнейшей передачи в сугубо археологических и частично "чистых" целях. Архивацией можно назвать проверку тысяч и десятков тысяч страниц различных вебсайтов с субъективным отсевом по закрепившимся в голове архивариуса признакам, с последующей загрузкой попадающего под критерии контента и будущим распространением в тех или иных кругах; участием в формировании интернет-библиотек и хранилищ данных, отсортированных по тематикам. Конечно, надеяться на то, что на этой доске(как и в видимых кругах Всемирной Сети в целом) есть хотя бы пара человек, уже занимающихся этим, не приходится, поэтому первичная причина поста, прочтение которого сейчас происходит - рекрутирование в тред всех, кто может решить связать свою жизнь с описываемой деятельностью. Если у вас до сих пор сохраняются сомнения по тому, что именно нужно делать, привожу характерные примеры из личного опыта.
По сей момент существует(пока что в стадии стазиса) проект "/sn/ archives" одноименной доски, с тредом о котором можно ознакомиться по следующей ссылке: https://2ch.hk/sn/res/282003.html. Первопричина - архивация хоть сколько-нибудь стоящей информации, связанной с т.н. "крипи-тематикой", где были уже в сырой манере приготовлены каталоги следующего списка: http://2ch.hk/sn/res/282003.html#296683
С публикацией данного обсуждения перерождается завядший проект "Unraveling", ставящий своей целью архивацию малоизвестных и исчезающих в никуда видеоигр, позиционирующихся(или выглядящих в чьих-то глазах) как качественный экспириенс/аудиовизуальный перформанс/искусство. Отчёты будут разглашаться постепенно.
Приветствуется обмен собственными проектами, если таковые у кого-то имеются. Если же нет - самое время сконтруировать!

>>255074 (OP)
Поспевающее исправление - первая из ссылок, что ведёт на /sn/, отказывается работать. Пожалуйста, проведите удаление точки из url, т.к. особенности функционала собирают её воедино.

>>255076
Тебе дали интернет-архивы, а ты снова выходишь на связь? Помню я один пак сохраненных архивов от анонимуса на 70 (!!!) гигабайт. И что я там нашёл? Биопроблемы, мемы, засмеялся-обосрался, гуро, ну и вообще тонны говнища. Какие тебе архивы интересные нужны?

Оружие, наркотики и всё нелегальное можно найти в Торе.

Единственную ценность могут представлять только какие-то книги или мистическое.

>>255081
О каких интернет-архивах идёт речь? web.archive.org? Они работают по функционалу пользовательского добавления. Опять же - о какого рода "интересных архивах" идёт речь? Тред посвящён не базам данных, а их созданию через многократную проверку громоздких ресурсов.

>>255087
>web.archive.org? Они работают по функционалу пользовательского добавления
Нет. У archive.org есть бот, который сам ходит по сайтам и добавляет в архив, что найдет.

>>255074 (OP)
>С публикацией данного обсуждения перерождается завядший проект "Unraveling", ставящий своей целью архивацию малоизвестных и исчезающих в никуда видеоигр
Такой проект уже существует, он называется myabandonware.com

>>255186
Совсем позабыл об этом. Однако там отсутствует возможность(в целях сохранения свободного места на жестких дисках) выгрузки файлов с ресурсов и сохранения всего, что блокируется robots.txt/прописано через noindex. Более того, по обращению правообладателя оттуда может быть удален любой материал.
>>255197
Слишком известные, сейчас гуглю, там у половины как минимум есть статьи на Википедии. Я говорю, например, о конкурсных работах с сервисов вроде "LudumDare".

Бамп

https://github.com/internetarchive/warcprox

Ставится как http прокси и пишет весь трафик в WARC. Теперь если что-то видел - оно у тебя сохранено

>>255081
Не дашь на него ссылку?