>Можно как выкачать просто файлы одного треда, так и всю борду вынести.
Причем скрипт для выкачивания файлов треда на постоянке подтягивает новые изображения и вебм, не нужно перезапускать
Бамп
dvachuu adekvata
bump
Почему ты не выкачиваешь, анон?
Почему ты не выкачиваешь, анон?
NO more browsing FAP ФАП АФЗ AFG threads, everything on mah PC
Ну как хотитей, я пошел дальше выкачивать
Помимо двача , еще Архивач скачивает? .. а еще чо?
Я не знаю тот ли скрипт у анона что у меня. Но так или иначе можно поискать или нейронкой допилить, они нынче неплохи. Этот скрипт от diademoff только для двача.
хуле чорное окно? куда там мышкой жать?
Качаешь питхон, качаешь скрипты, запускаешь схрыпт thread_saver - сохранить все файлы треда и докачивать ноые. Кликаешь на скрипт, в окошке спросят букву борды, потом номер борды. Потом ждешб. и все.
Сколько в среднем гигов (терабайт 0__0?) Добавляется в день/неделю/месяц)?
Очищение лишнего проводишь или хоронишь вот прям все?
Если разок засейвить все ~200 тредов то это 20-30гб
Проходишься бегло, выцепляешь годноту, остальное удаляешь
А можешь такой же запилить для архивача, чтобы парсил треды потихоньку на предмет DELETED? хыы
Ндааа невероятно
Конченый долбаёб. Даже по меркам плюшкина
бамп реквесту
> искать по тредам годноту,
Какую годноту можно найти на современном сукаче? Высеры засмобоса? Одни и те же вебм, кочующие тыщу лет из треда в тред?
Если только лолиичек, но нужно быть лютым ретардом, чтобы их отсюда сохранять.
Ты чё, умный шоли?
Двачую эту анимеаватарку
бамп
>запилить
>init - diademoff committed on May 2, 2021
Ты хую рандомному пишешь, даун
похуй может кто рукастый сделает на основе имеющихся скриптов. вот например
https://github.com/ceoortfix/twst_arhivach
норма:
<div class="post" id="post111" postid="111">
потертый:
<div class="post post_deleted" id="post222" postid="222">
> Если только лолиичек, но нужно быть лютым ретардом, чтобы их отсюда сохранять.
почему? вроде с этой целью двач и строился
лучше бы на мой вопросик ответил ня <3
а ты думаешь зачем я хочу парсер по удаленным постам лул
дык а что тебе мешает их отсюда схоронять, а коли не успел то с архивача же
не на всех тредах стоят тематические теги увы
предлагаешь выкачивать и нейроночкой перебирать хех? не слишком ли сложно? если хочешь что-то конкретное найти в интеренетах - достаточно прийти в специальновыделенное под это дело место и вежливо попросить
ии не нужен
многопоточный парсер всех тредов /b/ начиная с 2024 или когда там у архивача отвалилась старая база данных
отсеивать те в которых есть post_deleted, "мочератор цопе", "сейчас тред снесут" в разных вариациях и тд, простор для фантазии есть
можно еще проверку по мд5 реализовать чтобы дополнительно залупу-лупу и прочее говно отсеить
ну и дальше вручную перебрать и все хорошее сохранить, это не так долго будет, может пара тысяч тредов
с минимальными навыками кодомакаки это реализуемо
признаюсь тоже о таком подумывал. заместо md5 юзать менее агрессивные алгоритмы типа т.н. "Perceptual hashing" для дедупликации, искать по ключевым + иишить для лучшего результа. но все равно выкачаются тысячи файлов, которые кому-то придется перебирать ручками.
так или иначе я все еще считаю, что вряд ли получиться спарсить что-то действительно интересное/уникальное (не цп одним едины же), поэтому лениво это делать так-то!
Петухонщик хуже пидора.
> подписался на тред
ну вообще автор архивача конч что не реализовал до сих пор учитывая популярность сайта поиск нормальный а только переадресацию в яндекс потому что на аналогах для форчана все давно сделано включая поиск по хешу файла, хз может он соизволит хотя бы текстовый дамп скинуть чтобы инвалидв типа меня на локалке могли поднять поиск, но он даже не ответил на письмо
> автор архивача
абу шоли?
подозреваю что ему есть что прятать, а без поиска это будет сложнее найти
Ты бы открыл, ради приличия, шизоархиваторский тред. Почитал бы, подумол.
>Парсю двачик целый день
>Беззаботно парсю
>Смехуечки, фап контент
>День мой стал прекрасен
>
>Тред умрет, моча потрет
>Тут никто не властен
>Ничего не пропущу
>Каждый день двач парсю
Зачем ты это делаешь, бесталанное говно? Просто нахуя?
Два чаю
Мне дипсик наваял парсер по промту, добавил че сказал убрал чё ненадо. Ноль навыков програмирования.
Сложна слажна, консолька пердолька.
Иди учи дизайн, хотя бы по книжке лебедева чтобы такую хуйню сырую больше никогда не выкладывал.
Я нигде не писал что это мое поделие. Нашел в гугле
Нахуя нужен GUI если управления почти никакого нет, додс? Там буквально нужно запустить нужный скрипт двойным кликом. Зумеры пиздец дегенераты
> парсю
Долбоёб узнал новое слово и теперь использует его везде, по делу и без.
Беззаботно парсю
Смехуечки, фап контент
День мой стал прекрасен
Тред умрет, моча потрет
Тут никто не властен
Ничего не пропущу
Каждый день двач парсю
Плюсы:
-Заебись когда вообще не хочешь ходить, искать по тредам годноту, а все сразу у тебя сохранено.
-Можно как выкачать просто файлы одного треда, так и всю борду вынести.
Минусы:
-Выкачивать всю борду оче долго и занимает какое-то место на диске. Можно фоном просто гонять
-нужно фиксить скрипт парсинга всей борды, он сыплется на дубликатах файлов и крашится. Запихнул в бесплатный Cursor и сказал помочь, за 5 минут все нашел и починил, теперь не вылетает.