Предлагаю написать граббер, который будет искать все треды на досках ычана/доброчана и скачивать из них пикчи, гифки, вебмки в одну папку. Сколько годного арта и прочих интересностей по чем зря пропадает.
Ну, это не так уж и сложно сделать.
>>13129 Кот бы взялся только.
>>13134 Я тут нашел для форчана, вот такую бы сделать под наши борды. А то на форче один мусор, а не пикчи. http://sourceforge.net/projects/ychan/
а как ты будешь няшек от говняшек отличать?
>>13136 Никак, просто соберу всё в один большой черный мешок, а потом буду вылавливать алмазы из говна.
>Сколько годного арта и прочих интересностей по чем зря пропадает ~0
Место быстро забивается, я гарантирую это.
Ну что, кто-нибудь пишет?
>>13156 choose your destiny: а) да б) нет в) наверное г) ни в коем случае
>>13156 wget -mk -w 20 http://site.name.here/
>>13156 да, я пишет.
>>13163 Ну и что же ты пишет?
>>13167 штуку, которая как в ОП-посте. Заодно потыкиваю Electron (в девичестве atom-shell), давно собирался его потыкать, да все незачем было. Как только это можно станет запустить и не умереть тотчас же от крови из глаз — покажу.
>>13175 へえー. Посмотрел, что такое этот atom-shell, так значит ты на node.js делаешь? Ну, в принципе, ничего, там и парсер легко подключить. С гуем будет шоль? Но всем этим atom-shell и nw.js ОЧЕНЬ не хватает режима, как в py2exe — чтобы собирался только консольный exe-шник.
>>13183 с гуем, да. wget без гуя уже написали ведь. Консольный экзешник в Электроне можно собрать, кстати. Т.е. он не будет инхерентно консольный, просто собирай экзешник и не открывай никаких окон. console.log пишет в stdout. Also, prorgress updaet: у меня приключилась жизнь, поэтому ничего не делал, поделаю сегодня. Файлы скачивает, в дедупликацию пока не может, ссылки искать может (но не ищет).
>>13191 Как успехи?
>>13191 Пинг.
Нафиг так жить.
Ну я то сделал. теперь сижу думаю зачем? стендалон решение никому не нужно.
>>13295 Слыышь! Давай выкладывай. Не нужно никому как раз лишняя Облачность и чужие сервера.
>>13297 скоро выложу. Отладку на Б делаю, а там 18к картинок. так что у меня это занимает некоторое время. надеюсь установку модулей из CPAN ты осилишь
>>13300 Осилю, если какие-ниюудь особые версии не надо ставить, а всё по-дефолту. Так ты другой человек, что ли, не >>13191? Фуму.
>>13301 Нет, я другой человек. готово можно тестировать\использовать: http://pastebin.com/aJbTK8ph модули которые нужно ставить: LWP, Getopt К счастью, большая часть логики лежит на самой вакабе, поэтому на проверку дуплей можно забить, просто проверяя имя сохраненного файла. Как оказалась это архитектурное решение лучше всего подходит. Должно работать на других досках ичана. есть Еррор-лог(который на самом деле просто лог-файл) Там можно проверить чо он не осилил открыть, и сколько он итого скачал файликов. Рекомендую не менять время между запросами, чтобы не словить бан, так как лишняя нагрузка. на Б будет отрабатывать в перый раз более 5 часов, так как 18к файлов, и около 4 гигов. в следующие разы быстрее, так как он не будет скачивать то что он уже скачал. Но так как там 60 тредов, то это как минимум 20 минут. Можно запускать по крону, говоря ему имя доски. Должно работать на других досках кроме б, но я не проверял. каждую доску он складывает в свою папку, которую создает. Пожелалки можно писать в тред.
>>13302 Поправь описание, куча ошибок.
>>13303 Ну я плохо пишу на Ангельском. Т_Т
анон, ну как результаты? норм все, ченить еще пилить надо?
>>13377 А я ещё не запускал, лол.
- wahaba + wakaba 3.0.9 + futaba + futallaby -