| Другое > Hard'n'Soft |
| Как ограббить сайт? |
| << < (2/2) |
| sonygod:
Skay, Вот и хрен в том что на трекерах нет пака этого сайта. А вот видео где они хранят это бы выяснить надо. Ладно тема все таки не об этом. Это я так просто между делом. |
| [pO$]t@L:
--- Цитата: lost_hero от 03 Апрель 2014, 12:11:34 --- Это если ссылки есть. А если тупо картинки в полный рост на странице? А если страниц 500000? На каждой руками кликать? ) Вот сразу видно кучу народа, которая за сутки целый платный порносайт со всеми его многолетними апдейтами и защитами подчистую не вычищала ) --- Конец цитаты --- Не понял что ты имел ввиду про "порносайты" и "картинки в полный рост", если понадобиться , то руками пощелкает. В случае если страниц много, пойдет HTTrack - " свободный кроссплатформенный оффлайн-браузер. Позволяет загружать веб-сайты из Интернета на локальный компьютер." Сайт программы |
| cptPauer:
--- Цитата ---А как можно определить где находится видео на сайте платника? --- Конец цитаты --- Flashgot+DownThemAll большинство потокового медиа выловит, с большой долей вероятности. Если нет, то багзиллой смотреть вручную, да. Помню, флешку пытался выцепить себе автономно, вытащил таки с трудом. https://dl.dropboxusercontent.com/u/41545394/games/super-mario-crossover.swf Крутая игра, рекомендую. А вот обновленную версию уже не смог. Правда, старая получше, как имхо. |
| ToledO:
http://www.gamefaqs.com |
| Partsigah:
--- Цитата: cptPauer ---Пользовался когда-то Teleport Pro. --- Конец цитаты --- Определённо, я использовал портативную версию, когда выкачивал муз. дампы с ПК-98. Но всё с подряд со страницы не рипнешь, например, музыка с бэндкэмп. |
| cptPauer:
--- Цитата ---http://www.gamefaqs.com --- Конец цитаты --- Его граббишь что-ли? o_0 |
| ToledO:
Ага |
| s1nka:
ToledO, --- Код: ---wget -r -x -c -A gif,png,jpg,jpeg http://www.gamefaqs.com --- Конец кода --- Еще заметил фишку. Основной сайт в .com, а картинки лежат на .net. Подозреваю, поэтому многие качалки сайтов отваливаются. В общем погляжу, если не лень будет, то можно будет легко написать bash/cmd скрипт, которые обложки выкачивает. |
| gotten:
можно ли как то скачать весь форум,именно темы в txt или html,только чтобы темы были полностью в одном файле?т.е. чтобы не была тема разбита на много страниц.вот например,http://forum.zoologist.ru там функции сохранить в txt тему,нет :( вручную долго..да еще и по страничкам.наш форум еще и gbx.ru,эти нужны,чтобы потом на телефоне или psp читать. |
| SILENT_Pavel:
--- Цитата: gotten от 30 Июнь 2014, 14:51:26 ---можно ли как то скачать весь форум,именно темы в txt или html,только чтобы темы были полностью в одном файле? --- Конец цитаты --- нет, это точно невозможно. сама структура любого форума подразумевает многостраничность и с этим ничего без ручного рутинного вмешательства не поделать |
| cptPauer:
--- Цитата ---можно ли как то скачать весь форум,именно темы в txt или html,только чтобы темы были полностью в одном файле?т.е. чтобы не была тема разбита на много страниц.вот например,htt ://for m.zoologist.ru --- Конец цитаты --- Нельзя. Паук-граббер сохраняет каждую страницу в HTML, переходит по каждой ссылке (вложенность задается, на какую глубину переходит) и сохраняет страницы. И так, пока не сохранит весь форум. Получится тысячи страниц. Ссылок на странице куча, не получится натравить только на конкретную тему. Но, можешь попробовать. Вряд ли PSP потащит такое кол-во страниц. Вообще, наверное реально, если сам напишешь граббер под конкретный форум. |
| gotten:
понятно,спасибо.ну тогда точно не подойдет,при очень большом количестве даже компьютер может подтормаживать,а psp вообще загнется <_< вспоминаю как тормозила в ромах nes пока не рассортировал по папкам. |
| gepar:
Чисто теоретически ничего не мешает дёргать только контент и добавлять его к предыдущему, структура же страниц одинаковая, на первый взгляд достаточно дёргать классы windowbg и windowbg2 и лепить их пока все не закончаться ну и дело в шляпе. Я всё хотел как-нибудь попробовать попарсить какой-то сайт для тренировки, могу попробовать на эму ленде как-нибудь на этой неделе :) |
| gotten:
gepar, если бы я еще понимал о чем ты :D я в этих качалках с трудом разбираюсь. |
| Навигация |
| Главная страница сообщений |
| Предыдущая страница |