Другое > Hard'n'Soft
как скачать фесь геймфакс?
(1/2) > >>
СуперПанк:
возможно ли загрузить какой нибудь прогой себе все доки из геймфаков? желательно с сохранением директорий (ну там по фаллауту например в одной папке, по сонику в другой) или скачать ВЕСЬ сайт чтобы гонять его в оффлайне. ну и как это делать собственно.
Sheb:
Телепортом попробуй.
СуперПанк:
пробовал. качает все подряд кроме того что надо.
Sheb:
СуперПанк
Попробуй выставить настройки, чтоб качались только сами факи (TXTшники)

+ У них хот-линк защита
++ Попробуй скачивать с адреса db.gamefaqs.com, а не просто gamefaqs.com
iddqd:
А сколько он весит, этот геймфакс?
R4kk00n:
Есть предположение, "... там ДО Х*Я, ещё и продать хватит" © abelenki (прошу прощения, если кого-то покоробило, но из песни, т.е. цитаты слова не выкинешь)
Я, вообще говоря, скачиваю оттуда иногда по паре факов к некоторым играм. Ручками из браузера сохраняю.
И у меня есть подозрение, что оффлайновым браузером (практически любым) оттуда сами тексты/карты скачать не получится: такие программы обычно следуют правилам, прописанным в robots.txt, а, судя по тому, что гуглом факи не индексируются, у GameFAQs доступ к ним роботам запрещён...
Neon:
Раньше, шоб не тыкать в каждую ссылку перекидывал линки на факи со страницы в флэшгет. Качало. Но прийдётся страницу к каждой игре открывать. А вот всё и сразу... ~_~
СуперПанк:
Sheb текстовые файлы тож пробовал искать, нифига не помогло. а что такое защита от хотлинка и как ее атаковать? с адреса этого попробовал - сказал что найден тока 1 файл, но он не текстовый.

R4kk00n ну пальчиками весь геймфакс качать =- пальчики сотруцца. до ушек.
Neon:
Вобсчем посмотрел и немного прояснил для себя ситуацию. Качать лучше всего по одной консоли. Если например хотим слить всё для PS2, то берём линк http://www.gamefaqs.com/console/ps2/index.html. В настройках качалки необходимо:
- поставить запрет на уход "вверх" от указанного линка;
- разрешить смотреть ссылки начинающиеся только на "http://dw.com.com", "http://db.gamefaqs.com" и собссно "http://www.gamefaqs.com/console/ps2/";
- включить передачу реферралов;
- установить тип сохраняемых файлов - *.txt (*.gif/*.jpg - если ещё нужны и карты);
- запустить закачку и запастись терпением ;)

Возможны вариации, но вроде так работает.
СуперПанк:
Neon, а теперь вопрос стоимостью 100 очков - КАКОЙ КАЧАЛКОЙ все ето надо делать, и где указывать эти настройки? а так звучит неплохо.
-v-:
ну судя по тому что Neon вроде как упоминал до этого reget, то им, хотя я могу и ошибаться :)
СуперПанк:
-v- ну ваще то не регет а флешгет, но всетки охота услышать комментарии аффтора поста. тьем более я в менеджерах закачек - кубоголовый, и настройки сам не вывставлю.
Neon:

--- Цитата: СуперПанк;97550 ---Neon, а теперь вопрос стоимостью 100 очков - КАКОЙ КАЧАЛКОЙ все ето надо делать, и где указывать эти настройки? а так звучит неплохо.
--- Конец цитаты ---


   Я пробовал на Teleport Ultra / Teleport Pro. Сначала запускаешь в нём "New Project Wizard", проставляешь "search website for files fo a certain type", ограничение на "уход вверх" и тип файлов. Потом в "Project" разделы "Project properties"/"Starting address properties" и проставляешь оставшееся. Только терпения и трафика нужно много.  


--- Цитата: -v-;97554 ---ну судя по тому что Neon вроде как упоминал до этого reget, то им, хотя я могу и ошибаться :)
--- Конец цитаты ---


   Я упоминал всё-таки FlashGet, ибо уже не один год им пользуюсь ;)
СуперПанк:
Neon а как ограничение на уход вверх ставить?
Neon:
Карроче, жмакаешь на "New project wizard":
step 1 of 4 - тыкаешь "search website for files fo a certain type"
step 2 of 4 - прописываешь адрес (тот же http://www.gamefaqs.com/console/ps2/index.html) и "0" в строке "up to ... links from starting point".
step 3 of 4 - "add" > "user defined" > *.txt в двух верхних полях. Если нужны ещё и карты, то так же *.gif/*.png/*.jpg.
step 4 of 4 - готово.
-
Дальше "Project" > "Project properties" > "File Retrieval" по вкусу снять retrieve embedded files/backgroud graphics
-
Дальше "Project" > "Starting address properties":
В поле "URLs matching these strings..." прописать вот это - "http://dw.com.com?; http://db.gamefaqs.com?; http://www.gamefaqs.com/console/ps2?;".
В поле выбора щёлкнуть на "URLs that begin with "http://www.gamefaqs.com/console/ps2/", в "explore pages no more than..." проставить например 50.
-
Усё, вроде так.
_stas:
Все это хорошо, только много качать придется. google выводит к-во страниц на сайте gamefaqs.com - 408 000 штук, и это только html, не считая самих txt и jpg, gif файлов.

Если предположить, что средняя html страница на gamefaq.com занимает 20 Кб. То чтоб скачать все страницы необходимо сжеч траффика на 8 Гб.

Это не учитывая txt файлы - что непосредственно нам и нужно.
lob:

--- Цитата: _stas;99207 ---Все это хорошо, только много качать придется. google выводит к-во страниц на сайте gamefaqs.com - 408 000 штук, и это только html, не считая самих txt и jpg, gif файлов.
Если предположить, что средняя html страница на gamefaq.com занимает 20 Кб. То чтоб скачать все страницы необходимо сжеч траффика на 8 Гб.
Это не учитывая txt файлы - что непосредственно нам и нужно.
--- Конец цитаты ---

До чего дошел прогресс! Раньше особо жадные считали чужие деньги, теперь они будут чужой трафик считать =)
Не забывай, в Канаде несколько другие цены и скорость, чем у нас в России и у вас на Украине.
Neon:
2lob: ;)))

2СуперПанк: ты уж сообщи о результатах такого масс-даунлоадинга ;)
iddqd:
Вот бы они оффлайн-версию сайта на дисках высылали на халяву...
Neon:
Мля, вот бы Абрамович деньги раздавал нахаляву...
Навигация
Главная страница сообщений
Следующая страница

Перейти к полной версии