Мы в твиттере Наша страничка на FaceBook! Сообщество вебмастеров в VK Мы в телеграме!

Граббер DLE сайтов

Данный материал предоставлен сайтом ProWebber.ru исключительно в ознакомительных целях. Администрация не несет ответственности за его содержимое.
Скачать бесплатно Граббер DLE сайтов.

Граббер DLE сайтов

Просто граббер, только с DLE и только на DLE. Его отличительной особенностью является то, что он, в отличии от других грабберов, не использует регулярных выражений для парсинга, а вместо этого используется DOMDocument (класс, встроенный в PHP, который парсит документ как XML). Это нужно для тех сайтов-доноров, на которые новости добавляются через WYSIWYG редактор.

Это, можно сказать, минималистичный граббер, который позволяет за один раз грабить хоть сто, хоть двести, сколько угодно страниц с сайта-донора. Так-же он может скачивать картинки на ваш сайт и накладывать на них водяной знак (watermark).

Автор: nikita2206


Небольшой FAQ:
Скачайте сам архив по ссылкам ниже.
Создайте папку в корне сайта с любым именем(напр. "grabber", но лучше какое-нибудь такое имя, чтоб простой прохожий не набрал в браузере адрес типа http://ваш-сайт/grabber/index.php и не награбил вам чего-попало:), т.к. защита паролем здесь отсутствует).
Все, теперь можете зайти в граббер по адресу http://ваш-сайт/имя-папки/index.php (index.php - должен быть обязательно!).
Когда вы запустите грабинг, то сможете нажать на статусную надпись( например "Сейчас грузится" ), чтобы увидеть более подробно - какая страница в данный момент грузится и какая загрузилась с ошибкой( да и такое бывает :))... По окончании грабинга внизу, под этими страницами, вы увидите картинку с двумя круглыми стрелками, нажмите на нее если какие-то страницы загрузились с ошибкой, тогда граббер попытается загрузить их снова.
В граббере вы, я думаю разберетесь, там все очень просто.

От себя (автора данной публикации на PW) скажу, что сам попробывал его в работе. Скрин работы Вы можете увидеть ниже:
Граббер DLE сайтов


Тестировал модуль на локалке (Denwer). Ждал от силы пару минут - граббер ничего так и не награбил (вспомните платные грабберы). Дальше, уменьшил кол-во страниц с 1 до 2, подождал минут 5 - результата никакого:
Граббер DLE сайтов


Далее, я решил, что нужно все-таки наделать скринов об успешной работе модуля и подождал еще 10 минут (PW, прости biggrin ):
Граббер DLE сайтов


Как это выглядело на сайте:

Граббер DLE сайтов


Почему нету картинок? Я думаю, что, это из-за того, что в .htaccess PW прописан "Антилич" для картинок. Если нет, тогда проблема в граббере.





Если Вы выберите, чтобы картинки не загружало, то граббинг будет длится до 5 минут (в зависимости от кол-ва страниц)


Другая информация:

Важно: для корректной работы граббера требуется расширение для PHP - mb_string.
Если mb_string не подключен, то граббер вам сообщит об этом (по вопросам подключения данного расширения обращайтесь в поддержку Вашего хостинга).

Буду рад спасибкам и репе ok


Внимание! У вас нет прав для просмотра скрытого текста. Пройдите регистрацию.




Дополнительные ссылки на скачивание ТОЛЬКО для зарегистрированных


+1


Просмотры: 28636 :: Комментарии (42) :: :: Нужна помощь? Задайте вопрос на форуме ::
Теги: DLE граббер
Уважаемый посетитель, Вы зашли на сайт как незарегистрированный пользователь.
Мы рекомендуем Вам зарегистрироваться либо войти на сайт под своим именем.

#1UnderFire

  • 14 марта 2010 10:47
  • Регистрация: 25.01.2010
  • ICQ: --
  • Комментариев: 32
Если б синонимайзер к нему ещё был, цены б ему не было) biggrin

0

#2chak

  • 14 марта 2010 11:41
  • Регистрация: 3.01.2010
  • ICQ: 8528342
  • Комментариев: 446
  • Выкл.
UnderFire,
Можно прикрутить. По всем вопросам в личку. Есть 10-и мегабайтная база ok

0

#3UnderFire

  • 14 марта 2010 12:15
  • Регистрация: 25.01.2010
  • ICQ: --
  • Комментариев: 32
chak, думаю все поддержат идею с синонимайзером. В ЛС не могу написать, так как пишет про

0

#4BR0kEN

  • 14 марта 2010 13:16
  • Регистрация: 29.11.2009
  • ICQ: --
  • Комментариев: 255
UnderFire, ахахахаха, очисти ящик! dash

--------------------

0

#5Weber

  • 14 марта 2010 13:48
  • Регистрация: 5.01.2010
  • ICQ: 621014093
  • Комментариев: 15
Так грабер рабочий или нет ?

0

#6chak

  • 14 марта 2010 15:02
  • Регистрация: 3.01.2010
  • ICQ: 8528342
  • Комментариев: 446
  • Выкл.
Weber,
Да, полностью рабочий! Скриншоты, как ты мог видеть, делал я сам. Весь процесс и т.п. есть, читай внимательно новость:)

kep,
Это мне надо почистить biggrin

UnderFire,
Сейчас почищу ящик, напиши мне ok


0

#7jonson

  • 14 марта 2010 15:16
  • Регистрация: 12.03.2010
  • ICQ: --
  • Комментариев: 2
Грабер рабочий. Тестировал на 8.5 snore

0

#8ameba

  • 14 марта 2010 16:14
  • Регистрация: 14.03.2010
  • ICQ: --
  • Комментариев: 1
Та же фигня. В админке новости есть, а на сайте их нет.

А опубликовать новости не пробовал?

0

#9chak

  • 14 марта 2010 16:36
  • Регистрация: 3.01.2010
  • ICQ: 8528342
  • Комментариев: 446
  • Выкл.
Wells,
быть этого не может! Я на 8.5 тоже тестировал, только на локалке - все отлично работало! В принципе, Вы смотрели скрины, и на сайте как выглядит новость в т.ч. тоже скрин есть. Сейчас попробую на хостинге попробывать. Отпишусь.

0

#10James026

  • 14 марта 2010 18:05
  • Регистрация: 23.12.2009
  • ICQ: --
  • Комментариев: 49
хм,ну что сказать,простой удобный грабер)
всегда пригодиться)

0

#11barkan

  • 5 апреля 2010 14:26
  • Регистрация: 5.04.2010
  • ICQ: --
  • Комментариев: 1
тестил на локалке, не кажет...
скринов в статье нет, удалили наверно... а жаль.
mb_string не подключен, на локалке...ее вообще на локалке возможно включить? если да то как?

Пробовал грабить другими грабберами, в админки пишется "Всего новостей огого скока" а на сайте не опубликовываются, хотя в админки и опубликовывал и чо только не делал.(проблема как и в предыдущих постах)

0

#12trainracing

  • 7 апреля 2010 10:46
  • Регистрация: 26.12.2009
  • ICQ: --
  • Комментариев: 4
Все работает на дле 8.3 тока картинки не показывает

0

#13MaxiMoruM

  • 10 апреля 2010 12:14
  • Регистрация: 1.11.2009
  • ICQ: --
  • Комментариев: 14
На Дле 7,5 работает ШИКАРНО!!!!!!!!!! в самом грабере не пишет что новости добавились, а на главной странице красуется куча новых новостей!!!!

0

#14DJHITMAN

  • 10 апреля 2010 16:31
  • Регистрация: 16.01.2010
  • ICQ: --
  • Комментариев: 24
мне не понравился скрипт

--------------------

0

#15kalika

  • 10 апреля 2010 19:27
  • Регистрация: 13.12.2009
  • ICQ: --
  • Комментариев: 3
поставил на 8.5 все пашет и картинки встают, только вот сортировать потом чуствую замонаться можно

0

#16Nikolas_Sharp

  • 11 апреля 2010 14:03
  • Регистрация: 11.04.2010
  • ICQ: --
  • Комментариев: 20
Хмммм. Я качал сразу же граббер с парсером не помню с какого сайта. Правда база там на 6Мбайт.

0

#17Callen

  • 11 апреля 2010 19:52
  • Регистрация: 10.04.2010
  • ICQ: --
  • Комментариев: 21
гыгы спасибо за очень полезный скрипт

0

#18czart

  • 13 апреля 2010 03:50
  • Регистрация: 5.02.2010
  • ICQ: --
  • Комментариев: 135
Граббер отличный забил им базу аж на 270 метров

короче получилось 39978 новостей и все с картинками и все нормально. Двигло у меня 8.3 и на другом сайте 8.5 cool

--------------------

0

#19ms500

  • 15 апреля 2010 21:13
  • Регистрация: 15.04.2010
  • ICQ: --
  • Комментариев: 9
А с 8.0 он будет работать, кто ставил подскажите Заранее СПС

0

#20FaNt1000

  • 17 апреля 2010 13:42
  • Регистрация: 17.04.2010
  • ICQ: --
  • Комментариев: 6
Граббер просто супер good автору спасибо clapping

--------------------

0
1 2 3
Предыдущая    Следующая
Информация
Посетители, находящиеся в группе Гости, не могут оставлять комментарии в данной новости.

https://mirdomen.ru/ - домен .ru и .рф 149 рублей в год.

https://t.me/web_verstak Web Верстак - IT юмор, фейлы, приколы в телеграме

NULLFORUM.RU - ВСЕ ЛУЧШЕЕ ДЛЯ WEB-МАСТЕРА

Inside-Center.ru - СКРИПТЫ, ПЛАГИНЫ, ИНФОКУРСЫ.

RentShop.Su - Дешевая аренда онлайн магазинов, новым пользователям при выборе оплаты WMR (платить ничего не нужно) магазин на полгода абсолютно бесплатно

Наши баннеры
Скрипты, cms, шаблоны, статьи по раскрутке

Опросы

Нужна ли категория "Интернет магазины"?

Да
Нет

Архив новостей
Апрель 2020 (121)
Март 2020 (651)
Февраль 2020 (377)
Январь 2020 (394)
Декабрь 2019 (346)
Ноябрь 2019 (352)

Последние комментарии:

Искать людей

Ваши переписки