Генератор белых дорвеев WmsnDorgen

(Ответов: 13, Просмотров: 6043)
Страница 1 из 2 12 Последняя
  1. Дипломник
    • Регистрация: 14.04.2013
    • Сообщений: 201
    • Репутация: 49
    Дорген нового поколения с модульной структурой и легкой расширяемостью для создания белых дорвеев (серых сайтов) с «живым» контентом (автонаполнение, постепенное появление юзерских профилей, записей и ответов), которые ничем не будут похожи на привычные уродливые доры с генеренным нечитаемым текстом. Легкая расширяемость (добавления своих скриптов и парсеров контента) поможет легко создать уникальный дорвей, не похожий на те дорвеи, которые генерируют другие этим же доргеном. А удобный шаблон (требуется знание основ PHP) поможет сделать дорвей с неповторимой структурой, с «закосом» под живой форум, блог, статейник или даже интернет магазин. Нагрузка на сервер от доргена минимальна.






    Демо версии: пример с форумной структурой - punbb.ml, пример с блоговой структурой - blog.punbb.ml.

    Партнерка «Где слон?» одобряет дорген WmsnDorgen.


    Купить генератор дорвеев: купить за 20$ (обновления бесплатные)
    https://wmsn.biz/dorgen.php?page=5203

    Перед работой с доргеном - внимательно прочитайте всю эту инструкцию:

    Требования к хостингу: php 5.5 и выше, sqlite3, curl. Если что-то пойдет не так, в папке с доргеном может появиться лог ошибок в файле error_log.txt, там может быть ответ на произошедшую ошибку.

    Установка: Все файлы и скрипты сохранять в utf-8 кодировке. Настроить перед заливкой на сервер конфиг db/conf.php, список ключевиков db/keys.txt, список категорий db/categories.txt, залить на сервер, поставив права на запись на папки: avatars, cache, db. Первый заход на сайт сгенерит базу и 20 первоначальных пользователей. Далее поставить на крон парсер, добавив cron задание типа:

    */10 * * * * wget -U DorGen --spider --no-cache --no-parent http://дорвей/cron.php

    Установка завершена.

    Описание скриптов и структура доргена:
    Папка avatars - папка для хранения аватарок, имя папки можно изменить в конфиге и переименовать саму папку. При переустановке дорвея (удалении основной базы) - очищать от собранных аватарок.

    Папка cache - папка для кеша и временных файлов, при переустановке дорвея очищать от всех файлов, кроме index.html.

    Папка cms - скрипты ядра движка, все минималистично, трогать скрипты без надобности не надо, при обновлениях доргена на новые версии - перезаписывать старые версии новыми.

    Папка db - пользовательские данные, там будет создана база, туда загружать ключевики и категории.

    Папка parsers - скрипты парсеров.

    Папка templates - папки с шаблонами.

    Скрипты в корне: .htaccess, category.php, contact.php, cron.php, error.php, index.php, page.php, redirect.php, rss.php, sitemap.php, user.php - скрипты ядра движка, без надобности в них лазить не надо. При выходе новых версий - старые скрипты перезаписывать новыми.

    Файл db/categories.txt - список рубрик. Используется только один раз, при первоначальной загрузке данных в базу. Формат (максимально полный), через вертикальную черту: Человеческое название рубрики|url-category-na-latinitse|Человеческое описание рубрики. Можно также только: Название|urlcategory. Минимальный формат: просто построчно список рубрик на русском языке (или на любом другом, использующем кирилицу или латиницу), урл рубрики будет сгенерен из транслита названия. Для других непонятных языков, не поддающихся транслиту будет сгенерен урл в виде md5 хэша названия.

    Файл db/keys.txt - список ключевиков. Используется только один раз, при первоначальной загрузке данных в базу. Формат (максимально полный), через вертикальную черту: Ключевик|url-category-na-latinitse (ключевик и урл или название на русском категории в которую его размещать). Можно просто список ключевиков построчно, тогда по категориям ключевики будут раскиданы рандомно.

    Файл db/counter.txt - код счетчиков, инклудится в шаблонах. Поменять содержимое можно в любое время при жизне дорвея.

    Файл db/htmllines.txt - список строк для вставки в виде ответов, при использовании парсера answers_htmllines.php

    Файл db/tut.txt - список слов, используемых в парсере answers_tut_link.php.

    Парсеры из parsers: titles_*.php - при парсинге будет браться рандомно один из парсеров заглавий, если один парсер не получил результат - будет применен следующий парсер, если ни один из парсеров ничего не получил - заглавием будет первоначальный ключевик. contents_*.php - при парсинге будет браться рандомный парсер контента страницы, если один парсер не получил результат - будет применен следующий парсер, если ни один из парсеров ничего не получил - контентом будет первоначальный ключевик. answers_*.php - парсеры ответов (комментарии), применяются все имеющиеся парсеры по очереди, в базу записываются только успешные результаты парсинга ответов к странице. Почти в каждом парсере внутри есть дополнительные настройки. Потому рекомендуется просмотреть все скрипты парсеров и настроить их под себя.

    titles_bing_snip.php - получает заглавие для страницы из title тематического сайта из топа bing.com.

    titles_otvet_mail.php - получает тематическое заглавие из вопроса с сайта otvet.mail.ru

    contents_bing_snip.php - получает контент из снипета (дескрипшена) тематического сайта из топа bing.com, получается очень коротенькая запись.

    contents_otvet_mail.php - получает контент с сайта otvet.mail.ru, запись получается короткая, в 95% случаев в виде вопросительного предложения.

    contents_rich_content.php - контент получается по схеме - парсятся ссылки на тематические сайты из топа bing.com, потом парсер идет по ссылкам и ищет там абзацы (в теге p), получаются красивые большие куски (абзацы) читаемого текста. Парсер медленный.

    contents_youtube_image.php - контент в виде тематического скрина (.jpg) с видео из youtube.com + названия видео. Картинка размечена микроразметкой schema.org/ImageObject

    contents_youtube_video.php - контент в виде тематического видео и его названия с youtube.com

    answers_bing_image.php - коммент, в качестве ответа будет просто тематическая картинка из топа bing.com

    answers_bing_snip.php - парсер ответа из дескрипшена рандомного сайта из топа bing.com

    answers_htmllines.php - добавление в ответ рандомной строки из файла db/htmllines.txt

    answers_otvet_mail.php - краткий ответ из ответов otvet.mail.ru

    answers_rich_content.php - ответ получается по схеме - парсятся ссылки на тематические сайты из топа bing.com, потом парсер идет по ссылкам и ищет там абзацы (в теге p), получаются красивые большие куски (абзацы) читаемого текста. Парсер медленный.

    answers_slon.php - добавление в ответ рефссылок на товары партнерки "Где слон".

    answers_tut_link.php - добавление рандомного текста из файла db/tut.txt + ссылку на тдс через локальный редирект + цитирование стартового поста.

    answers_twitter.php - ответы из записей твиттера.

    answers_youtube_image.php - парсер ответа из youtube (картинка + название видео), картинка размечена микроразметкой schema.org/ImageObject.

    answers_youtube_video.php - парсер ответа из youtube (видео + название видео)

    users_vk.php - парсер профилей из вконтакта.

    Структура шаблонов: в папке templates папки с именами шаблонов, в папке с шаблоном собственно шаблоны: category.php (шаблон рубрики, в которой списки страниц), contact.php (контактная форма), error.php (страница ошибки, можно делать фейковой формой авторизации), index.php (главная страница сайта), page.php (страница отдельной записи), user.php (страница профиля юзера). Для редактирования или создания новых шаблонов нужно знать основы php.

    Прочие нюансы:

    RSS лента находится по адресу rss.xml, показывает последние 25 записей.

    XML карта сайта находится по адресу sitemap.xml, поставить на нее ссылку в robots.txt

    Форма обратной связи contact.html настоящая, с нее могут приходить письма, от спама норм защищена.

    Желательно делать не больше 50000 ключевиков на дор, если больше - sitemap.xml будет невалидным и тормозить.

    Скрипт в ближайшее время будет активно развиваться. Следите за обновлениями.











    https://wmsn.biz/dorgen.php?page=5203
    Последний раз редактировалось Megasonic; 07.08.2016 в 18:40.
    • 0
  2. Студент Аватар для Go$Ya
    • Регистрация: 20.11.2009
    • Сообщений: 68
    • Репутация: 14
    не забанят ли парсеры ip с котрого идет парсинг?
    на первый взгляд вид это тот же самый sed в юнном возрасте)?
    Последний раз редактировалось Go$Ya; 08.08.2016 в 13:47.
    • 0
  3. Sunshine reggae Аватар для OKyJIucT
    • Регистрация: 02.09.2011
    • Сообщений: 3,240
    • Репутация: 1830
    • Webmoney BL: ?
    Доры по определению не могут быть белыми) Но схема инетресная.
    • 1

    Спасибо сказали:

  4. Дипломник
    • Регистрация: 14.04.2013
    • Сообщений: 201
    • Репутация: 49
    Go$Ya, не понял кто кого должен забанить. Но доры работают замечательно.
    • 0
  5. Студент Аватар для Go$Ya
    • Регистрация: 20.11.2009
    • Сообщений: 68
    • Репутация: 14
    Megasonic,забанят источники тот ip сервера( дора) те откуда парситься контент за частые обращения.
    доры может работают замечательно но нафига на ру дорах из примеров выше тексты на иностранных языках?



    • 0
  6. work hard Аватар для zhurik
    • Регистрация: 20.11.2012
    • Сообщений: 1,697
    • Репутация: 1041
    • Webmoney BL: ?
    С дорами новичок, в программировании и всем таком не разбираюсь. Так... взял побаловаться, сделал дор. Получился затык с кроном, автоматические не хотели новые страницы создаваться. Техподдержка говорит такое:



    Удалил эти строки с htaccess, это норм? Или надо что то как то по другому сделать? Ну парсинг после этого заработал. Хостинг бегет если что )))
    Последний раз редактировалось zhurik; 10.08.2016 в 23:20.
    • 0
  7. Дипломник
    • Регистрация: 25.07.2015
    • Сообщений: 201
    • Репутация: 27
    С уникальностью есть некоторые проблемы, сколько дор живет в среднем?
    • 0
  8. Дипломник
    • Регистрация: 14.04.2013
    • Сообщений: 201
    • Репутация: 49
    Цитата Сообщение от kraskov Посмотреть сообщение
    С уникальностью есть некоторые проблемы, сколько дор живет в среднем?
    Доргену отроду неделя. Сам только пару дней как купил. Но предыдущий дорген автора (автодор) до сих пор все нахваливают.

    Внимание: 15-го числа повышение цены до 30$
    • 0
  9. Гуру
    • Регистрация: 22.04.2014
    • Сообщений: 984
    • Репутация: 131
    Видел такие доры в выдаче. Парсят контент с сайтов из топов и засирают выдачу поисковиков. Ничего нового, в общем, и оригинального.
    Конвертируй любой датинг и адалт трафф выгодно вместе с Imonetizeit
    • 0
  10. Дипломник
    • Регистрация: 14.04.2013
    • Сообщений: 201
    • Репутация: 49
    Цитата Сообщение от Lastwarrior Посмотреть сообщение
    Видел такие доры в выдаче. Парсят контент с сайтов из топов и засирают выдачу поисковиков. Ничего нового, в общем, и оригинального.
    Нового здесь то, что это кнопка Бабло . Форумные доры всегда нравились поисковикам.
    Здесь получается динамический дор, который ест мало ресурсов в отличие от других доров. Качество дора получается выше чем делать шаблоны под другие доргены, т.к. снаружи получается полноценный форум, а не его видимость. И делается все это из коробки: закинул ключи, категории и все! Он работает.
    Для тех кто хочет попробовать дорвеи прямо сейчас, но нет времени в них разбираться - вообще идеальный вариант.

    ---------- Сообщение добавлено 14:34 ---------- Предыдущее 14:03 ----------

    Цитата Сообщение от Go$Ya Посмотреть сообщение
    но нафига на ру дорах из примеров выше тексты на иностранных языках?
    Ответ автора:

    текущие парсеры допилил, чтоб там меньше маячило контента на не том языке, который хотелось бы, сделал парсеры бурж профилей юзера, парсер ответов Yahoo, добавил еще один крутой парсер красивого контента (для всех языков).
    • 0
Страница 1 из 2 12 Последняя

Похожие темы

Темы Раздел Ответов Последний пост
SEoDOR - генератор дорвеев/сайтов
Софт, скрипты, лицензии 45 07.05.2016 16:02
Генератор дорвеев
Дорвеи и black SEO 12 29.04.2016 13:34
Шаблоны под генератор дорвеев JakoDorgen Pro
Услуги по SEO 0 10.02.2012 21:27
DoorWay.Su генератор дорвеев
Дорвеи и black SEO 2 26.12.2010 20:00
Генератор дорвеев Динамит (Dinamitv)
Софт, скрипты, сервисы 4 29.09.2009 20:07

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры