Скрипт автоматического создания новостных сайтов., Постоянный парсинг с разных источников

(Ответов: 34, Просмотров: 6108)
Страница 2 из 4 Первая 1234 Последняя
  1. Студент Аватар для devuser
    • Регистрация: 05.12.2012
    • Сообщений: 50
    • Репутация: 7
    Здравствуйте, друзья.

    Очередное обновление скрипта.

    Немного снижена нагрузка на БД.
    Добавлены три новых донора:

    tata.ru – женский онлайн журнал
    ua.championat.com – спортивный портал. Огромный донор с массой спортивных событий.
    lady.tochka.net – женский портал. Огромное количество статей по женской тематике.

    И, самое главное.
    По просьбам некоторых покупателей добавлен перевод новостей.
    Этот функционал дает возможность парсить зарубежных доноров и переводить контент на язык вашего сайта.

    Тексты получаются немного корявыми, но читаемыми. Уникальность 95%+. Такой себе аналог синонимайзера.

    С примером можно ознакомиться тут - http://d1.news-more.ru/guardian . Это парсер сайта http://www.guardian.co.uk/

    При переводе используется Яндекс.Перевод. Ограничение – до 1 000 000 символов в сутки.
    Доступные направления перевода:
    С английского на русский
    С украинского на русский
    С польского на русский
    С немецкого на русский
    С турецкого на русский
    С русского на английский
    С русского на украинский
    С русского на польский
    С русского на немецкий
    С русского на турецкий

    Покупатели получат обновление в течение суток.

    Всем удачного дня.
    • 0
  2. Студент Аватар для devuser
    • Регистрация: 05.12.2012
    • Сообщений: 50
    • Репутация: 7
    Только сегодня уникальное предложение для новых клиентов: при покупке парсера вы можете заказать инструкции для двух своих доноров абсолютно бесплатно.

    Алгоритм следующий:
    Сообщаете доноров, которых вы хотите видеть у себя
    Мы анализируем и сообщаем о возможности написания инструкций для них (некоторые доноры проще забыть, чем парсить)
    Оплачиваете и получаете парсер
    В течение двух-трех рабочих дней получаете инструкции для выбранных вами доноров.

    Инструкции создаются только для вас, в паблик не уходят.

    ICQ 39-30-57-09
    Отзывы с соседних форумов - по запросу. Не уверен, что тут можно оставлять ссылки.

    Удачного дня.
    • 0
  3. Гуру Аватар для efr07
    • Регистрация: 19.01.2011
    • Сообщений: 722
    • Репутация: 85
    • Webmoney BL: ?
    С примером можно ознакомиться тут - http://d1.news-more.ru/guardian
    Так чего там только 1 страница в индексе и то гугла ?
    • 0
  4. Студент Аватар для devuser
    • Регистрация: 05.12.2012
    • Сообщений: 50
    • Репутация: 7
    Так чего там только 1 страница в индексе и то гугла ?
    Потому что в первом сообщении темы
    Внимание. Сайты закрыты от индексации намеренно.
    Я не уверен в нормальной индексации поддоменов, не хочу, чтоб они выполняли роль показателей, поэтому и закрыл.

    Скрины сапы есть в первом посте. Туда без индексации не принимают.
    Примеры сайтов в индексе по запросу.
    • 0
  5. Дипломник Аватар для zaharchenko007
    • Регистрация: 23.09.2012
    • Сообщений: 139
    • Репутация: 37
    • Webmoney BL: ?
    К DLE не планируете привязывать?
    Топчу лавешку здесь VK Bet
    • 0
  6. Студент Аватар для devuser
    • Регистрация: 05.12.2012
    • Сообщений: 50
    • Репутация: 7
    Цитата Сообщение от zaharchenko007 Посмотреть сообщение
    К DLE не планируете привязывать?
    Планируем, но без сроков.
    Алгоритм обмена расскажу, если кому нужно. Сможете сами писать драйвера под разные CMS.
    С нашей стороны алгоритм предельно простой.
    • 0
  7. Дипломник Аватар для zaharchenko007
    • Регистрация: 23.09.2012
    • Сообщений: 139
    • Репутация: 37
    • Webmoney BL: ?
    devuser, я в PHP 0 +- 1%)))) потяну ли?)
    Топчу лавешку здесь VK Bet
    • 0
  8. Студент Аватар для devuser
    • Регистрация: 05.12.2012
    • Сообщений: 50
    • Репутация: 7
    Цитата Сообщение от zaharchenko007 Посмотреть сообщение
    я в PHP 0 +- 1%)))) потяну ли?)
    Нет.
    Вы должны уметь создавать запись (новость, статью) в вашей CMS с помощью PHP-скрипта.
    Вы должны уметь получать список категорий новостей с помощью PHP-скрипта.

    То есть, без знаний данные вы получите, но обработать не сможете.
    • 0
  9. Студент Аватар для devuser
    • Регистрация: 05.12.2012
    • Сообщений: 50
    • Репутация: 7
    Осталось четыре свободные копии.
    Стоимость скрипта неизменна и составляет 6000 рублей.
    Если вы планируете покупку, самое время сделать это сейчас.
    Количество свободных копий может увеличиться, если забронировавшие снимут бронь или она станет просроченной.

    Также объявляется акция.
    Напиши драйвер (модуль импорта) для CMS Joomla или DLE и получи скидку 1000 рублей на покупку скрипта.

    Если вы хотите принять участие в акции, процедура следующая:
    Стучите в ICQ, если что-то непонятно я объясняю механизм работы (описан в конце поста под спойлером), подключаю ваш сайт на Joomla или DLE к парсеру и передаю вам данные.
    Как только вы сможете успешно их принять и добавить на сайт, сообщаете мне, я проверяю, и, если все хорошо, драйвер считается готовым. Оплачиваете 5000 рублей, передаете мне драйвер, я передаю вам парсер.

    Драйвер, написанный вами, по условиям акции свободно распространяется всем клиентами.
    Готовы рассмотреть и другие популярные CMS.

    Механизм обмена под спойлером.

    Развернуть текст


    Парсер обращается по адресу http://ВашСайт/parser.php и передает данные методом POST.
    Если использование отдельного php-файла не целесообразно в выбранной вами CMS, этот адрес можно свободно изменить. Обсуждаемо.

    Ответ вашего драйвера должен быть сериализованным массивом вида:
    PHP код:
    $result = array(
        
    'status' => 'success',
        
    'message' => $SomeVarOrArray
    ); 
    Каждый раз передается переменная api_key и, если в вашем скрипте, ее значение отличается от того, что вы получили, вы завершаете работу с ошибкой (об этом ниже).

    Также, каждый раз парсер передает переменную action – это команда для вашего драйвера, что нужно вернуть.

    Вернуть список категорий
    Если action=category – вы должны получить список категорий сайта и вернуть мне этот список массивом (ID категории у вас на сайте и имя категории у вас на сайте), в переменной $result['message'];

    То есть, в результате успешной работы драйвера, ваш ответ должен быть вида
    PHP код:
    $result = array(
        
    'status' => 'success',
        
    'message' => array(
            array(
    'id' => 1'title' => 'Категория 1'),
            array(
    'id' => 2'title' => 'Категория 2')
        )
    );
    echo 
    serialize($result); 
    Принять материал и добавить его на сайт
    Если action=item - вы должны принять данные о материале и добавить материал к себе на сайт.

    В этом случае, также передаются следующие переменные:
    category_id - ID категории, в которую должен попасть материал. Этот ID вы ранее передавали парсеру ( см. выше ).
    title - заголовок материала
    image - ссылка на картинку к материалу
    text - текст материала
    source - ссылка на новость-оригинал

    То есть вам необходимо скачать картинку с удаленного сервера (адрес картинки находится в переменной image), проверить ее на корректность (чтоб там не шелл или что еще) и создать материал в указанной категории, с полученной картинкой.
    Ссылку на оригинал можно проигнорировать, а можно и вставить в какое-то дополнительное поле.

    Если все хорошо, вы возвращаете следующее
    PHP код:
    $result = array(
        
    'status' => 'success',
        
    'message' => ''
    );
    echo 
    serialize($result); 
    При завершении работы с ошибкой, вы возвращаете следующее
    PHP код:
    $result = array(
        
    'status' => 'error',
        
    'message' => 'Описание ошибки'
    );
    echo 
    serialize($result); 
    В принципе все. Особо сложного ничего нет.
    [свернуть]


    Всем удачного дня.
    • 0
  10. Студент Аватар для devuser
    • Регистрация: 05.12.2012
    • Сообщений: 50
    • Репутация: 7
    Специально для тех, кто хочет принять участие в акции, мы создали инструмент для проверки вашего драйвера, и шаблон драйвера, который можно скачать отсюда – http://d1.news-more.ru/d/driver.zip

    Инструмент для проверки находится по адресу http://d1.news-more.ru/driver

    На первом этапе вам необходимо ввести API ключ, как у вас прописано в драйвере, и URL проверяемого драйвера – например, http://ВашСайт/parser.php

    После чего нажимаем кнопку «Проверить».
    Если вы получили массив с вашими категориями – то на этом этапе драйвер работает хорошо, и можно переходить ко второму этапу.

    На втором этапе выбираем «Требуемое действие» - «Передать информацию удаленному сайту» и видим дополнительные возможности.

    Выбираем категорию, в которую мы будем передавать данные, по желанию изменяем данные, и жмем кнопку «Проверить».

    Если после этого материал появился на вашем сайте – все хорошо.
    В противном случае смотрите результат работы вашего драйвера, там много полезной информации.

    Убедительная просьба.
    Если вы хотите принять участие в акции – сообщите, пожалуйста, о своем решении в ICQ. Чтоб не получилось, в итоге, 10 драйверов под DLE или Joomla

    Также вы можете с помощью этих инструментов проверить возможность подключения непопулярной CMS к парсеру своими силами.

    Всем удачного дня.
    • 0
Страница 2 из 4 Первая 1234 Последняя

Похожие темы

Темы Раздел Ответов Последний пост
SapientGenerator.ru – сервис автоматического создания уникальных сайтов
Реклама партнерских программ 55 24.12.2016 21:43
PostWP программа для автоматического создания тематических сайтов на WordPress
DLE 2 27.12.2012 18:40
Сервис автоматического создания и наполнения сайтов
Реклама партнерских программ 15 02.07.2012 19:12
Новый сервис автоматического создания сайтов
Реклама партнерских программ 7 05.02.2010 17:44
Скрипт для автоматического создания сабов
Софт, скрипты, сервисы 3 17.09.2009 12:53

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры