Индексируются ли профили закрытые от гостей

(Ответов: 5, Просмотров: 2128)
  1. А компот??!!
    • Регистрация: 28.11.2011
    • Сообщений: 2,067
    • Репутация: 720
    • Webmoney BL: ?
    Индексируются ли профили закрытые от гостей?

    Друзья и некоторые разработки программа утверждаю что профиль закрытый от гостей индексируется, но мне не понятно как это происходит, ведь бот не может авторизоваться на сайте, тем более зарегистрироваться!

    Вот свои доказательство привожу:

    1. Заходу на страницу pr-cy.ru/simulator?url= Сайт глазами поиcкового робота, вожу ссылку и вижу что нет там не какого профиля, что бы посмотреть нужно зарегистрироваться или авторизоваться, Robots.txt пустой.

    2. Прогоняю свой сайт по профилям, примерно 30 - 35К профилей с активной ссылкой но закрытых от гостей, после 2-3 апов не одной ссылки не вылезло!

    А если по открытым прогоняю, например из 1000 открытых индексируется 500 -700 ссылок за 1-2 апа!

    ------------------------------------------------------------


    Может быть я ошибаюсь и профили закрытые от гостей индексируются?
    • 0
  2. Студент Аватар для cleverley
    • Регистрация: 16.10.2011
    • Сообщений: 75
    • Репутация: 64
    • Webmoney BL: ?
    Робот же не будет логиниться, чтобы проиндексировать профиль...

    Профили закрытые от гостей не индексируются.
    • 0
  3. Новичок
    • Регистрация: 03.11.2011
    • Сообщений: 19
    • Репутация: 2
    Вспоминаем историю с заказами секс-шопов и смсками мегафона. Не должен, но, чем Яндекс не шутит. Опять же, все зависит от сайта.
    • 0
  4. Banned
    • Регистрация: 21.08.2011
    • Сообщений: 1,589
    • Репутация: 1009
    • Webmoney BL: ?
    Могу точно сказать что иногда индексируются !!! Зачастую движки распознают кто же пришел на сайт по юзер агенту и понимая чо пришел бот, отдают информацию !!!

    cleverley, зачем быть столь уверенным, если точно не знаешь !?
    • 0
  5. Дипломник
    • Регистрация: 08.01.2012
    • Сообщений: 129
    • Репутация: 15
    Цитата Сообщение от artorlov Посмотреть сообщение
    движки распознают кто же пришел на сайт по юзер агенту и понимая чо пришел бот, отдают информацию !!!
    Не скажу что такого нет и быть не может... Может-то оно может, но алгоритм тупейший изначально. Система авторизации построенная на строке юзер-агента??? Умно. Может проще отдавать всем подряд и не париться? Если по итогу инфа один фиг публичной станет.
    • 0
  6. Гуру Аватар для Shred
    • Регистрация: 30.09.2011
    • Сообщений: 766
    • Репутация: 66
    • Webmoney BL: ?
    для бота гугл адсенса точно знаю что есть механизм что бы сообщить этому боту пароль для того что бы он мог заходить на страницы, которые доступны только после авторизации для анализа контента и подбора более релевантной рекламы. Так же не раз видел на форумах в юзерах онлайн юзера с ником гугл бота "Google.com". Пример такого форума exploit.in/forum. Так же помимо гугл бота там можно видеть и бота яндекса (Яndex). Интересно то что, ссылки на профиль у них нет. Как это достагается можно узнать у опытных владельце форумов.
    Последний раз редактировалось Shred; 25.01.2012 в 17:03.
    • 0

Похожие темы

Темы Раздел Ответов Последний пост
Индексируются ли ссылки из Ответы@mail.ru?
Вопросы от новичков 3 03.01.2012 00:02
Закрытые/скрытые разделы.
Обсуждение форума и ваши предложения 31 28.10.2011 20:38
Сейчас на сайте: 54 пользователей и 1587 гостей
Обсуждение форума и ваши предложения 15 08.08.2011 18:15
Почему ссылки купленные в sape не индексируются Google.
Партнерские программы 15 10.08.2010 13:21
Как быстро индексируются сапешные ссылки?
Вопросы от новичков 10 30.04.2010 00:38

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры