Файл robots.txt – важная часть блога

(Ответов: 11, Просмотров: 1811)
Страница 1 из 2 12 Последняя
  1. Дипломник Аватар для nethead
    • Регистрация: 10.01.2010
    • Сообщений: 210
    • Репутация: 13
    Написал статью по файлу robots.txt, который отвечает за индексацию Вашего блога или сайта. Можете прочитать ее прямо сейчас, это как бы продолжение статьи про АГС. Для большего понимания сначала читайте про АГС. Комментируем и даем оценки. Вопросы к читателям:
    1) В знали про этот файл? Кто первый раз сталкивается с этим?
    2) Вы сами составляете этот файл или берете уже готовый?
    3) Писать или нет следующую статью про мапсайт?
    4) Кто серьезно сталкивался с составлением вашего файла?
    • 0
  2. Banochkin.com Аватар для Sk8er
    • Регистрация: 08.09.2009
    • Сообщений: 1,799
    • Записей в дневнике: 1
    • Репутация: 91
    • Webmoney BL: ?
    1) Знал
    2) Для каждого движка свой + корректирую если нужно
    3) Как сам)
    4) Не понял вопроса =\
    Banochkin.com — веду блог, создаю и продвигаю сайты.
    Контакты.
    • 0
  3. Гуру
    • Регистрация: 08.09.2009
    • Сообщений: 1,981
    • Записей в дневнике: 4
    • Репутация: 193
    1. Знаю
    2. Индивидуально для каждого сайта. Для WP беру заготовку, для других часто что-то корректирую.
    3. Да, если хочешь спалить какую-то тему а то, что все и так знают не нада писать опять
    4. Хороший вопрос :)
    • 0
  4. Дипломник Аватар для lliss
    • Регистрация: 13.01.2010
    • Сообщений: 102
    • Репутация: 30
    привет у меня вопрос по поводу написания robots.txt тоесть обьясните особо тупому его писать можно просто в блокноте ??
    например
    User-agent: Yandex
    Disallow:

    HOST: mysayt.com

    User-agent: *
    Disallow:

    а потом сохранить в корень сайта и всё??
    я правельно понял ?
    • 0
  5. Гуру
    • Регистрация: 07.01.2010
    • Сообщений: 1,007
    • Репутация: 24
    Цитата Сообщение от lliss Посмотреть сообщение

    а потом сохранить в корень сайта и всё??
    я правельно понял ?
    Правильно.
    Exbox.ru - проверенный обменник электронных денег! Рекомендую!
    • 0
  6. Banned
    • Регистрация: 07.01.2010
    • Сообщений: 710
    • Репутация: -18
    Цитата Сообщение от lliss Посмотреть сообщение
    привет у меня вопрос по поводу написания robots.txt тоесть обьясните особо тупому его писать можно просто в блокноте ??
    например
    User-agent: Yandex
    Disallow:

    HOST: mysayt.com

    User-agent: *
    Disallow:

    а потом сохранить в корень сайта и всё??
    я правельно понял ?
    А зачем пустой Disallow? оО
    • 0
  7. Super Moderator Аватар для grazer
    • Регистрация: 03.09.2009
    • Сообщений: 5,201
    • Записей в дневнике: 83
    • Репутация: 2382
    • Webmoney BL: ?
    Цитата Сообщение от nethead Посмотреть сообщение
    1) В знали про этот файл? Кто первый раз сталкивается с этим?
    2) Вы сами составляете этот файл или берете уже готовый?
    3) Писать или нет следующую статью про мапсайт?
    4) Кто серьезно сталкивался с составлением вашего файла?
    1. Об этом файле любой школьник знает.
    2. Готовый беру, иногда подправляю немного.
    3. Нет, уже и так достаточно написано, как и про роботс.
    4. Никаких проблем никогда не было.
    Домены, хостинг и VPS 10 лет доверяю REG.RU. Проблем нет.
    Найти меня можно в телеграме, подписывайтесь (cнг/бурж seo).
    • 0
  8. Гуру Аватар для Twin
    • Регистрация: 30.12.2009
    • Сообщений: 613
    • Репутация: 39
    • Webmoney BL: ?
    Цитата Сообщение от ********* Pavel Посмотреть сообщение
    А зачем пустой Disallow? оО
    Если не ошибаюсь, Disallow хоть раз должен присутствовать в роботы.тхт. Пустой Disallow не закрывает ничего.
    Хотя зачем нужен файл robots.txt, если закрывать ничего не надо?
    Последний раз редактировалось Twin; 15.01.2010 в 19:02.
    • 0
  9. Senior Member Аватар для Тормоз
    • Регистрация: 04.11.2009
    • Сообщений: 529
    • Репутация: 79
    Увидел в примере robots.txt автора директиву allow. Вывод: не дорос ещё учить кого-то, статью в топку.

    Я вообще не понимаю стремления блоггеров переливать из пустого в порожнее на протяжении длительного времени. Если нечего писать - не пишите вообще ничего, зачем высасывать из пальца сомнительную информацию? Кому это нужно.

    Есть вот такой сайтик - http://robotstxt.org.ru/ Он появился года два назад, а то и три. После его появления просто вообще никакого смысла нет вновь писать про robots.txt в Рунете, там раскрыты вообще все вопросы. Все.
    Я отказался от всех форумов, меня тут больше нет.
    • 0
  10. Гуру
    • Регистрация: 08.09.2009
    • Сообщений: 1,981
    • Записей в дневнике: 4
    • Репутация: 193
    Хотя зачем нужен файл robots.txt, если закрывать ничего не надо?
    чтобы у яндекса небыло проблем с индексацией. точнее у Вас их небыло.
    • 0
Страница 1 из 2 12 Последняя

Похожие темы

Темы Раздел Ответов Последний пост
Файл .htaccess
Прочее 19 11.02.2016 18:54
Robots.txt
Обучающие статьи 12 30.06.2011 10:29
Как получать 10$ за любой файл
Реклама партнерских программ 0 09.05.2010 11:27
Анализ корпоративного блога - часть 2
Дайджест блогосферы 0 08.04.2010 19:01
Как я уменьшил время загрузки своего блога в 4 раза. Часть 2.
Дайджест блогосферы 1 23.12.2009 02:48

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры