Файл robots.txt – важная часть блога

(Ответов: 11, Просмотров: 847)
Страница 1 из 2 1 2 Последняя
  1. Senior Member Аватар для nethead
    • Регистрация: 10.01.2010
    • Сообщений: 209
    • Репутация: 13
    Написал статью по файлу robots.txt, который отвечает за индексацию Вашего блога или сайта. Можете прочитать ее прямо сейчас, это как бы продолжение статьи про АГС. Для большего понимания сначала читайте про АГС. Комментируем и даем оценки. Вопросы к читателям:
    1) В знали про этот файл? Кто первый раз сталкивается с этим?
    2) Вы сами составляете этот файл или берете уже готовый?
    3) Писать или нет следующую статью про мапсайт?
    4) Кто серьезно сталкивался с составлением вашего файла?
    • 0
  2. Блоггер Аватар для Sk8er
    • Регистрация: 08.09.2009
    • Сообщений: 1,690
    • Записей в дневнике: 1
    • Репутация: 46
    1) Знал
    2) Для каждого движка свой + корректирую если нужно
    3) Как сам)
    4) Не понял вопроса =\
    • 0
  3. Гуру Аватар для mall
    • Регистрация: 08.09.2009
    • Сообщений: 2,023
    • Записей в дневнике: 4
    • Репутация: 190
    1. Знаю
    2. Индивидуально для каждого сайта. Для WP беру заготовку, для других часто что-то корректирую.
    3. Да, если хочешь спалить какую-то тему а то, что все и так знают не нада писать опять
    4. Хороший вопрос
    will be back soon
    • 0
  4. Новичок Аватар для lliss
    • Регистрация: 13.01.2010
    • Сообщений: 26
    • Репутация: 10
    привет у меня вопрос по поводу написания robots.txt тоесть обьясните особо тупому его писать можно просто в блокноте ??
    например
    User-agent: Yandex
    Disallow:

    HOST: mysayt.com

    User-agent: *
    Disallow:

    а потом сохранить в корень сайта и всё??
    я правельно понял ?
    • 0
  5. Гуру
    • Регистрация: 07.01.2010
    • Сообщений: 967
    • Репутация: 23
    Цитата Сообщение от lliss Посмотреть сообщение

    а потом сохранить в корень сайта и всё??
    я правельно понял ?
    Правильно.
    • 0
  6. Banned
    • Регистрация: 07.01.2010
    • Сообщений: 710
    • Репутация: -18
    Цитата Сообщение от lliss Посмотреть сообщение
    привет у меня вопрос по поводу написания robots.txt тоесть обьясните особо тупому его писать можно просто в блокноте ??
    например
    User-agent: Yandex
    Disallow:

    HOST: mysayt.com

    User-agent: *
    Disallow:

    а потом сохранить в корень сайта и всё??
    я правельно понял ?
    А зачем пустой Disallow? оО
    • 0
  7. Super Moderator Аватар для grazer
    • Регистрация: 03.09.2009
    • Сообщений: 4,021
    • Записей в дневнике: 83
    • Репутация: 902
    • Webmoney BL:     Формальный аттестат ?
    Цитата Сообщение от nethead Посмотреть сообщение
    1) В знали про этот файл? Кто первый раз сталкивается с этим?
    2) Вы сами составляете этот файл или берете уже готовый?
    3) Писать или нет следующую статью про мапсайт?
    4) Кто серьезно сталкивался с составлением вашего файла?
    1. Об этом файле любой школьник знает.
    2. Готовый беру, иногда подправляю немного.
    3. Нет, уже и так достаточно написано, как и про роботс.
    4. Никаких проблем никогда не было.
    Открыл новый блог. Подписаться на RSS.
    Делаю прогоны для тиц. Быстро и профессионально.
    • 0
  8. Гуру Аватар для Twin
    • Регистрация: 30.12.2009
    • Сообщений: 592
    • Репутация: 35
    Цитата Сообщение от ********* Pavel Посмотреть сообщение
    А зачем пустой Disallow? оО
    Если не ошибаюсь, Disallow хоть раз должен присутствовать в роботы.тхт. Пустой Disallow не закрывает ничего.
    Хотя зачем нужен файл robots.txt, если закрывать ничего не надо?
    Последний раз редактировалось Twin; 15.01.2010 в 18:02.
    В автоматизации заработка на вечных ссылках поможет эта система. Деньги делают деньги здесь. ;)
    • 0
  9. Senior Member Аватар для Тормоз
    • Регистрация: 04.11.2009
    • Сообщений: 539
    • Репутация: 79
    Увидел в примере robots.txt автора директиву allow. Вывод: не дорос ещё учить кого-то, статью в топку.

    Я вообще не понимаю стремления блоггеров переливать из пустого в порожнее на протяжении длительного времени. Если нечего писать - не пишите вообще ничего, зачем высасывать из пальца сомнительную информацию? Кому это нужно.

    Есть вот такой сайтик - http://robotstxt.org.ru/ Он появился года два назад, а то и три. После его появления просто вообще никакого смысла нет вновь писать про robots.txt в Рунете, там раскрыты вообще все вопросы. Все.
    Я отказался от всех форумов, меня тут больше нет.
    • 0
  10. Гуру Аватар для mall
    • Регистрация: 08.09.2009
    • Сообщений: 2,023
    • Записей в дневнике: 4
    • Репутация: 190
    Хотя зачем нужен файл robots.txt, если закрывать ничего не надо?
    чтобы у яндекса небыло проблем с индексацией. точнее у Вас их небыло.
    will be back soon
    • 0
Страница 1 из 2 1 2 Последняя

Похожие темы

Темы Раздел Ответов Последний пост
Файл .htaccess
Прочее 14 24.05.2012 02:34
Robots.txt
Обучающие статьи 12 30.06.2011 10:29
Как получать 10$ за любой файл
Реклама и анонсы 0 09.05.2010 11:27
Анализ корпоративного блога - часть 2
Дайджест блогосферы 0 08.04.2010 19:01
Как я уменьшил время загрузки своего блога в 4 раза. Часть 2.
Дайджест блогосферы 1 23.12.2009 01:48

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора: