Оцените robots.txt для DLE (онлайн кинотеатр)!

(Ответов: 13, Просмотров: 8898)
Страница 2 из 2 Первая 12
  1. Banned
    • Регистрация: 09.08.2011
    • Сообщений: 662
    • Репутация: 62
    Лично у меня такой и тоже для киношки:

    Развернуть текст

    User-agent: *
    Disallow: *.swf
    Disallow: */?do=cat*
    Disallow: /?do=cat*
    Disallow: /?do=lastcomments
    Disallow: /*rss
    Disallow: /*print
    Disallow: /*index.php?do=pm*
    Disallow: /*subaction=userinfo
    Disallow: /user/
    Disallow: /tags/
    Disallow: /2012/
    Disallow: /stats/
    Disallow: /cache/
    Disallow: /engine/
    Disallow: /backup/
    Disallow: /upgrade/
    Disallow: /newposts/
    Disallow: /language/
    Disallow: /user/*
    Disallow: /admin/*
    Disallow: /themes/*
    Disallow: /backup/*
    Disallow: /include/*
    Disallow: /language/*
    Disallow: /favorites/*
    Disallow: /templates/*
    Disallow: /adv.html
    Disallow: /rules.html
    Disallow: /contact.html
    Disallow: /engine/go.php
    Disallow: /autobackup.php
    Disallow: /main_admin.php
    Disallow: /statistics.html
    Disallow: /index.php?year=
    Disallow: /index.php?do=pm
    Disallow: /index.php?newsid
    Disallow: /index.php?do=stats
    Disallow: /index.php?do=search
    Disallow: /index.php?do=addnews
    Disallow: /index.php?do=register
    Disallow: /index.php?do=feedback
    Disallow: /index.php?do=lostpassword
    Disallow: /index.php?subaction=newposts

    User-agent: Yandex
    Disallow: *.swf
    Disallow: */?do=cat*
    Disallow: /?do=cat*
    Disallow: /?do=lastcomments
    Disallow: /*rss
    Disallow: /*print
    Disallow: /*index.php?do=pm*
    Disallow: /*subaction=userinfo
    Disallow: /user/
    Disallow: /tags/
    Disallow: /2012/
    Disallow: /stats/
    Disallow: /cache/
    Disallow: /engine/
    Disallow: /backup/
    Disallow: /upgrade/
    Disallow: /newposts/
    Disallow: /language/
    Disallow: /user/*
    Disallow: /admin/*
    Disallow: /themes/*
    Disallow: /backup/*
    Disallow: /include/*
    Disallow: /language/*
    Disallow: /favorites/*
    Disallow: /templates/*
    Disallow: /adv.html
    Disallow: /rules.html
    Disallow: /contact.html
    Disallow: /engine/go.php
    Disallow: /autobackup.php
    Disallow: /main_admin.php
    Disallow: /statistics.html
    Disallow: /index.php?year=
    Disallow: /index.php?do=pm
    Disallow: /index.php?newsid
    Disallow: /index.php?do=stats
    Disallow: /index.php?do=search
    Disallow: /index.php?do=addnews
    Disallow: /index.php?do=register
    Disallow: /index.php?do=feedback
    Disallow: /index.php?do=lostpassword
    Disallow: /index.php?subaction=newposts

    Host: centermovies.com
    Sitemap: http://centermovies.com/sitemap.xml
    [свернуть]
    • 0
  2. Дипломник Аватар для asmakovec2
    • Регистрация: 17.11.2009
    • Сообщений: 121
    • Репутация: 31
    ребятки. всё вот это

    Disallow: /index.php?subaction=userinfo
    Disallow: /index.php?do=register
    Disallow: /?do=lastcomments
    Disallow: /index.php?do=addnews
    Disallow: /index.php?do=feedback
    Disallow: /index.php?do=lostpassword
    Disallow: /index.php?do=pm
    Disallow: /index.php?do=stats
    Disallow: /index.php?do=search
    Disallow: /index.php?subaction=newposts
    Disallow: /index.php?do=rules


    Можно закрыть прописав всего лишь 1 строку

    Disallow: /*?*

    Которая запрещает индексировать страницы в адресе которых есть вопросительный знак.


    ------------------------------------------------------------------
    Disallow: /upgrade/

    папку /upgrade/ вообще нужно удалять с сервера, она нужна только на момент обновления движка, и Заливается на сайт когда нужно обновить двиг.

    --------------------------------------------------------------------
    Disallow: /templates/

    Зачем закрывать шаблон от поисковиков?? Файлы шаблона открыть в браузере нельзя. А картинки дизайна НЕнужно прятать от поисковиков.

    ----------------------------------------------------------------------
    Папки бекапа и языковых файлов
    Disallow: /backup/
    Disallow: /language/

    Не нужно закрывать. Ни один файл из этой папки невозможно открыть. Соответственно ни один файл из этих папок не проиндексируется.
    --------------------------------------------------------------

    файлы
    Disallow: /autobackup.php
    Disallow: /admin.php

    Нужно переименовывать в целях безопасности и никто не должен знать их названия. а не палить их названия в роботсе.

    -------------------------------------

    Дублировать для яндекса все строки НЕнужно. Яндекс прекрасно понимает и учитывает User-agent: *
    Последний раз редактировалось asmakovec2; 15.01.2012 в 18:14.
    • 2

    Спасибо сказали:

    Jeremen(16.01.2012), Rj.DiNex(17.01.2012),
  3. Гуру Аватар для Jeremen
    • Регистрация: 10.10.2011
    • Сообщений: 766
    • Репутация: 92
    • Webmoney BL: ?
    asmakovec2, толково расписали.
    Время не любит, когда его тратят впустую.
    • 0
  4. Гуру Аватар для MacLeo
    • Регистрация: 01.06.2010
    • Сообщений: 1,617
    • Записей в дневнике: 1
    • Репутация: 586
    Люди, никого же не просили показать свой robots, верно?
    А Jeremen`у скажу, что robots оценить нельзя, он не может быть красивый с виду и тп. Корректней наверное все же будет попросить указать на ошибки, верно ? :)
    asmakovec2, Вам все описал, исправьте ошибки и все.
    • 1

    Спасибо сказали:

    Jeremen(16.01.2012),
Страница 2 из 2 Первая 12

Похожие темы

Темы Раздел Ответов Последний пост
Оцените правильность robots.txt для WordPress
Вопросы от новичков 13 16.05.2012 13:48
Онлайн кинотеатр
Оценка ваших сайтов, блогов 17 01.11.2011 12:10
Создаем онлайн кинотеатр вместе! :)
Вопросы от новичков 17 24.10.2011 14:54
Go-Mult.ru - Онлайн кинотеатр мультфильмов (на унике)
Покупка продажа сайтов 6 11.08.2011 15:27
Оцените правильность robots.txt для WordPress
Прочее 0 20.03.2011 02:01

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры