[Praxie]

Например, профиль пользователя, регистрация. Или все это можно оставить?

[Я Джин]

Профиля точно закрывать, регистрация и все остальное зависит от сайта

[Olejio]

админку, страницу поиска, страница входа и регистрации, корзину

[selenii]

Закрывать нужно то, что не нужно видеть поисковикам. Например как вы уже сказали админка, её ведь не должны найти в поиске и войти туда. Страница входа и регестрации, тот же случай.
Навигацию по страницам я бы ещё закрыл бы и теги но это на своё усмотрение, они что есть и что их нет, одно и тоже.. .

[13bis]

Я закрываю всё, что я не хочу показывать другим людям, оставляю лишь те страницы, по которым будут переходы с поисковиков.

[vpkach]

Закрывать малоинформативные и малоконтентные страницы. Главная страница, контент, категории вот что действительно нужно пользователю.

[NightHawk]

Я закрываю все технические страницы, в общем те, что не собираюсь продвигать под ПС за ненадобностью. Админку я бы не закрывал, зачем? ПС и сами ее не найдут, а если в robots.txt то для взломщиков одна потеха от такой скрытой админки )

[Dezm]

все зависит от типа сайта, интернет-магазин, портал, форум, блог и т.д. - в большинстве случаев в robots.txt закрываю
- результаты поиска
- документы .pdf, .doc
- если на сайте есть флеш скорее всего в индекс влезет .gif - также закрываю
- страницы авторизации, регистрации, вспомнить пароль и т.д.
- если ИМ - корзину и оформление заказа
- элементы которые подтягиваются аяксом
- страницы пагинации, но в зависимости от сайта - нужно учесть распределение веса и какая страница в продвижении

страницы разделов, меток, тегов, фильтров и т.д., использую для продвижения