Без категории

Google снова оказался в центре внимания в дискуссии по защите авторских прав, пишет Die Welt.

В прошлом году поисковик из-за предположительных нарушений копирайта удалил в 5,4 млн случаев содержания, сайтов и адресов сайтов (за исключением содержания на YouTube). Об этом говорится...

Яндекс.Поиск опубликовал в Я.РУ новые правила обработки директивы Allow файла robots.txt. А как мы уже знаем, одним из методов управления поведения поисковым роботом на вашем сайте является текстовый файл robots.txt. В нем можно указать параметры индексирования своего сайта как для всех...