Эксперименты с запретом индексации в robots.txt

30 мая 2012 | Автор: |

Проверяем поведение роботов на страницах, запрещенных в robots.txt

Запрещаем к индексации:

  1. Собственно страницу.
  2. Страницу, на которой стоит ссылка на целевую.
  3. Скрипт содержащий редирект на целевую страницу.

 

Ссылка Яндекс Google
1 запрещенная к индексации роботами страница
2 ссылка на странице
3 скрипт редиректа запрещенный в robots
4

 

VN:F [1.9.22_1171]
пожалуйста, оцените страницу, я старался :)
Rating: 5.0/5 (3 votes cast)
Эксперименты с запретом индексации в robots.txt, 5.0 out of 5 based on 3 ratings

Есть что сказать? - Напишите!

Для предотвращения автоматического заполнения, пожалуйста, выполните задание, приведенное рядом.