Не сможете, да и незачем? Там прописаны те страницы, которых там и не должно быть.
Например, на одно и тоже сообщение может быть несколько ссылок, специфика phpbb, и за это этот же яндекс будет наказывать, разглядывая в них дубли.
Решил сегодня полюбоваться индексацией страниц в yandex.ru
Я ужаснулся
Почти 16000 страниц исключено роботом
Вот что я надыбал дальше:
Смогу ли я как-то разрешить доступ для индексации или нет?
Я ужаснулся
Почти 16000 страниц исключено роботом
Вот что я надыбал дальше:
Смогу ли я как-то разрешить доступ для индексации или нет?
Комментарии: 2