Вопрос? Правильный ли robots

Правильный ли robots

Disallow: /engine/go.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm
Disallow: /*do=search
Disallow: /*do=download
Disallow: /*do=go

может что включить надо?

Disallow: /*do=download за что отвечает?

Disallow: /*subaction=newposts

Disallow: /newposts/

а то что то на сайте проели количество посетителей.... на минус 1к

 

Это все можешь одной строкой заменить:

Код:

Disallow: /*?

 

что означает /*? .... , как будет в индексе?

 

как взять роботс с сайтов?

 

Allow: /*.jpg это разрешает картинки в индексе?
Allow: /*.png - это разрешает картинки в индексе?
Allow: /*.gif это разрешает картинки в индексе?
Allow: /*?page
Disallow: /engine/go.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm
Disallow: /*do=search
Disallow: /*do=download
Disallow: /*do=go

Sitemap: сайт/sitemap.xml

-----------

Allow: /*.css - это чтение кода?

так нормально?

 

Это ни к чему. Все что не запрещено, все разрешено

 

Disallow: /newposts/ это новая тема не разрешено?

 

Новые посты, закрыты потому что обычно дублируют новости на главной странице

 

Не ошиблись? Инет говорит что это означает

 

Исхожу из того, что используется dle с включенным по умолчанию ЧПУ
url с параметрами (в которых символ "?") - служебные страницы, которые в индексе не нужны

 

Нет.