|
|
|
Файл robots.txt
|
|||
|---|---|---|---|
|
#18+
Мне нужно запретить интексировать всем поисковикам каталоги catalog1 и catalog2, РАЗРЕШИТЬ читать файл карты сайта, какое описание будет верно: User-Agent: * Disallow: /catalog1/ Disallow: /catalog2/ Sitemap: http://www.site.ru/sitemap.xml или User-Agent: * Allow: /catalog1/ Allow: /catalog2/ Sitemap: http://www.site.ru/sitemap.xml Я что то не разобрался, какая директива разрешает чтение Disallow или Allow? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 05.10.2011, 21:33:55 |
|
||
|
|
start [/forum/search_topic.php?author=avion-ru&author_mode=last_posts&do_search=1]: |
0ms |
get settings: |
9ms |
get forum list: |
11ms |
get settings: |
8ms |
get forum list: |
18ms |
get settings: |
11ms |
get forum list: |
19ms |
check forum access: |
4ms |
check topic access: |
4ms |
track hit: |
49ms |
get topic data: |
14ms |
get forum data: |
4ms |
get page messages: |
44ms |
get tp. blocked users: |
1ms |
| others: | 927ms |
| total: | 1123ms |
| 0 / 0 |
