ru.website

 
 - RU.WEBSITE -------------------------------------------------------------------
 From : Slava Gorbanev                       2:5057/19.20   06 Feb 2001  19:16:35
 To : "Andrey Kr."
 Subject : Re: Робот. Кто он? :)
 -------------------------------------------------------------------------------- 
 

 
 On Tue, 06 Feb 01 13:22:35 +0400 Andrey Kr. wrote:
 
  AK> Такой вопрос - как правильно написать файл robot.txt ?
 
 robots.txt
 http://info.webcrawler.com/mak/projects/robots/norobots.html
   
  AK> Hапример:
  AK> у меня есть фрейм - index.thml Он состоит из друх страничек - главной
  AK> с текстом (main.html) и верхней меню-навигации (top.html).
 
  AK> Я так понимаю, что если я не сделаю файл robot.txt - то какой-то робот
  AK> проиндексирует эти 3 файла. Т.е. в поисковой машине будут ссылки,
  AK> например:
 
  AK> www.mysite.com/top.html - но эта ссылка никуда не приведет, точнее
  AK> откроется не фрейм, а страница навигации - которая никому не нужна.
  AK> www.mysite.com/main.html
 
 а в main.html есть ссылки на другие страницы сайта, или они только
 в top.html?  в таком случае, если запретить индексацию top.html, все
 страницы кроме главной проиндексированы не будут.  в общем случае, чтобы
 запретить индексацию файла top.html, в /robots.txt надо поместить строки:
 
 User-agent: *
 Disallow: /top.html
 
 еще один вариант -- джаваскриптом в top.html определять, что страница
 загружена не в фрейме и в этом случае грузить фрейм насильно.
 
 -- 
 RnD[.]                               [ http://dot.formoza.ru/ ]
 
 GCS d- s+:- a-- C++++ UBL+++ P+++ L+++ E(++) W+(++) N++@+ o? K-
 w O M- V PS+ PE Y PGP- t- 5 X R- tv b+ DI-- D++ G++ e- h! r y**
 --- tin/1.5.7-20010105 ("Laetitia") (UNIX) (Linux/2.2.16-3 (i586))
  * Origin: just leave me alone (2:5057/19.20)
 
 

Вернуться к списку тем, сортированных по: возрастание даты  уменьшение даты  тема  автор