ru.website

 
 - RU.WEBSITE -------------------------------------------------------------------
 From : Vladimir Maslov                      2:5093/55.15   22 Jul 2001  00:30:35
 To : Eugeny Bodunov
 Subject : robots.txt
 -------------------------------------------------------------------------------- 
 

 
  13:03 [Вторник Июль 17 2001], Eugeny Bodunov -} All:
 
  EB> В логах заметил как поисковые машины запpашивают этот файл. Помню что
  EB> в нем должны хpаниться упpавляющие команды для pобота, но синтаксис и
  EB> назначение мне пока неизвестны, пpосветите кому не лень..
 
 http://info.webcrawler.com/mak/projects/robots/robots.html
 
  EB>  А может и rfc кто вспомнит?
 
 rfc я не припомню, чтоб где-то упоминался.
 http://info.webcrawler.com/mak/projects/robots/norobots.html
 
 И писал эту чушь Вовка... И не всегда в кнопки он попадал... :(
 
 --- <META HTTP-EQUIV="Refresh" CONTENT="0; URL=kew1_5iTe.PDF"> наш ответ
  * Origin: rfc рулит (2:5093/55.15)
 
 

Вернуться к списку тем, сортированных по: возрастание даты  уменьшение даты  тема  автор 

Тема:    Автор:    Дата:    robots.txt   Eugeny Bodunov   17 Jul 2001 13:03:52   robots.txt   Vladimir Maslov   22 Jul 2001 00:30:35   robots.txt   Vladimir Crick   26 Jul 2001 13:38:22