ru.linux

 
 - RU.LINUX ---------------------------------------------------------------------
 From : Alexandr Burdejny                    2:467/24.2     20 Dec 2002  01:09:23
 To : "Alexander Dilevsky"
 Subject : Re: wget
 -------------------------------------------------------------------------------- 
 

 >> Можно ли заставить wget скачать документацию с сайта www.chipinfo.ru/docs
 AD> ?
 >> Что там за сайт такой, что он качать не хочет?
 AD> 
 AD> В тамошнем robots.txt запрещено скачивать файлы из /docs:
 AD> User-agent: *
 AD> Disallow: /docs/
 AD> wget - программа вежливая, и при рекурсивном скачивании проверяет
 AD> robots.txt.
 AD> Попробуй скачать один конкретный документ, который нужен.
 
 скажи вгету -e robots=off и он не будет на этот файл обращать внимания...
 --- tin/1.5.11-20020130 ("Toxicity") (UNIX) (Linux/2.4.19 (i586))
  * Origin: AquaBudService (2:467/24.2@fidonet)
 
 

Вернуться к списку тем, сортированных по: возрастание даты  уменьшение даты  тема  автор