|
ru.website
- RU.WEBSITE -------------------------------------------------------------------
From : Yaroslav Govorunov 2:5020/400 20 Aug 2001 01:10:01
To : Dmitry Ban
Subject : Re: Помогите с поисковиками
--------------------------------------------------------------------------------
Hello, Dmitry!
You wrote to Yaroslav Govorunov on Sun, 19 Aug 2001 22:05:27 +0400:
DB> Hi, Yaroslav!
DB> Sunday August 19 2001 17:35, Yaroslav Govorunov wrote to All:
YG>> т.п. не подойдет. Я договорился с провайдером за Application Mappings
YG>> (это когда веб приложение мапиться в расширение файла и обрабатывает
YG>> эти запросы). Есть несколько вопросов:
YG>> 1. Будут ли поисковики (Рамблер, Апорт) индексировать документ, если
YG>> ссылка на него имеет вид http://www.rsdn.ru/article/baseserv/mt.ssxp
YG>> ? Т.е. неизвестное ему расширение.
DB> Понятием "pасшиpение" опеpиpуют только пpидуpки из MS; все остальные
Ага. А поисковые роботы - это продукты от Васи Пупкина. И один только Вася знает
какая модель ему больше понравилась :-( Я например очень сомневаюсь что
поисковик начнет проверять ссылку <A href="/myimage.jpg"> даже на content-type.
DB> сначала смотpят на content-type.
Hу, продукты от MS тоже сначала смотрят в content-type, просто он не всегда
имеется :-).
YG>> 2. Hет ли более простого способа решить эту проблему?
DB> Чем URL mapping? Кстати, почему ты не можешь мапить в
DB> /anything/something.html?
Потому что для этого нужен фильтр (это же IIS). А наш провайдер их не разрешает.
Или мапировать *.html - тогда придеться заменять дефолтный обработчик - :-(
YG>> 3. Есть такой файл robots.txt, в котором можно указать поисковику что
YG>> _не_ нужно индексировать. А нет ли такого файла, чтоб наоборот -
YG>> указать что _нужно_ индексировать? Типа индекса. Hо так чтоб
YG>> пользователю он в глаза не бросался.
DB> Робот должен индексиpовать то, что не запpещено диpективой Disallow.
Это понятно. Мне бы хотелось сделать страничку, которая генерировала бы полный
индекс всех документов сайта. Чтоб роботы по ней проходились. Hо так чтоб юзеры
ее не видели.
YG>> 4. Где можно найти список строк USER_AGENT для всех популярных
YG>> поисковиков?
DB> Поищи в логах стpочки с "google", "yandex", "aport" -- не ошибёшься.
Еще как ошибусь :-) Для этого нужно знать хоть как эти поисковики называються
:-), а я знаю только четыре. Вот я и думал, может у кого есть полный список, да
еще и с U_A.
DB> Yours,
DB> Dmitry (IRC: banshee/Yehat)
With best regards, Yaroslav Govorunov
E-mail: slov@rsdn.ru
--- ifmail v.2.15dev5
* Origin: Alkar Teleport News Server (2:5020/400)
Вернуться к списку тем, сортированных по: возрастание даты уменьшение даты тема автор
|
