|
ru.website
- RU.WEBSITE -------------------------------------------------------------------
From : Yaroslav Govorunov 2:5020/400 19 Aug 2001 17:35:28
To : All
Subject : Помогите с поисковиками
--------------------------------------------------------------------------------
Hello, All!
Hужен совет по такому вопросу. Имеется сайт http://www.rsdn.ru Сайт писаный на
ASP. Практически все работает на Server Side XML Processing. Hа сайте документы,
которые храняться в XML в схеме похожей на DocBook. В результате URL на каждый
документ состоит из URL на обработчик этого документа + относительный путь к
документу, переданный через параметры. Все бы хорошо, но вот только документ
этот с точки зрения поисковика получается динамически сгенерированным (так оно и
есть). В результате сайт индексируют только те поисковики, которые умеют
индексировать динамику (только Yandex). Сайт хостится у провайдера, поэтому
ставить фильтры и т.п. не подойдет. Я договорился с провайдером за Application
Mappings (это когда веб приложение мапиться в расширение файла и обрабатывает
эти запросы). Есть несколько вопросов:
1. Будут ли поисковики (Рамблер, Апорт) индексировать документ, если ссылка на
него имеет вид http://www.rsdn.ru/article/baseserv/mt.ssxp ? Т.е. неизвестное
ему расширение.
2. Hет ли более простого способа решить эту проблему?
3. Есть такой файл robots.txt, в котором можно указать поисковику что _не_ нужно
индексировать. А нет ли такого файла, чтоб наоборот - указать что _нужно_
индексировать? Типа индекса. Hо так чтоб пользователю он в глаза не бросался.
4. Где можно найти список строк USER_AGENT для всех популярных поисковиков?
With best regards, Yaroslav Govorunov
E-mail: slov@rsdn.ru
--- ifmail v.2.15dev5
* Origin: Alkar Teleport News Server (2:5020/400)
Вернуться к списку тем, сортированных по: возрастание даты уменьшение даты тема автор
|
