|
ru.perl
- RU.PERL ----------------------------------------------------------------------
From : Ilia Vinokurov 2:5020/400 16 Sep 2005 18:00:04
To : Nikolay Panov
Subject : Re: Hормализация текста.
--------------------------------------------------------------------------------
Hello, Nikolay!
You wrote on Tue, 13 Sep 2005 15:40:56 +0000 (UTC):
NP> Занимаюсь написанием web-агента.
NP> Первая проблема с которой я, к своему глубокому удивлению столкнулся,
NP> это базовая операция над текстом: нормализация. Под этим термином я
NP> понимаю: 1. во первых это приведение текста к некоторому упрощённому
NP> виду, что включает в себя удаление слов-паразитов, замена числительных
NP> на цифры и так далее.
NP> 2. во вторых -- приведение словоформы к базовому виду в котором слова
NP> "слово", "слова", "словами" и так далее суть единый идентификатор.
NP> Был уверен, что уж где-где, а для perl такое должно быть под любой язык
NP> почти.
NP> Увы -- найдено только Text-Normalize-NACO (что по идее должно уметь
NP> отчасти первое) :o(
Есть проект Ri-Search...
Платный. За смешную сумму получишь словарь Зелезняка на перле :-)
NP> Может я плохо смотрел?
NP> Hаправьте, просветите!
NP> Желательно именно автономное (независимое от всяких ispell)
NP> perl-решение, хотя если таковых не существует, то на первых порах
NP> сойдёт и не автономное -- придётся писать автономку самостоятельно...
With best regards, Ilia Vinokurov. E-mail: ilvin@ilvin.msk.ru
--- ifmail v.2.15dev5.3
* Origin: Comstar United Telesystems ISP (backup server) (2:5020/400)
Вернуться к списку тем, сортированных по: возрастание даты уменьшение даты тема автор
|
