|
|
ru.algorithms- RU.ALGORITHMS ---------------------------------------------------------------- From : Konstantin Yegupov 2:5022/74.16 07 Jun 2003 02:45:41 To : Taras Remez Subject : Определение кодировки -------------------------------------------------------------------------------- Тпн 06 Июнь 2003 10:04, Taras Remez --> All. TR> Дан текст. Как определить в какой кодировке он написан(KOI8-R, TR> CP-1251,...) Берешь массив частот распределения русских буковок в среднем тексте (можно построить путем анализа множества разнотипных текстов), переводишь его во всевозможные кодировки. Затем строишь распределение буковок в анализируемом тексте. Потом сравниваешь это распределение с эталонными - путем скалярного перемножения массивов - и выбираешь кодировку, для которой результат был максимален. --YK ... /np: Titan TTC-D5TB - "ууууууууу"/ --- GoldED+/W32 1.1.4.3 * Origin: YK (2:5022/74.16) Вернуться к списку тем, сортированных по: возрастание даты уменьшение даты тема автор
Архивное /ru.algorithms/33393ee11ad9.html, оценка из 5, голосов 10
|