xSeth Aug 18 2010 at 18:30

Вероятностный морфологический анализатор русского и украинского языков на PHP

3 min

3.5K

Lumber room

+19

Comments 16

standov Aug 18 2010 at 18:46

для украинского — не адекват, по крайней мере демо

standov Aug 18 2010 at 18:48

хотя не, гоню

xSeth Aug 18 2010 at 18:49

Можно поподробнее. Насколько я знаю для украинского мало нормальных стеммеров :( По крайней мере стеммер Портера в украинской версии выглядит очень убого.

podarokua May 15 2011 at 17:21

кажется для украинского таки неадекват
уже только по
var $vowels = "аеиоуыэюя";
это понятно
ибо еще нужно ведь їіє

Kicker Aug 18 2010 at 21:53

Не подскажите где можно для других языков скачать словари?

xSeth Aug 18 2010 at 22:59

Насколько я знаю, для других языков отсутствуют словари :(

VolCh Aug 19 2010 at 01:28

Судя по описанию программа ориентирована прежде всего на славянские языки, для германских (английский, немецкий, ...) и романских (итальянский, испанский, французский, ...) в том же описании есть ссылки на более эффективные алгоритмы

vosi Aug 19 2010 at 00:03

дема у Вас как-то с утф-ом плохо работает

Imposeren Aug 19 2010 at 11:13

cp1251??? Вас из прошлого кто-то сюда телепортировал?

xSeth Aug 19 2010 at 12:01

Да именно cp1251. И я в этом не вижу проблемы, до сих пор для украинского языка нет нормального стеммера без огромных баз. А перекодировать с одной кодировки в другую очень просто.

Imposeren Aug 19 2010 at 12:11

Допустим, что пофиг. Но указать на страничке можно было кодировку? Нормальные браузеры по умолчанию считают UTF-8, если не указано. У вас не указано, поэтому нифига не работает.
(домашня)

xSeth Aug 19 2010 at 12:26

Прошу прощения. Исправил.

Radik_Wind Aug 19 2010 at 18:12

Однозначно в закладки. Спасибо.

valter Aug 25 2010 at 14:03

Самолётом -> Самолётом
Самолетом -> Самолет

AotD Nov 5 2010 at 20:11

Кстати чуть-чуть покопал в этом вопросе, накопал вот такую штуку: программа морфологического анализа текста на русском языке
Очень мне помогла =) Хотя грузит систему оччень хорошо :(

AotD Nov 5 2010 at 20:18

Текс, ссыль зарезалась, а комментировать чаще раза в 5 минут не могу, ну что за напасть?
company.yandex.ru/technology/mystem/

Show the best of all time