Суффиксы. Окончания. Корень предложения.

[kibernetics]

Интересно, как бы это грамотно вычленить корень поискового слова? Т.е. я юзер, ввожу "морковка", и мне нужно както вычленить из слова корень, чтобы найти все однокоренные слова с разными суффиксами и окончаниями... В итоге, понаходятся слова морковный, морковь, и т.д. Видел такую реализацию в программе "Консультант+"

Т.е. нужно чтоли модуль писать который бы делал разбор слова по правилам русского языка? Или может есть какой-то готовый код? Что думают знатоки?

[Crio]

Тут вариант только один: составлять словарь корней и уже по нему анализировать слово, находить вхождение корня, отфильтровывать из текста слова с корнем и разными суффиксами и окончаниями... Это так, на вскидку, а там нужно ещё и суффиксы смотреть, и приставки и окончания. Одним словом, жуткая математическая лингвистика...

Если делать самому, то:

Словари находятся либо в сети (плохенькие), либо во всякого рода лингвистических институтах (дорогие), либо составляются сами (...).

С моей точки зрения модуль на VB писать не оптимально, так как VB он хоть и простой, но неторопливый, а словарь там будет весомый.

П.С.: был у меня один словарь с сети скаченный, сейчас пришлю.

[Stop Kran]

Недумою что прямо словарь. А если словарь писать то лутше не корней а всего остального чтобы это отсекал. Словарь меньше получится. Хотя нужно чательно поискать как это делается. Ведь любая поисковая система делает именно так.

[Хакер]

Stop Kran
Ты б следил за грамотностью

[tyomitch]

У меня один знакомый уже много лет приторговывает самописным лексическим анализатором. (Не на VB, ессно.)
Могу дать контакт.

[Antonariy]

Уверен, что Stop Kran не определит корень слова "морковка".

[kibernetics]

Мне кажется, что если определять вначале, есть ли у слова окончание на -а, -е, -у, -и... отсекать его. Выявлять есть ли суффикс? То может можно и до корня дойти...
Вроде же немного слов-исключений для правил....

tyomitch
спасибо конечно. но мне этот суперрулескореньэкстрактор нужен в виде модуля в проге. там не то, чтобы уж такой детальный анализатор нужен.

[tyomitch]

kibernetics, что будешь делать с многокоренными словами?

[kibernetics]

tyomitch
SELECT * FROM *
WHERE *** LIKE 'корень'

[tyomitch]

Я не про это.
Я про то, что от них мало суффикс отрезать, надо ещё и остаток порезать на кусочки.

[Crio]

На мой взгляд, тут всё как раз просто.
Нужно лишь отобразить все слова с данным корнем. Даже многокоренные. А вот вычленить корень будет не совсем просто. Если поиском вхождения, то может зацепить приставку или суффикс. Лучше не заморачиваться, а купить уже готовое. Дорого, зато наверняка правильно.

Или, если повезёт найти в сети забесплатно.

[kibernetics]

Crio
не всё золото, что блестит,... или
дороже не значит лучше...
спасибо за словарь
попробую догнать до всего сам

[Crio]

Я имел в виду, что на этом рынке цена прямопропорциональна качеству.

[kibernetics]

Crio
это не так

[SSecurity]

А мне кажется нужно всетаки делать рабор ...

При этом нужно иметь в виду следующие факторы:

1. Русские слова как правило можно представить в сл.виде:
[приставка] + корень + [суффикс] + [окончание]
2. В русском языке слово может содержать несколько корней т.е.
[приставка] + корень + соединительная гласная + корень + [суффикс] + [окончание]
3. И опять же в русском языке есть иностранные слова (список которых можно составить)
4. Существует ряд корней для которых есть правила (типа ЛАГ, ЛОЖ)
5. Слово которые будет передано для анализа - не обязательно будет существительным.
6. Насколько я помню со школы .. для вычлинения корня слова нужно подобрать однокоренное слово .... отрезать все лишнее и общая часть будет корнем.

А теперь по пунктам:
Пункт (1) - Список приставок, суфиксов и окончаний в принципе можно сделать. Большую часть слов ты разложить сможешь.
По окончанию, маломальски сможешь определить существительное это или что (и то не всегда) - это (5). Исключить иностранные слова (3) можешь по списку, как и выбрать ряд корней (4). Для реализации (6) нужны слова, похожесть которых ты как-то должен вычленить - если взять большой словарь то сделать можно.

Если опираться на (1) ... то тебе понадобится список основных корней ... без приставок и соффиксов.

С Уважением,
Сергей

[tyomitch]

2. масса слов с приставкой после первого корня, хотя бы "водопровод". Наверняка можно и с суффиксом перед вторым корнем подобрать.

[SSecurity]

Еще и много приставок бывает:)

[Faust]

Некоторую пищу для размышлений по этому поводу я находил в свое время на сайте Национального корпуса русского языка и тех людей, которые писали им ПО.