23602

Автоматический морфологический анализ. Соотношение словаря и анализа

Доклад

Иностранные языки, филология и лингвистика

Автоматический морфологический анализ. Соотношение словаря и анализа. Автоматический морфологический анализ АМА анализ отдельно взятой словоформы и всех тех сведений которые из нее можно извлечь безотносительно к тому относятся ли эти сведения к морфологии или нет. АМА определяется двумя факторами: 1 тип ЕЯ подвергаемого анализу 2 тип алгоритма авт.

Русский

2013-08-16

12.5 KB

9 чел.

2. Автоматический морфологический анализ.  Соотношение словаря и анализа.

Автоматический морфологический анализ (АМА)- анализ отдельно взятой словоформы и всех тех сведений, которые из нее можно извлечь безотносительно к тому, относятся ли эти сведения к морфологии или нет.

АМА определяется двумя факторами:

1) тип ЕЯ, подвергаемого анализу

2) тип алгоритма авт. обработки текста

МА начинается с поиска входного слова в словаре и с членения словоформы на составляющие ее морфемы.

Общая схема морфологического анализа:

1. Общие правила (управляющий алгоритм

2. Список (таблицы) суффиксов

3. Список (таблицы) информации к суффиксам

4. Список нестандартных операций (нестандартная запись)

5. Обработка омонимичных основ

Важен тип входного словаря. Учитывая  связь МА со словарем можно выделить следующие группы МА:

1. морфологический анализ со словарем словоформ: каждой словоформе приписывается определенная информация (слово отыскивается. информация извлекается)

2. морфологический анализ со словарем основ (проблемы: анализ найденных в словаре форм, как отождествить разные словоформы одного и того же слова)

сравнение словоформы на полное совпадение  -> нет -> словоформа = основа + окончание. В задачу МА входит разрешение синонимии и омонимии основ

3. МА методом логического умножения (Варга)

Каждой морфеме сопоставляется информация, полученная в результате объединения информации о словоформах, в которые входит данная морфема. Информация о словоформе получается как пересечение или логическая конъюнкция (&) информации о морфемах. входящих в данную словоформу.  Тем самым функция. определенная на множестве словоформ. заменяется на функцию, определенную на множестве морфем.  Такой анализ производится при наличии словаря основ и применяется к флективным языкам. каждой букве соответствует булевый вектор (есть 1, нет 0).  перемножая эти векторы выходят на категорию.

4. независимый МА без словаря словоформ.

Максимальное использование информации о флексиях во флективных языках. выделяются грамматические морфемы (флексии, предлоги, союзы, знаки препинания между словами - все элементы. передающие связи слов во фразе.

Группа флексий, характеризующаяся одинаковым набором грамм. отношений. которые они могут передавать, образует морфему.

флексии, входящие в одну морфему, называются алломорфами, т.е. морфемными синонимами.  Задача алгоритма состоит в том, чтобы по взаимному расположению алломорфов отнести каждую флексию к ее морфеме.  С этой целью строятся специальные словари: словари флексий, словари слов, не несущих грамм. инф. (наречий и т.п.).  Способ имеет ограниченной применение.


 

А также другие работы, которые могут Вас заинтересовать

26756. Судово-психологічна експертиза 56.25 KB
  Судово-слідчій практиці відомі випадки проведення судово-психологічної експертизи у відсутності людини, наприклад, коли підекспертного вмирає до суду. Посмертна експертиза здійснюється лише за матеріалами справи...
26757. лассификация организационных структур государственного управления 33.5 KB
  Организационная структура государственного управления это особое государственноправовое явление обусловленное общественнополитической природой социальнофункциональной ролью целями и содержанием государственного управления в обществе. В качестве системообразующего элемента организационной структуры государственного управления выступает государственный орган связанный с формированием и реализацией государственноуправляющих воздействий. Основу организационной структуры государственного управления составляют органы исполнительной власти.
26758. Этапы принятия управленческих решений: содержание и сущностные особенности 26 KB
  Это подготовка принятие и реализация решения. Построение взаимоотношений в организации для решения проблемы формирование команды для подготовки решения. Принятие решения руководителем. Конкретизация решения его дезагрегирование для более низких уровней управления.
26760. Управленческая процедура и ее виды 26.5 KB
  Под процедурой понимается набор действий операций с помощью кот. Управленческая процедура документально зафиксированная последовательность выполнения элементов управленческого процесса определяющая состав очередность содержание составляющих его операций. Понятие процедура отражает порядок подготовки рассмотрения обсуждения выполнения ряда последовательных и параллельных операций в процессе управления предписание о порядке выполнения какойлибо работы в аппарате управления. Понятие технология управления тесно связано с процессом...
26761. Понятие и классификация основных (конституционных) прав человека 96 KB
  Основной закон государства - Конституция, в первой своей главе «Основы конституционного строя» декларирует положение о том, что «Человек, его права и свободы являются высшей ценностью. Признание, соблюдение и защита прав и свобод человека и гражданина – обязанность государства
26762. Система государственной службы 28.5 KB
  Государственная служба Российской Федерации далее государственная служба профессиональная служебная деятельность граждан Российской Федерации далее граждане по обеспечению исполнения полномочий: Российской Федерации; федеральных органов государственной власти иных федеральных государственных органов далее федеральные государственные органы; субъектов Российской Федерации; органов государственной власти субъектов Российской Федерации иных государственных органов субъектов Российской Федерации далее государственные органы...
26763. Глубокие трансформационные процессы, переход России на путь демократического развития 34.5 KB
  Решение этих задач было невозможно без формирования гражданского общества призванного формировать социальнополитическую активность личности и уравновесить государственное влияние различными формами самоорганизации и самоуправления. Эта идея органично вписывалась в процессы становления глобального информационного общества поскольку в значительной степени базировалась на ключевых особенностях информационной цивилизации. Абсолютно недостаточным следует признать и информационное взаимодействие власти и общества. Они могли бы стать одним из...