23602

Автоматический морфологический анализ. Соотношение словаря и анализа

Доклад

Иностранные языки, филология и лингвистика

Автоматический морфологический анализ. Соотношение словаря и анализа. Автоматический морфологический анализ АМА анализ отдельно взятой словоформы и всех тех сведений которые из нее можно извлечь безотносительно к тому относятся ли эти сведения к морфологии или нет. АМА определяется двумя факторами: 1 тип ЕЯ подвергаемого анализу 2 тип алгоритма авт.

Русский

2013-08-16

12.5 KB

11 чел.

2. Автоматический морфологический анализ.  Соотношение словаря и анализа.

Автоматический морфологический анализ (АМА)- анализ отдельно взятой словоформы и всех тех сведений, которые из нее можно извлечь безотносительно к тому, относятся ли эти сведения к морфологии или нет.

АМА определяется двумя факторами:

1) тип ЕЯ, подвергаемого анализу

2) тип алгоритма авт. обработки текста

МА начинается с поиска входного слова в словаре и с членения словоформы на составляющие ее морфемы.

Общая схема морфологического анализа:

1. Общие правила (управляющий алгоритм

2. Список (таблицы) суффиксов

3. Список (таблицы) информации к суффиксам

4. Список нестандартных операций (нестандартная запись)

5. Обработка омонимичных основ

Важен тип входного словаря. Учитывая  связь МА со словарем можно выделить следующие группы МА:

1. морфологический анализ со словарем словоформ: каждой словоформе приписывается определенная информация (слово отыскивается. информация извлекается)

2. морфологический анализ со словарем основ (проблемы: анализ найденных в словаре форм, как отождествить разные словоформы одного и того же слова)

сравнение словоформы на полное совпадение  -> нет -> словоформа = основа + окончание. В задачу МА входит разрешение синонимии и омонимии основ

3. МА методом логического умножения (Варга)

Каждой морфеме сопоставляется информация, полученная в результате объединения информации о словоформах, в которые входит данная морфема. Информация о словоформе получается как пересечение или логическая конъюнкция (&) информации о морфемах. входящих в данную словоформу.  Тем самым функция. определенная на множестве словоформ. заменяется на функцию, определенную на множестве морфем.  Такой анализ производится при наличии словаря основ и применяется к флективным языкам. каждой букве соответствует булевый вектор (есть 1, нет 0).  перемножая эти векторы выходят на категорию.

4. независимый МА без словаря словоформ.

Максимальное использование информации о флексиях во флективных языках. выделяются грамматические морфемы (флексии, предлоги, союзы, знаки препинания между словами - все элементы. передающие связи слов во фразе.

Группа флексий, характеризующаяся одинаковым набором грамм. отношений. которые они могут передавать, образует морфему.

флексии, входящие в одну морфему, называются алломорфами, т.е. морфемными синонимами.  Задача алгоритма состоит в том, чтобы по взаимному расположению алломорфов отнести каждую флексию к ее морфеме.  С этой целью строятся специальные словари: словари флексий, словари слов, не несущих грамм. инф. (наречий и т.п.).  Способ имеет ограниченной применение.


 

А также другие работы, которые могут Вас заинтересовать

35427. Феномен мотивации 245.5 KB
  Феномен мотивации 1. Понятия потребности мотива мотивации. Специфика собственно человеческой мотивации 3. Отличительные характеристики мотивации человека 3.
35428. Понятие об ощущении. Роль ощущений в жизнедеятельности людей 223.5 KB
  Любое изменение в среде которое доступно для зрения слуха и других модальностей психологически презентируется в виде ощущения. Если на вкус мы не можем определить продукт сахар мед значит речь идет только об ощущениях. Болевые сигналы почти всегда презентируются как ощущения так как âпостроитьâ образ боли может только человек с очень богатым воображением. âИначе как через ощущения мы ни о каких формах вещества и ни о каких формах движения ничего узнать не можем.
35429. Общее понятие о восприятии. Отличие восприятия от ощущений 264.5 KB
  Отличие восприятия от ощущений 2. Физиологические основы восприятия 3. Свойства восприятия: предметность целостность константность структурность осмысленность избирательность 4. Закономерности восприятия: апперцепция роль моторных компонентов внимание и восприятие 5.
35430. Общие представления о памяти. Круг явлений памяти. Патологии памяти 270 KB
  Процессы памяти проявляются на всех уровнях жизни, поэтому память также называют “общеорганической функцией” (Э. Геринг, Р. Земон); она включает не только процессы сохранения индивидуального опыта, но и механизмы передачи наследственной информации
35431. ПСИХОДИАГНОСТИКА ХАРАКТЕРА И МОТИВАЦИИ 335.5 KB
  В выражении âэто характерно для негоâ содержится смысл что определенные действия поступки человека являются для него типичными закономерными. Еще в IV веке Аристотель сделал попытку описать характер как центральное личностное образование определяющее лицо индивидуальность человека. Характер человека имеет оценочное значение. В психологии характер определяется как совокупность устойчивых индивидуальных свойств человека складывающихся и проявляющихся в деятельности и общении обусловливающая типичные для него способы поведения и...
35432. Психодиагностика. ОБЩЕЕ ПОНЯТИЕ О ПСИХОМЕТРИИ И ОБЛАСТИ ЕЕ ПРИМЕНЕНИЯ 332.5 KB
  Под ВЫБОРКОЙ понимается случайным образом формируемое из генеральной или выборочной совокупности множество заданий или испытуемых. В совокупности сведений характеризующих валидность теста содержится информация об адекватности применяемой модели деятельности с точки зрения отражения в ней изучаемой психологической особенности о степени однородности заданий субтестов включенных в тест их сопоставимости при количественной оценке результатов теста в целом. для проверки нет ли упущений: преобразуйте этот список в перечень заданий...
35433. ОБЩЕЕ ПОНЯТИЕ О ПСИХОДИАГНОСТИКЕ ЛИЧНОСТИ И ПСИХИЧЕСКИХ СВОЙСТВ 378.5 KB
  Понятие о природных особенностях человека Свойства нервной системы находят свое отражение в темпераменте человека. Дальнейшее изучение темперамента развивалось в двух направлениях: изучение индивидуальных свойств и закономерностей работы нервной системы а не телесной организации; применение факторного анализа. В отечественной психологии изучение свойств нервной системы под руководством И.Павлова завершилось выделением типов нервной системы или типов высшей нервной деятельности.
35434. СОЦИАЛЬНАЯ ПСИХОЛОГИЯ 305.5 KB
  Общая характеристика группы в социальной психологии 6 Классификация групп 7 Основные социальнопсихологические характеристики малой группы 10 Структура группы 12 2. Генезис и динамика малой группы 16 Группа как развивающаяся система 16 Механизмы и этапы развития малой группы 16 Проблема коллектива в отечественной социальной психологии . Группа как субъект совместной деятельности 34 Признаки и структура групповой деятельности 34 Социальнопсихологические...
35435. Социальная психология личности 71 KB
  Социально-психологические теории личности в социальной психологии. Парыгина о социальной психологии личности. Содержание социально-психологического исследования личности.