23602

Автоматический морфологический анализ. Соотношение словаря и анализа

Доклад

Иностранные языки, филология и лингвистика

Автоматический морфологический анализ. Соотношение словаря и анализа. Автоматический морфологический анализ АМА анализ отдельно взятой словоформы и всех тех сведений которые из нее можно извлечь безотносительно к тому относятся ли эти сведения к морфологии или нет. АМА определяется двумя факторами: 1 тип ЕЯ подвергаемого анализу 2 тип алгоритма авт.

Русский

2013-08-16

12.5 KB

9 чел.

2. Автоматический морфологический анализ.  Соотношение словаря и анализа.

Автоматический морфологический анализ (АМА)- анализ отдельно взятой словоформы и всех тех сведений, которые из нее можно извлечь безотносительно к тому, относятся ли эти сведения к морфологии или нет.

АМА определяется двумя факторами:

1) тип ЕЯ, подвергаемого анализу

2) тип алгоритма авт. обработки текста

МА начинается с поиска входного слова в словаре и с членения словоформы на составляющие ее морфемы.

Общая схема морфологического анализа:

1. Общие правила (управляющий алгоритм

2. Список (таблицы) суффиксов

3. Список (таблицы) информации к суффиксам

4. Список нестандартных операций (нестандартная запись)

5. Обработка омонимичных основ

Важен тип входного словаря. Учитывая  связь МА со словарем можно выделить следующие группы МА:

1. морфологический анализ со словарем словоформ: каждой словоформе приписывается определенная информация (слово отыскивается. информация извлекается)

2. морфологический анализ со словарем основ (проблемы: анализ найденных в словаре форм, как отождествить разные словоформы одного и того же слова)

сравнение словоформы на полное совпадение  -> нет -> словоформа = основа + окончание. В задачу МА входит разрешение синонимии и омонимии основ

3. МА методом логического умножения (Варга)

Каждой морфеме сопоставляется информация, полученная в результате объединения информации о словоформах, в которые входит данная морфема. Информация о словоформе получается как пересечение или логическая конъюнкция (&) информации о морфемах. входящих в данную словоформу.  Тем самым функция. определенная на множестве словоформ. заменяется на функцию, определенную на множестве морфем.  Такой анализ производится при наличии словаря основ и применяется к флективным языкам. каждой букве соответствует булевый вектор (есть 1, нет 0).  перемножая эти векторы выходят на категорию.

4. независимый МА без словаря словоформ.

Максимальное использование информации о флексиях во флективных языках. выделяются грамматические морфемы (флексии, предлоги, союзы, знаки препинания между словами - все элементы. передающие связи слов во фразе.

Группа флексий, характеризующаяся одинаковым набором грамм. отношений. которые они могут передавать, образует морфему.

флексии, входящие в одну морфему, называются алломорфами, т.е. морфемными синонимами.  Задача алгоритма состоит в том, чтобы по взаимному расположению алломорфов отнести каждую флексию к ее морфеме.  С этой целью строятся специальные словари: словари флексий, словари слов, не несущих грамм. инф. (наречий и т.п.).  Способ имеет ограниченной применение.


 

А также другие работы, которые могут Вас заинтересовать

43694. Проектирование АСУ ОАО «ГСК «Югория» и разработка конкретных проектных решений по одной из подсистем АСУ 271.67 KB
  Процесс создания АСУ – это последовательное внедрение более совершенных, научно-обоснованных методов управления и средств вычислительной техники с целью увеличения эффективности производства и повышения производительности труда. Экономико-математические методы оптимального планирования и управления, средства автоматизированной обработки больших объемов информации становятся неотъемлемой частью структур управления, способом их функционирования.
43695. Разработка рекомендаций по совершенствованию конкурентоспособности ООО «НЗЖБИ имени Иванова Г.С.» на рынке 318.92 KB
  Организационно-экономическая характеристика предприятия Изучение конкурентоспособности предприятия представляет собой одну из важнейших составных частей рыночных исследований создающих основу для выработки стратегии и тактики деятельности на рынке выбора правильного пути повышения технического уровня и качеств. Именно по этой причине большую актуальность приобретают исследования в области конкурентоспособности предприятия поиск путей её повышения. разработать рекомендации по совершенствованию конкурентоспособности предприятия на...
43696. Таймер керування водяним насосом 233.02 KB
  Розрахунок ЗІП повинен проводитись по встановленим нормам.1 Логічний розрахунок JKтригера. Необхідно виконати розрахунок jk тригера.2Конструктивний розрахунок таймеру керування водяним насосом 5.
43697. Внутрисхемное программирование 288.79 KB
  Программатор, использующий интерфейс SPI, необходимо подключить к объекту, используя как можно меньшее количество проводов. Для подключения программатора микроконтроллеров AVR непосредственно к печатной плате используется шестипроводной интерфейс.
43698. Разработка методических рекомендаций и практических предложений по совершенствованию направлений деятельности коммерческих банков с ценными бумагами 208.69 KB
  Возникают совершенно новые оригинальные виды банковских операций и услуг связанных с новыми типами финансовых инструментов выраженных в форме различных ценных бумаг. Активное участие коммерческих банков на рынке ценных бумаг во многом меняет содержание их операций придает их деятельности более выраженный рыночный характер. С помощью операций с ценными бумагами коммерческие банки могут направлять инвестиции в производство в торговый оборот а также финансировать государственные расходы. Во многих регионах России особенно депрессивных...
43699. Проектирование системы электроснабжения электрооборудования и электрохозяйства станкостроительного завода «Луч» 3.17 MB
  Здесь для реализации технологического процесса используется прежде всего оборудование связанное с обработкой металлов токарные фрезерные станки станки типа обрабатывающий центр шлифовальные станки печи плавки металла для литья и т. Потребителями электрической энергии в этом технологическом оборудовании являются прежде всего асинхронный двигатели с короткозамкнутым ротором малой и средней мощности двигатели постоянного тока малой мощности нагревательные элементы. В состав перечисленного оборудования входят асинхронные двигатели и...
43700. Центр реабилитации в городе Берн, Швейцария 3.87 MB
  Проложить хорошую связь между жилым районом Альтенберг и рекой. Обеспечить удобный и безопасный доступ к реке Ааре. Великолепная долина реки Ааре, лесистый склон и исторический городской памятник в настоящее время недоступны для всех горожан.
43701. Проектирование технологического процесса обработки вала червячного, который входит в состав одноступенчатого червячного редуктора 4.67 MB
  Выбор заготовки Техникоэкономическое обоснование способа получения заготовки. Техникоэкономическое обоснование метода получения заготовки. Например для машиностроительной продукции к числу таких факторов относят: точность оборудования; жесткость системы станокприспособление инструментдеталь; посторонние включения в материал заготовки; температурные колебания; квалификация обслуживающего персонала; погрешность режущего инструмента; режимы механической обработки; точность соблюдения параметров предварительной термической обработки и др.
43702. Разработка путей улучшения управлением финансового состояния «Российского Союза Автостраховщиков» 509.73 KB
  Система показателей и методов характеризующих финансовое состояние предприятия Анализ финансового состояния Российский Союз Автостраховщиков Организационно-экономическая характеристика Российского Союза Автостраховщиков Анализ финансового состояния Российского Союза Автостраховщиков Оценка потенциальной неплатежеспособности РСА Разработка путей улучшения управлением финансового состояния Российского Союза Автостраховщиков.