Inżynieria lingwistyczna Komputerowe przetwarzanie tekstów w języku natural

Лингвистическая инженерия — одно из многих названий области, которая предполагает попытки автоматизировать обработку данных на естественном языке. Основными задачами, рассматриваемыми в настоящее время, являются поиск, классификация и отбор информации, выраженной с помощью естественного языка, а также машинный перевод текстов с одного языка на другой, обобщение и анализ речи. Исследования, связанные с этими приложениями, касаются описания различных уровней знаний о языке: морфологии, синтаксиса, семантики и прагматики высказываний естественного языка, построения лингвистических ресурсов одноязычных и многоязычных словарей, больших корпусов текстов, размеченных различными типами информации, и создания программы для анализа лингвистических данных.

Эта книга содержит введение в большинство задач, связанных с анализом текстов на естественном языке, и краткое описание наиболее популярных в настоящее время методов их решения. Представлены два основных направления исследований: формальное описание языка и управляющих им законов и статистические методы, игнорирующие проблему понимания текста в пользу анализа частоты выбранных зависимостей. Книга описывает вопросы в области компьютерной лингвистики и предназначена как для людей, интересующихся формальным описанием языка, так и для тех, кто хочет создавать приложения, работающие с текстовыми данными.

Целью автора было представить создателям ИТ-систем проблемы, возникающие при обработке данных, выраженные на естественном языке, а также указать направление поиска решений. Большинство тем описаны с базового уровня, поэтому для понимания учебника не требуется никаких лингвистических знаний. Люди, интересующиеся формальной лингвистикой и небольшим опытом работы в сфере информационных технологий, также смогут найти здесь много интересной информации.