Лингвистические проблемы создания информационных систем. Лингвистика и искусственный интеллект.

Итак, лингвистику условно принято подразделять на теоретическую, иногда ее еще называют «научная лингвистика», или «теория языкознания», и прикладную (практическую) лингвистику, которая в наиболее общем виде определяется как деятельность по приложению научных знаний об устройстве и функционировании языка в различных нелингвистических научных дисциплинах, в различных сферах практической деятельности человека, а также теоретическое осмысление такой деятельности.

В СССР термин прикладная лингвистика стал широко употребляться в 50-е гг. в связи с разработкой компьютерных технологий и появлением систем автоматической обработки информации.

В настоящее время прикладная лингвистика понимается как деятельность по приложению научных знаний об устройстве и функционировании языка в нелингвистических научных дисциплинах и в различных сферах практической деятельности человека, а также теоретическое осмысление такой деятельности.

Объект исследования прикладной лингвистики – анализ языка в его естественном состоянии в процессе использования людьми в различных ситуациях общения, а также анализ того, как особенности языка могут быть сформулированы.

Предмет исследования прикладной лингвистики – конструктивное познание системных принципов устройства языка, разработка и совершенствование структурных и формальных методов анализа и описания языка.

Связь прикладной лингвистики с общим языкознанием

Изначально прикладная лингвистика реализовывала идеи и теории общего языкознания. В наши дни, однако, существует следующее разделение: классические лингвистические исследования занимаются описанием и изучением языка на уровне прямого наблюдения (например, восприятия речи и речепроизводства), а прикладная лингвистика занимается предельной детализацией языка на уровне трудно-наблюдаемых и ненаблюдаемых лингвистических объектов (например, морфемный уровень, синтаксический уровень).

Первая методологическая функция прикладной лингвистики по отношению к теоретическому языкознанию состоит в выработке критериев истинности в ходе познания объективной лингвистической действительности: от живого созерцания к абстрактному мышлению, и от абстрактного мышления к практике.

Этапы лингвистического познания:1.диалектология, история языка, описательная фонетика, лексикология, грамматика. Эти разделы осуществляют накопление и первичную обработку языковых и речевых фактов.2.Теоретическая лингвистика обобщает и гипотетически осмысливает все эти факт, создаёт теоретические концепции языка и текстообразования.3.Прикладная лингвистика проверяет на практике состоятельность гипотез общего языкознания.

Вторая методологическая функция прикладной лингвистики: инженерно-лингвистическое моделирование, перенося язык на непривычный для него субстрат, обнажает скрытый от прямого наблюдения теоретический парадокс и намечает пути его решения.

Третья методологическая функция: прикладная лингвистика служит тем каналом, через который осуществляется обмен идеями и методами между языкознанием и естественно-техническими науками. Например, использование теории информации и математической статистики для решения чисто лингвистических задач. Специалисты по вычислительной технике зачастую обращаются к лингвистике, т.к. нуждаются в разработке языков программирования, а также организации удобных форм общения человека и машины.

Компоненты прикладной лингвистики:Теория и практика перевода,Машинный перевод,Теория и практика преподавания родного и неродного языка, лингводидактика,Теория и практика создания информационно-поисковых систем,Теория кодирования,Социолингвистика,Теория воздействия и теория аргументации,Политическая лингвистика,Лексикография, в том числе автоматическая,Терминология и терминография,Полевая лингвистика,Гипертекстовые технологии,Компьютерная лингвистика,Лингвистическая криминология,Психолингвистика,Квантитативная лингвистика,Создание искусственных языков,Поддержка коммуникации с помощью технических средств,Аннотирование, реферирование и классификация текстов,Распознавание символов текста

Основные исследовательские задачи прикладной лингвистики:

1. Создание лингво-процессоров – систем автоматического анализа и синтеза речи и текстов на естественном языке. Сюда же входит разработка основных компонентов лингво-процессора: морфологического, семантического и синтаксического анализаторов. Синтаксический анализатор – учитывает синтаксическую информацию, лексическую информацию, сочетаемость, семантику, валентности слов и т.д. В результате – построение дерева зависимостей.Семантический анализатор – осуществляет переход к глубинной семантико-синтаксической структуре предложения после использования правил синтаксического перефразирования. В результате – составление семантической сети и её сопоставление с базой данных автоматических информационных систем

2. Машинный перевод – построение плана выражения на основе плана содержания на различных естественных языка. В идеале, вообще без участия человека.3.Прикладная лексикология и машинная лексикография – автоматическое составление словарей для разработки автоматических информационно-поисковых систем машинного перевода.4.Системы автоматического анализа и синтеза речи, т.е. разработка естественноязыкового интерфейса. Здесь распознавание речи требует привлечения всех уровней языка.5.Автоматические обучающие системы – направлены на повышение качества и обучения

Искусственный интеллект - раздел компьютерологии / информатики, разрабатывающий "разумные" компьютерные системы, т.е. системы, проявляющие характеристики разумности в человеческом поведении (понимание языка, обучение, рассуждение, решение задач и т.п., а также этические асᴨȇкты, а также результат исследований в данной области знаний (то есть способность компьютера осуществлять оᴨȇрации, аналогичные процессам обучения и принятия решений человеком. Время его появления как научной дисциплины -- начало 70-х гг. XX столетия. В сферу интересов сᴨȇциалистов в области искусственного интеллекта входят те лингвистические исследования, которые тесно связаны с психологией. Эту пограничную область активно исследует психолингвистика. Ее результаты касаются моделирования общения не только с помощью естественного языка, но и с использованием иных средств (жестов, мимики, интонации и т. п.).Сᴨȇциальная наука, которая изучает общие свойства различных систем, способных описывать явления окружающего мира и его законы, называется семиотикой. Понятно, что к семиотике сᴨȇциалисты по искусственному интеллекту проявляют не меньший интерес, чем к психологии или лингвистике.

Проблема лингвистического обесᴨȇчения искусственного интеллекта во многом кроется в том, что до сих пор точно неясны механизмы получения, ᴨȇреработки, хранения и ᴨȇредачи информации человеком. Теория интерпретации и вычислительная лингвистика - это именно те области лингвистики и психолингвистики, на ᴨȇресечении котоҏыҳ находится решение данной проблемы. Когда станет известна и понятна система естественной интерпретации языка, тогда можно будет создать искусственную систему, идентичную ей. Построение процессора естественного языка - одна из наиболее актуальных проблем современной вычислительной лингвистики и создания искусственного интеллекта. Эта проблема порождена информационным взрывом, ᴨȇреживаемым человечеством сегодня: зачастую легче бывает выяснить какой-либо факт (доказать теорему, решить уравнение и т.п.) или сконструировать какое-либо приспособление непосредственно самому, чем извлечь нужный рецепт из существующей литературы. В частности, на сегодняшний день не существует пока еще даже такой системы, которая для произвольного текста на данном (скажем, русском) языке давала бы полный его морфологический анализ (для произвольно большого, а не ограниченного словаря) или полный его словарь. Последние 20 лет в центре внимания вычислительной лингвистики находится вопрос о моделировании той деятельности человека, результатом которой является речь.