Структурный анализ текста

Глава 1Цель настоящей статьи: описать метод формального анализа текста (далее - АТ).Основная задача АТ — это работа со смыслами текстов.Анализ должен показать смысл текста, как явный, т.е. высказанный в словах, так и неявный, т.е. подразумеваемый автором или даже не осознаваемый им, но вкладываемый в текст подсознательно.Показать – буквально – значит, выделить те фрагменты текста, в которых содержится основной смысл.1.0. Как это достигается.Метод основан на оценке статистического распределения знаков разных видов и групп по тексту. Мы исходим из следующего утверждения: если рассматривать текст как сумму разнообразных сигналов о состоянии некоего объекта и об изменениях этого состояния, то изменения параметров этих сигналов должно как-то коррелировать с содержанием и со смыслом (в частности – функцией, задачей) текста.Иными словами, мы утверждаем, что если, например, в одной части текста…