ПОИСК Статьи Рисунки Таблицы Структурные преобразования текстовой формы из "Куда идешь, Человек Основы эволюциологии Информационный подход" Рассмотрев характеристики идеальных ИС (см. (2.8) - (2.13) основного текста) необходимо все же найти способы для их практической реализации. Нашей группой разработаны два преобразования текстовой формы (иерархически-сетевая рекурсия и нейролингвистическое преобразование), которые удовлетворяют требованиям для построения ИС 3-го класса. [c.225] Идея метода. Чтобы понять идею НСС, рассмотрим формирование НСС на произвольной текстовой последовательности 1(а) длины I, начиная с 1о. [c.225] На отрезках 8 построим словарь 8(8). Вместо отрезков 8 в текстовой последовательности 1(а) поставим их номера (индексы, ссылки) в словаре 8. В результате исходная последовательность 1(а) перейдет в последовательность ссылок, аналогичную 1(а), но более короткую (в к раз меньше), и словарь 81. [c.225] Проводя такую же процедуру, но уже с последовательностью ссылок, мы получаем новую последовательность ссылок но уже в к раз более короткую (//к ), чем исходная 1(а), и иерархическую структуру словарей 81 и 82. [c.225] Многократно, а точнее, N=[ logk / ] раз повторяя эту процедуру мы получаем N-уровневую иерархическую структуру словарей и преобразованную исходную текстовую последовательность 1(а) длиной в один символ-код, который всегда равен единице и соответственно его можно опустить. Т.е. вся исходная текстовая последовательность 1(а) перешла в иерархическую структуру словарей (многодольный граф). [c.226] Проводя это взаимно-однозначное преобразование в обратном порядке, мы из иерархической структуры словарей получаем исходную 1(а) длиной в / символов. [c.226] На первом шаге выберем некоторую длину, например ki=2, и разделим исходную последовательность длиной /о на подпоследовательности (цепочки) по к символов. [c.226] Каждую уникальную цепочку по ki символов занесем в словарь (Li - 1-й слой НСС), а вместо нее поставим ссылку на эту цепочку символов в словаре. [c.226] В результате исходная последовательность символов превратится в последовательность ссылок (А) и словарь (Ь1), причем число элементов в последовательности ссылок 1 в к раз меньше, чем число символов в исходном тексте /о. [c.227] Повторим эту процедуру. Разделим последовательность ссылок /1 по кг (к2=2) ссылок и сформируем новый иерархический словарь, представляющий совокупность словарей и Ьг. [c.227] В результате получим последовательность ссылок /г на словарь Ьг и два словаря Ь и Ьг, причем, число элементов в этой последовательности (/2) в к2 раз меньше, чем число элементов в последовательности/). [c.227] Все словари (слои) этой НСС строятся по одному принципу, кроме А (или 1-го) словаря. Этот словарь является терминальным и служит для интерфейса между НСС и исходным текстом /о. [c.229] НСС и исходный текст /о являются взаимопереводимыми и эквивалентными с точки зрения содержащейся в них информации, но НСС обладает рядом полезных свойств, которые заслуживают особого рассмотрения, а соответственно и НСС. [c.229] Механизм адаптации длины отрезков иерархически-сетевого преобразования текстовой формы с цепью повышения эффектив-ности соотношения (ПЗАЛ) мы назвали нейро-лингвистическим преобразованием. [c.230] Суть его в следующем на все элементы словарей НСС ставятся счетчики, которые подсчитывают сколько раз (ф использовался этот элемент словаря в процессе нейро-лингвистического преобразования НЛС преобразования. [c.230] Затем в каждом словаре (81, 82. 8Ы) вводится некоторый порог с1р (в половину от частоты максимального числа ётах использования элементов в данном словаре). Затем помечаются все элементы словарей, частота активации которых превышает др. [c.230] Далее осуществляется итеративный прогон уже обработанной текстовой последовательности (или же берется следующая порция) 1(а) и закрашиваются участки ( ), соответствующие активным элементам словаря 81. [c.230] Со всеми незакрашенными (=) участками 1(а) между закрашенными осуществляется вышеописанное НСС преобразование. Для всех остатков, меньших к (на рисунке показанных как к), формируются неполные элементы словаря 81, Аналогичная процедура повторяется для словаря 82,83. 8Ы. [c.230] Затем опять подсчитываются частоты использования элементов словарей, опять происходит закраска содержания соответствующая наиболее активными элементам словаря, и т.д., до тех пор, пока не получается минимальная структура иерархических словарей, тем самым максимизируя отношение (ПЗА.1). При этом формируется нейро-лингвистическая структура (НЛС) с элементами иерархических словарей с переменной длиной элементов (к). [c.231] Вернуться к основной статье