ИСТИНА

Механизмы функционирования знаковой (понятийной) системы человека изучались на модели формирования искусственных понятий с помощью специально разработанной системы бимодальных стимулов-знаков. Бимодальный состав означающего позволил создать аудиовизуальный семантический конфликт: новый тип знака (конфликтный знак) состоял из аудиальной и визуальной частей от разных знаков. Такая парадигма исследования позволила экспериментально проявить и количественно измерить эффекты семантической аудиовизуальной интеграции и соотнести с ними мозговые процессы, обеспечивающие семантическое кодирование. В результате психофизических экспериментов был статистически подтвержден и количественно описан феномен семантического конфликта, а также выявлены типичные варианты его проявления. Несмотря на то, что реакции испытуемых на аудиовизуальный конфликт можно разделить на четыре типа стратегий восприятия и опознания бимодального знака, показано, что в целом процесс аудиовизуальной интеграции описывается при помощи линейной модели с различными весами аудиального и визуального вклада. Это использовалось для определения роли выявляемых мозговых механизмов путем вычисления оценок отдельно по каждой из составляющих. В результате электрофизиологических экспериментов были получены вызванные потенциалы (ВП) на конфликтный и бесконфликтный стимулы. Для обработки ВП была применена специальная процедура разложения ЭЭГ на корковую и глубинную составляющие (MUFASEL) с последующим дипольным моделированием, в результате чего были надежно локализованы эквивалентные источники электрической активности на всем интервале (700 мс) после включения стимула. С помощью кластерного анализа диполи были разбиты на 15 кластеров, общих для всех испытуемых. В результате корреляционного и факторного анализов мозговой активности (распределение числа диполей, локализуемых в данном локусе на определенном интервале времени) и экспериментальных психофизических оценок стимулов были выявлены три пространственно-динамические функциональные системы мозга. Первая функциональная система включала четыре структуры: область медиальной премоторной коры, область левой верхней височной борозды, левой супрамаргинальной извилины (поле 40 по Бродману), правой латеральной борозды. Вторая система состояла из шести мозговых областей: левой супрамаргинальной извилины (поле 40 по Бродману), правой латеральной борозды, левой верхней височной борозды, область медиальной префронтальной коры (поле 10 по Бродману), задняя часть поясной коры, поле 7 по Бродману. Третья система включала также шесть активных области мозга: левой супрамаргинальной извилины (поле 40 по Бродману), правой латеральной борозды, область медиальной префронтальной коры (поле 10 по Бродману), четверохолмие, задняя часть поясной коры, область правой передней височной коры, таламус и стриатум, область шпорной борозды (V1 и V2 по Зеки). Общее качество предсказания психофизических оценок через совместную активность трех выделенных мозговых функциональных систем характеризуется коэффициентом корреляции с экспериментальными оценками 0.9433. Показано, что первая система в большей степени связана с аудиальной составляющей (r=0.646, p=0.0023), а третья – с визуальной (r=0.8376, p=0.0000) бимодального знака. Роль второй функциональной системы выявлялась через анализ различия в оценке значения конфликтных бимодальных знаков по сравнению с бесконфликтными. Обнаружено, что различия между конфликтными и неконфликтными стимулами по активности этой системы значимо коррелирует (r=0.9747, p=0.0045) с различиями между конфликтными и неконфликтными стимулами по аудиальной составляющей психофизических оценок. Таким образом, вторая система отвечает за контроль и коррекцию системы оценок, т.е. за эффективность аудиовизуальной интеграции.