Рис. 4. Классификация подкреплений, на которые могут образовываться условные рефлексы
Каждый условный рефлекс, в свою очередь, может стать основой для образования нового условного рефлекса. Новая условная реакция, выработанная с помощью подкрепления сигнала другим условным рефлексом, называется условным рефлексом второго порядка. Условный рефлекс второго порядка, в свою очередь, можно использовать в качестве основы для выработки условного рефлекса третьего порядка и т.д.
Условные рефлексы второго, третьего и далее порядков широко распространены в природе. Они составляют наиболее значительную и совершенную часть натуральных условных рефлексов. Например, когда волчица кормит волчонка мясом растерзанной добычи, у него вырабатывается натуральный условный рефлекс первого порядка. Вид и запах мяса становятся для него сигналом еды. Затем он «учится» охоте. Теперь эти сигналы — вид и запах мяса пойманной добычи — играют роль основы для выработки охотничьих приемов подстерегания и преследования живой добычи. Так приобретают свое вторичное сигнальное значение разнообразные охотничьи признаки: обглоданный зайцем кустик, следы отбившейся от стада овцы и т.д. Они становятся раздражителями условных рефлексов второго порядка, выработанных на основе натуральных.
Наконец, исключительное разнообразие условных рефлексов, подкреплением которых служат другие условные рефлексы, встречается в высшей нервной деятельности человека. Более подробно они будут рассмотрены в гл. 17. Здесь лишь необходимо отметить, что в отличие от условных рефлексов животных условные рефлексы человека образуются не на основе безусловных пищевых, оборонительных и других подобных рефлексов, а на основе словесных сигналов, подкрепляемых результатами совместной деятельности людей. Поэтому мысли и поступки человека направляются не животными инстинктами, а мотивами его жизни в человеческом обществе.
Условные рефлексы, выработанные при разном соответствии во времени сигнала и подкрепления. По тому, как располагается во времени сигнал относительно подкрепляющей реакции, различают наличные и следовые условные рефлексы (рис. 5).
Рис. 5. Варианты временного соотношения сигнала и подкрепления. А — наличный совпадающий; Б — наличный отставленный; В — наличный запаздывающий; Г — следовой условной рефлекс:
сплошной линией обозначено время действия сигнала, прерывистой линией — время подкрепления
Наличными называют условные рефлексы, при выработке которых подкрепление применяют во время действия сигнального раздражителя. Наличные рефлексы разделяют в зависимости от срока присоединения подкрепления на совпадающие, отставленные и запаздывающие. Совпадающий рефлекс вырабатывается тогда, когда сразу после включения сигнала к нему присоединяют подкрепление. Например, при работе со слюнными рефлексами собаки включают звонок, а примерно через 1 с начинают собаку кормить. При таком способе выработки рефлекс образуется быстрее всего и скоро укрепляется.
Отставленный рефлекс вырабатывается в тех случаях, когда подкрепляющая реакция присоединяется лишь по истечении некоторого времени (до 30 с). Это наиболее употребительный способ выработки условных рефлексов, хотя он требует большего числа сочетаний, чем способ совпадения.
Запаздывающий рефлекс вырабатывается при присоединении подкрепляющей реакции после длительного изолированного действия сигнала. Обычно такое изолированное действие продолжается 1–3 мин. Этот способ выработки условного рефлекса еще труднее, чем оба предыдущих.
Следовыми называют условные рефлексы, при выработке которых подкрепляющую реакцию предъявляют лишь спустя некоторое время после выключения сигнала. В этом случае рефлекс вырабатывается на след от действия сигнального раздражителя; используют короткие интервалы (15–20 с) или длинные (1–5 мин). Образование условного рефлекса по следовому способу требует наибольшего числа сочетаний. Зато следовые условные рефлексы обеспечивают у животных весьма сложные акты приспособительного поведения. Примером может служить охота за скрывающейся добычей.
Условия выработки временных связей
Какие условия должны быть соблюдены, чтобы деятельность высших отделов центральной нервной системы могла завершаться выработкой условного рефлекса?
Сочетание сигнального раздражителя с подкреплением. Это условие выработки временных связей выявилось с первых же опытов со слюнными условными рефлексами. Шаги служителя, несущего пищу, только тогда вызывали «психическое слюноотделение», когда они сочетались с едой.
Этому не противоречит образование следовых условных рефлексов. Подкрепление сочетается в таком случае со следом возбуждения нервных клеток от ранее включенного и уже выключенного сигнала. Но если подкрепление станет опережать индифферентный раздражитель, то условный рефлекс удается выработать с большим трудом, лишь принимая ряд специальных мер. Это и понятно, так как если собаку сначала покормить, а потом дать сигнал еды, то, строго говоря, он даже не может называться сигналом, так как не предупреждает о предстоящих событиях, а отражает прошедшее. При этом безусловный рефлекс подавляет сигнальное возбуждение и препятствует образованию условного рефлекса на такой раздражитель.
Индифферентность сигнального раздражителя. Агент, выбранный в качестве условного раздражителя пищевого рефлекса, не должен сам по себе иметь какое-либо отношение к пище. Он должен быть безразличным, т.е. индифферентным, для слюнных желез. Сигнальный раздражитель не должен вызывать значительной ориентировочной реакции, мешающей образованию условного рефлекса. Однако ориентировочную реакцию вызывает каждый новый раздражитель. Поэтому для утраты им новизны его необходимо применять повторно. Лишь после того, как ориентировочная реакция будет практически погашена или сведена к незначительной величине, начинается образование условного рефлекса.
Преобладание силы возбуждения, вызванного подкреплением. Сочетание стука метронома и кормления собаки ведет к быстрому и легкому образованию у нее условного слюноотделительного рефлекса на этот звук. Но если пытаться сочетать с едой оглушительный стук механической трещотки, то такой рефлекс образовать чрезвычайно трудно. Для выработки временной связи большое значение имеет соотношение силы сигнала и подкрепляющей реакции. Чтобы между ними образовалась временная связь, очаг возбуждения, создаваемый последней, должен быть сильнее очага возбуждения, создаваемого условным раздражителем, т.е. должна возникать доминанта. Лишь тогда произойдет распространение возбуждения от очага индифферентного раздражителя к очагу возбуждения от подкрепляющего рефлекса.
Необходимость значительной интенсивности возбуждения именно подкрепляющей реакции имеет глубокий биологический смысл. В самом деле, условный рефлекс — это предупредительная реакция на сигнал о предстоящих существенных событиях. Но если раздражитель, который хотят сделать сигналом, оказывается событием даже более существенным, чем те, которые за ним последуют, то этот раздражитель сам вызывает соответствующую реакцию организма.
Отсутствие посторонних раздражителей. Каждое постороннее раздражение, например неожиданно донесшийся шум, вызывает уже упоминавшуюся ориентировочную реакцию. Собака настораживается, поворачивается в направлении звука и, главное, прекращает свою текущую деятельность. Животное все обращено навстречу новому раздражителю. Недаром И.П. Павлов называл ориентировочную реакцию рефлексом «Что такое?». Напрасно в это время экспериментатор будет подавать сигнал и предлагать собаке пищу. Условный рефлекс будет задержан более важным в данный момент для животного — ориентировочным рефлексом. Эта задержка создается дополнительным очагом возбуждения в коре мозга, который тормозит условное возбуждение и препятствует образованию временной связи. В природе множество таких случайностей влияет на ход образования условных рефлексов животных. Отвлекающая обстановка снижает продуктивность и умственной работы человека.
Нормальная работоспособность нервной системы. Полноценная замыкательная функция возможна при условии, если высшие отделы нервной системы находятся в нормальном рабочем состоянии. Метод хронического эксперимента потому и дал возможность обнаружить и изучить процессы высшей нервной деятельности, что при этом сохранялось нормальное состояние животного. Работоспособность нервных клеток мозга резко снижается при недостаточном питании, при действии ядовитых веществ, например бактериальных токсинов при болезнях, и т.д. Поэтому общее состояние здоровья является важным условием нормальной деятельности высших отделов мозга. Всем известно, как это условие влияет на умственную работу человека.
