Второй очень интересный механизм, который был обнаружен еще Павловым, это — явление вторичного подкрепления. Заключается оно в том, что подкрепленный раздражитель, или условный раздражитель сам, в свою очередь, может становиться подкреплением для другого индифферентного раздражителя.
Пусть, например, у собаки выработан условный рефлекс на зажигание лампочки, т.е. она реагирует на нее выделением слюны уже без сопровождения пищи. Теперь делаем так: зажигаем лампочку и одновременно звенит звонок. Достаточно нескольких повторений и уже один только звонок начинает «гнать» у собаки слюну. Здесь, как видим, рефлекс на звонок подкрепляется не самим мясом, а условным раздражителем — лампочкой. Это называют вторичным подкреплением через посредство условного раздражителя. Асам рефлекс называют условным рефлексом второго порядка.
У человека роль такого вторичного подкрепления может выполнять слово, интонация, жест. Так, улыбка учителя, похвала, слово «верно», «молодец» и т.п., сказанные вовремя, активизируют ход научения школьника.
Очень интересные эксперименты на вторичное подкрепление были проведены одним американским ученым с обезьянами. Обезьянам выдали фишки для игры в бридж. Это такие круглые пластмассовые монетки разных цветов — красные, белые, желтые, синие. Бросив монетку в автомат, обезьяна могла за белую — получить апельсин один, за синюю —- два, за красную — глоток воды, за желтую — возвращение в свою клетку и т.д.
Обезьян выдрессировали на это дело, и они совершенно уверенно, когда хотели есть или пить, сейчас же направлялись к нужному автомату, брали соответствующую монету и бросали туда.
Между обезьянами начался обмен монетами. Одна дает другой «апельсинную» монету, та ей дает взамен «водную». Выявились разные характеры. Некоторые обезьяны — транжиры — швыряли сразу все полученные монеты. Половину апельсина съедят, половину разбросают и назавтра «кладут зубы на полку». Другие обезьяны — скаредные — прятали за щеку монеты, копили их там и очень экономно, по одной, только когда хотели кушать, бросали их в автомат и получали пищу.
Заметили несколько случаев, когда самец, обхаживая самку, начинал предлагать ей эти монеты, и самка становилась значительно любезнее.
После этого проделали критический эксперимент. Для того, чтобы получить монеты, обезьяна должна была работать: многократно поднимать довольно с большим трудом тугой рычаг.
Обезьяны между прочим, очень не любят работать, они всячески старались избегать этого колеса. Но когда у обезьяны кончились монеты и хотелось есть, она часами добросовестно трудилась на этом колесе. Получала за это соответствующее количество монет, а потом «покупала» себе на них в автомате бананы.
Рассмотренные механизмы условных рефлексов проливают свет на природу обучаемого поведения, т.е. на навык. Однако, условный рефлекс, все равно классический или оперативный, — это еще не то же самое, что навык.
Рефлекс — это отдельное действие в ответ на раздражитель, а навык — это целая сложная деятельность.
Например, крыса в сложном лабиринте после многократных проб находит, наконец, кратчайший путь и затем всегда бежит уже этим кратчайшим путем. Этот путь может выглядеть так: сначала направо, потом на-лево, потом снова направо, потом прямо, потом — налево и т.д. Ясно, что здесь имеют место не один рефлекс, не одна реакция. Здесь каждый перекресток служит сигналом следующего рефлекса, а в целом развертывается сложная цепь действий. Такими же сложными навыками являются, например, у человека ходьба, речь, письмо, печатание на машинке, вождение автомобиля, управление станком. Короче, почти все виды двигательных действий, которые совершает человек, представляют собой реализацию различных видов навыков.
Как же строится навык?
И здесь, также как в отношении инстинкта, сначала господствовало довольно простое представление. Навык рассматривали просто как цепь условных рефлексов, в которой один условный рефлекс цепляется за другой, завершение одного действия служит сигналом для начала другого.
Иллюстрацией может служить, например, ходьба человека. В рамках приведенной гипотезы механизм ее представляли следующим образом. Прикосновение правой ноги к земле является сигналом, который вызывает действие всего условно-рефлекторного механизма движения левой ноги, и обратно. Так, чередуясь по замкнутому кольцу, действуют несколько двигательных условных рефлексов. Одновременно действует рефлекс сохранения равновесия, связанный с работой вестибулярного аппарата.
Формирование навыка, т.е. научение, с точки зрения этой теории, выглядит, как постепенное «наращивание» условных рефлексов, сцепление их при помощи промежуточных подкреплений.
Эта идея лежит в основе, так называемого, метода последовательных приближений, разработанного Б.Ф. Скиннером. Предположим, что мы хотим выработать у голубя более или менее сложный навык. Например, чтобы он, поставленный на стол, шел к белому экрану, по пути через каждые несколько шагов подпрыгивал, подойдя, кланялся, а затем начинал клевать экран.
Голубя выпускают на стол. Он, естественно, бродит по столу в случайных направлениях. Каждый раз, когда голубь случайно делает шаг, приближающий его к экрану, он получает зернышко. Так вырабатывается оперантный рефлекс приближения к экрану. Затем зернышко начинают давать в тех случаях, когда, направляясь к экрану, голубь случайно подпрыгнет. Затем, когда он случайно опустит голову перед экраном и т.д.
Так оперантные рефлексы у голубя, наращиваясь один на другой, образуют в результате навык довольно сложного поведения.
Итак, по существу, все происходит совершенно случайно. Какие действия из хаотической активности животного закрепятся и как они между собой сцепятся, определяется исключительно воздействиями внешней среды, которая дергает животного, как марионетку, за ниточку подкреплений.
Новейшие исследования показали, однако, что дело обстоит далеко не так просто.
Чтобы определенные действия закрепились, оказалось мало только их подкрепления. Нужна еще врожденная «предрасположенность» животного к такого рода действиям, т.е. соответствие этих действий определенным общим врожденным структурам поведения данного вида животных, определяемым условием их существования.
Так, например, если у собаки брать переднюю лапу и, приговаривая, «дай лапу», подкармливать при этом, то уже после 10—12 подкреплений образуется условный рефлекс. На слова «дай лапу» собака сама поднимает и протягивает ее.
Но если мы попробуем у той же собаки выработать такой же рефлекс с задней ноги, то для этого понадобятся сотни подкреплений.
Почему? Да потому, что в природном поведении собаки движения передней лапы обычно участвуют в добыче пищи, а задней — нет.
Значит, в выработке этого условного рефлекса играют роль не только сами сочетания движения с пищевым подкреплением, но естественная предрасположенность собаки к совершению соответствующих движений при добыче пищи.
Такого рода предрасположения называют диспозициями. Так, например, навык прохождения лабиринтов легко вырабатывается у столь разных организмов как крысы и муравьи, потому что у них по условиям жизни имеется соответствующая диспозиция. Они всю свою жизнь проводят в извилистых сложных ходах, лазах, туннелях. А вот у зайца, который куда ближе к крысе, чем муравей, выработать тот же навык страшно трудно, на сложный лабиринт — вообще невозможно.
Аналогично обстоит дело, например, с усвоением речи. В отличие от всех видов животных, у человека генетически зафиксирована способность научиться говорить. Какой язык и сколько языков он усвоит,^зависит от условий жизни и от обучения. Но сама эта способность научиться говорить определяется врожденной диспозицией, которой нет у других животных. Потому, как показали многочисленные опыты, животные ни при каких условиях не могут научиться речи.
Эта роль врожденных диспозиций особенно наглядно проявляется в некоторых специальных видах научения, открытых в последнее время.
Так, например, известно, что утята везде гуськом следуют за своей мамашей уткой. Ранее считалось, что это инстинкт. Но вот немецкий ученый Лоренц показал, что можно добиться, чтобы утенок повсюду следовал не за матерью, а за любым выбранным нами предметом. Достаточно, чтобы это был первый движущийся предмет, который он увидит после рождения. Поэтому такого рода научение назвали «импринтииг», по-русски — запечатление.
Механизм импринтинга работает только в первые часы или дни жизни. Например, для утят — это первые 14-16 часов жизни. Результаты его необратимы.
Так, утята, которые первым увидели движущегося экспериментатора, после этого ходят только за ним, не обращая внимания на свою мать-утку. Аналогично ягненок, вскармливаемый из бутылочки, реагирует «сыновним» поведением не на овец, а на кормящего его человека. Превращение кошки из неохотящегося животного в охотящееся происходит после первой поимки живой мыши или птицы и является тоже необратимым. Известно, что тигр, однажды попробовавший человеческой крови, навсегда становится людоедом.
