Рис. 5. Варианты временного соотношения сигнала и подкрепления. А — наличный совпадающий; Б — наличный отставленный; В — наличный запаздывающий; Г — следовой условной рефлекс:
сплошной линией обозначено время действия сигнала, прерывистой линией — время подкрепления
Наличными называют условные рефлексы, при выработке которых подкрепление применяют во время действия сигнального раздражителя. Наличные рефлексы разделяют в зависимости от срока присоединения подкрепления на совпадающие, отставленные и запаздывающие. Совпадающий рефлекс вырабатывается тогда, когда сразу после включения сигнала к нему присоединяют подкрепление. Например, при работе со слюнными рефлексами собаки включают звонок, а примерно через 1 с начинают собаку кормить. При таком способе выработки рефлекс образуется быстрее всего и скоро укрепляется.
Отставленный рефлекс вырабатывается в тех случаях, когда подкрепляющая реакция присоединяется лишь по истечении некоторого времени (до 30 с). Это наиболее употребительный способ выработки условных рефлексов, хотя он требует большего числа сочетаний, чем способ совпадения.
Запаздывающий рефлекс вырабатывается при присоединении подкрепляющей реакции после длительного изолированного действия сигнала. Обычно такое изолированное действие продолжается 1–3 мин. Этот способ выработки условного рефлекса еще труднее, чем оба предыдущих.
Следовыми называют условные рефлексы, при выработке которых подкрепляющую реакцию предъявляют лишь спустя некоторое время после выключения сигнала. В этом случае рефлекс вырабатывается на след от действия сигнального раздражителя; используют короткие интервалы (15–20 с) или длинные (1–5 мин). Образование условного рефлекса по следовому способу требует наибольшего числа сочетаний. Зато следовые условные рефлексы обеспечивают у животных весьма сложные акты приспособительного поведения. Примером может служить охота за скрывающейся добычей.
Условия выработки временных связей
Какие условия должны быть соблюдены, чтобы деятельность высших отделов центральной нервной системы могла завершаться выработкой условного рефлекса?
Сочетание сигнального раздражителя с подкреплением.Это условие выработки временных связей выявилось с первых же опытов со слюнными условными рефлексами. Шаги служителя, несущего пищу, только тогда вызывали «психическое слюноотделение», когда они сочетались с едой.
Этому не противоречит образование следовых условных рефлексов. Подкрепление сочетается в таком случае со следом возбуждения нервных клеток от ранее включенного и уже выключенного сигнала. Но если подкрепление станет опережать индифферентный раздражитель, то условный рефлекс удается выработать с большим трудом, лишь принимая ряд специальных мер. Это и понятно, так как если собаку сначала покормить, а потом дать сигнал еды, то, строго говоря, он даже не может называться сигналом, так как не предупреждает о предстоящих событиях, а отражает прошедшее. При этом безусловный рефлекс подавляет сигнальное возбуждение и препятствует образованию условного рефлекса на такой раздражитель.
Индифферентность сигнального раздражителя.Агент, выбранный в качестве условного раздражителя пищевого рефлекса, не должен сам по себе иметь какое-либо отношение к пище. Он должен быть безразличным, т.е. индифферентным, для слюнных желез. Сигнальный раздражитель не должен вызывать значительной ориентировочной реакции, мешающей образованию условного рефлекса. Однако ориентировочную реакцию вызывает каждый новый раздражитель. Поэтому для утраты им новизны его необходимо применять повторно. Лишь после того, как ориентировочная реакция будет практически погашена или сведена к незначительной величине, начинается образование условного рефлекса.
Преобладание силы возбуждения, вызванного подкреплением.Сочетание стука метронома и кормления собаки ведет к быстрому и легкому образованию у нее условного слюноотделительного рефлекса на этот звук. Но если пытаться сочетать с едой оглушительный стук механической трещотки, то такой рефлекс образовать чрезвычайно трудно. Для выработки временной связи большое значение имеет соотношение силы сигнала и подкрепляющей реакции. Чтобы между ними образовалась временная связь, очаг возбуждения, создаваемый последней, должен быть сильнее очага возбуждения, создаваемого условным раздражителем, т.е. должна возникать доминанта. Лишь тогда произойдет распространение возбуждения от очага индифферентного раздражителя к очагу возбуждения от подкрепляющего рефлекса.
Читать дальше