![]() Главная страница Случайная страница КАТЕГОРИИ: АвтомобилиАстрономияБиологияГеографияДом и садДругие языкиДругоеИнформатикаИсторияКультураЛитератураЛогикаМатематикаМедицинаМеталлургияМеханикаОбразованиеОхрана трудаПедагогикаПолитикаПравоПсихологияРелигияРиторикаСоциологияСпортСтроительствоТехнологияТуризмФизикаФилософияФинансыХимияЧерчениеЭкологияЭкономикаЭлектроника |
Основные характеристики условно-рефлекторной деятельности
В 1902 году И.П.Павлов обнаружил так называемое «психическое слюноотделение». Феномен заключался в выделении у животного слюны, которая стекала в пробирку через фистулу на щеке еще до попадания пищи в рот, т.е. заранее, «в опережающем режиме», как только собаку приводили в экспериментальную комнату и помещали в специальный станок. Таким же образом повторное сочетание любого нейтрального для животного раздражения (например, звонка) с кормлением вызывает выделение слюны еще до того, как собака получит пищу. И. П. Павлов назвал звонок условным сигналом (УС), пищу – безусловнымраздражителем (или стимулом), реакцию животного (слюноотделение) в ответ на предъявление пищи - безусловным рефлексом (БР), а в ответ на звонок - условным рефлексом (УР). Принцип образования условного рефлекса состоит в следующем: действие какого-либо нейтрального (или индифферентного) для животного раздражителя совместно со стимулом, вызывающим у него определенную реакцию (например, отдергивание конечности при болевой стимуляции), приводит к тому, что постепенно этот ранее нейтральный стимул начинает вызывать такую же реакцию. Если при выработке УР применяется подкрепление, соответствующее имеющейся у животного мотивации (например, пищевое подкрепление в состоянии голода), то оно называется положительным и вырабатываемый УР также называется положительным. Можно выработать УР и с применением отрицательного подкрепления (наказания), т.е. такого воздействия, которого животное стремится избежать (удар электрического тока). Используют также действие воздушной струи, направленной на роговицу глаза и вызывающей мигание. Слюнной и мигательный УР относятся к категории классических («павловских») условных рефлексов. На основе изучения слюнных УР у собак И. П. Павлов сформулировал основные общие правила образования УР: ♦ условный сигнал должен предшествовать безусловному раздражению, но не наоборот; ♦ действие условного и безусловного раздражителей должно частично перекрываться во времени; ♦ сочетание условного и безусловного раздражителей должно повторяться многократно. Эти правила приложимы не только к классическим, но и к инструментальным УР. В лаборатории И. П. Павлова было обнаружено, что любой посторонний и достаточно сильный стимул, подействовавший в течение эксперимента, уменьшает условно-рефлекторное слюноотделение у собаки, как бы «отвлекает» ее. Павлов объяснял это явление так: вмешательство постороннего стимула вызывает в коре головного мозга собаки сильный очаг возбуждения, который в силу природы условно-рефлекторных связей подавляет уже сформированный УР, «индуцируя» торможение участка коры, ответственного за этот УР. Такое торможение И. П. Павлов назвал внешним. Помимо внешнего торможения в лаборатории Павлова было описано и внутреннее торможение. Отмена подкрепления ведет к постепенному исчезновению внешних проявлений УР, к его угашению. Однако этот УР не исчезает и при возобновлении подкрепления восстанавливается. Для восстановления требуется значительно меньшее число сочетаний УС с подкреплением, чем при первоначальном обучении. Следует отметить, что для проявления условной связи между двумя стимулами подкрепление не всегда необходимо. В работах И. П. Павлова было показано, что и сами УС в определенных условиях могут действовать как подкрепление. Можно провести опыт, в котором какой-либо УС (УС-1) всегда сочетается с подкреплением и вызывает, например, слюноотделение. Затем некий второй УС (УС-2) многократно применяется вместе с УС-1 (без сочетания с безусловным раздражением). Если после этого применить только УС-2, можно убедиться, что он также вызывает условную реакцию. Это явление было названо условным рефлексом второго порядка. Несколько отличается от описанного другой опыт, который также показывает, что для формирования УР подача подкрепления не всегда обязательна. Если два УС предъявлять животному совместно (УС-1 + УС-2) много раз еще до применения безусловного стимула, а затем предлагать только сочетание УС-1 и безусловного раздражения, то затем условная реакция проявится при даче одного лишь УС-2. Таким образом, хотя УС-2 никогда сам по себе не подкреплялся, между УС-1 и УС-2 сформировалась связь, которая позволила проявиться условной реакции при действии только УС-2. Процесс формирования связи между индифферентными раздражителями иногда называют сенсорным предобуславливанием ( Мак-Фарленд, 1987). Вряд ли это можно считать правильным, потому что обнаружить наличие подобной связи можно лишь с помощью соответствующего тестирования - путем выявления реакции на второй индифферентный стимул. Условно-рефлекторное слюноотделение, которому уделялось основное внимание в лаборатории Павлова, относится к классическим УР. При выработке классического УР последовательность событий в опыте никак не зависит от поведения животного. Разнообразные классические условно-рефлекторные реакции можно наблюдать в экспериментах на животных, если проводить полиграфическую регистрацию ряда физиологических процессов организма (ЭКГ, ЭЭГ, плетизмограмму и др.). Как и в случае слюнного рефлекса, сочетание положительного (например, пищевого) безусловного раздражения с нейтральным приведет к тому, что последний начнет вызывать изменения в вегетативных функциях организма, которые до этого провоцировались только непосредственно самим безусловным воздействием. Полиграфическая регистрация обычно используется при изучении отрицательных (аверсивных) классических УР. Много работ такого рода проводится также для оценки реактивности нервной системы к действию стрессорных агентов и ее устойчивости к стрессу. В настоящее время классические УР наиболее часто исследуют на моделях, использующих вкусовое отвращение и реакцию третьего века (мигательной перепонки). Было, например, обнаружено, что классические УР образуются с разной скоростью в зависимости от того, какие физиологические системы вовлечены в их формирование. Так, УР избегания пищевого яда у крыс (как правило, используют хлорид лития) формируется легко, если введение его в организм сочетается с предложением животному пищи определенного вкуса. Однако УР избегания яда формируется с трудом или не образуется совсем, если его введение сочетается, например, со звуковым раздражением. Вкусовой стимул, сочетающийся с пищевым отравлением, ведет к образованию УР вкусового отвращения. При сочетании звука с ударом тока образуется УР на боль. В то же время иное сочетание, например вкусового и болевого стимулов, не ведет к образованию УР. Классический УР - сокращение мигательной перепонки при действии тактильного или звукового УС - обычно изучают на кроликах. При действии на роговицу глаза безусловного раздражителя - воздушной струи (или слабого удара тока) - мигательная перепонка сокращается. Это сокращение можно регистрировать специальным прибором и оценивать его интенсивность. Если безусловное раздражение сочетать с каким-либо нейтральным стимулом, например звуком, то после нескольких сочетаний мигательная перепонка будет сокращаться уже при изолированном действии этого звука, который становится условным сигналом. 2.2 Инструментальные условные рефлексы (или обучение методом проб и ошибок) Начало исследований инструментальных УР связано с именем Э. Торндайка, хотя их анализ проводился и в лаборатории И. П. Павлова. В лаборатории И. П. Павлова «классические» УР носили название условных рефлексов 1-го рода, а инструментальные - условных рефлексов 2-го рода. В опытах с «проблемными ящиками» Торндайк наблюдал, как посаженная в ящик кошка ищет выход, пытаясь открыть дверцу разными способами (для этого нужно было нажать на задвижку или потянуть за пружину). Кошка сначала совершает много разных действий (проб), которые в своем большинстве бывают неверными (ошибки), пока случайно не откроет ящик. При повторении опытов она выходит из ящика все быстрее и быстрее. Идея эксперимента была подсказана Торндайку К. Ллойдом Морганом, наблюдавшим, как его собака манипулирует с задвижкой калитки, чтобы «улизнуть» из дома. Такое обучение Торндайк и назвал «методом проб и ошибок». Вдальнейшем обучение животного подобным действиям получило название инструментальных (или оперантных) УР. Торндайк первым предложил количественную оценку динамики обучения животного инструментальному навыку. Для этого он ввел так называемые «кривые научения». Между классическими и инструментальными УР существуют определенные различия. При классических УР временная связь между условным сигналом и безусловной реакцией возникает непроизвольно при действии безусловного раздражителя (подкрепления). При инструментальных УР подкрепление, например пища, дается только после того, как животное совершает определенное действие, которое не имеет прямой связи с безусловным раздражителем. В классическом УР выделение слюны происходит в ответ на контакт пищи с рецепторами полости рта, и эта реакция может стать условнорефлекторной. В отличие от этого при выработке инструментального УР пищевое подкрепление изначально никак не связано ни с протягиванием лапы, ни с побежкой в лабиринте. Однако мы можем давать животному пищу сразу после того, как оно сделало такое движение, и вскоре животное будет его совершать, чтобы получить подкрепление. К категории инструментальных УР относится формирование навыка нажатия на рычаг (или клевания кнопки) для получения порции пищи. После работ Б.Скиннера этот УР стал основным в исследованиях бихевиористов (анализ связей «стимул-реакция»). К инструментальным УР относится также обучение подопытного животного находить путь к пище или избегать неприятных стимулов в лабиринте. Инструментальным УР является и реакция избегания - навык переходить в тот отсек экспериментальной камеры, где отсутствует болевое воздействие. Включению тока предшествует включение УС - звука или света. Чтобы избежать болевого воздействия, животное перебегает в другую половину камеры. По прошествии небольшого периода времени (как правило, его длину варьируют, чтобы не вырабатывать у животного УР на время) ток включают в той половине камеры, куда оно перед этим перебежало. УР считается выполненным, если животное перебегает в безопасную половину камеры во время действия УС и до включения тока. ♦ оперантное поведение - спонтанные действия, не вызванные каким-либо очевидным стимулом; Если для выработки классических УР необходимы сочетания условных сигналов и подкрепления, то при методике свободного оперантного поведения экспериментатор сопровождает подкреплением выполнение животным только определенного, намеченного им действия. Например, крысу можно обучить нажимать на рычаг, если сначала сопровождать подкреплением любые ее действия в той части камеры, где он находится. Постепенно крыса обучается держаться вблизи рычага, и тогда подкрепление дают только, если она касается рычага мордой или лапой (для этого иногда на рычаг даже кладут пищу). Через некоторое время подкрепление дается только после выполнения четких движений - нажатий (одного или нескольких) лапой на рычаг. Такое постепенное видоизменение поведения животного в результате вмешательства экспериментатора называется методом последовательного приближения или формированием поведения. Деление условных рефлексов на классические и инструментальные, удобное методически, не означает, что они имеют совершенно разную природу. В их основе лежат сходные нейрофизиологические механизмы, а любое «чисто» инструментальное действие животного всегда сопровождается реакцией, которая относится к классическим УР. И наоборот, в любом «чисто» классическом УР можно обнаружить двигательный компонент, который по своим свойствам относится к инструментальным. О связи классических и инструментальных УР свидетельствует также «самоформирование» условной реакции. Например, если голодного голубя поместить в камеру Скиннера и в течение 5 с освещать ключ для клевания с интервалом в 1 мин, а после прекращенияосвещения давать порцию пищи, то голубь сначала не обращает внимания на ключ. Однако после нескольких таких сеансов формируется инструментальная реакция, и он быстро начинает клевать ключ независимо от освещения. Постепенно голубь научается клевать ключ только при его освещении, т.е. реакция становится более точной – она самоформируется. В данном случае она очень близка к классическому УР, поскольку голубь клюет ключ как бы вместо зерна, даже в отсутствие подкрепления. С помощью метода «последовательного приближения» у животных удается сформировать не только клевание ключа при его освещении, но и самые разнообразные, сложные и иногда неожиданные навыки. В опытах Скиннера голуби «играли» в пинг-понг, а крысы могли подтянуть к себе с помощью бечевки бильярдный шар, взять его в передние лапы и засунуть в трубку, расположенную на 5 см выше пола клетки. Метод последовательного приближения составляет основу дрессировки цирковых и служебных животных. Примером продуктивного использования принципов бихевиоризма, и в частности роли метода последовательного приближения в формировании поведения, является работа знаменитой американской дрессировщицы дельфинов и психолога К. Прайор (1995). Тезис Скиннера о том, что любые движения, на которые способно животное данного вида, равновероятно можно использовать для инструментального научения, был достаточно обоснованно подвергнут сомнению в работе его коллег - К. и М. Бреландов (Breland, Breland, 1961). Некоторые виды животных при обучении манипуляциям с предметами производят «заданные» экспериментатором действия только после выполнения некоторых врожденных (инстинктивных) действий либо совсем не могут им научиться. Так, например, обучая енота нажимать на рычаг, Бреланды заметили, что нажатию предшествует видоспецифическое движение лап - «полоскание», характерное для этого вида при добыче пищи из ручья. На основании таких наблюдений возникло представление о предрасположенности к определенным видам обучения. Образование инструментальных УР по механизму «последовательного приближения» играет важную роль в организации поведения животных не только в эксперименте, но и в естественных условиях. Обучение по методу последовательного приближения может происходить самым неожиданным образом. Об этом, в частности, свидетельствует получившая широкую известность в начале XX века история «умного Ганса». Это был конь, который демонстрировал способность «считать», «складывать», «извлекать корни», отвечать на вопросы и т.п. Столь «разумное» поведение объяснялось тем, что конь научился замечать малоуловимые движения дрессировщика, которые тот непроизвольно совершал, видя, что конь вот-вот даст правильный ответ. Ориентируясь на эти условные сигналы, конь в нужный момент прекращал стучать копытом. В начале XX века (1900—1904) барон В. фон Остен, убежденный в огромных умственных способностях лошадей, обучал нескольких из них различению цветов, азбуке и «счету». Узнавание каждой буквы или цифры лошадь обозначала соответствующим числом ударов копыта. Друг фон Остена художник Редлих обучил таким же образом свою собаку. Наиболее способным учеником оказался орловский рысак Ганс, который производил достаточно сложные арифметические подсчеты, отвечал на разнообразные вопросы, а иногда высказывался по собственной инициативе. Так, супруги Н.Н. и А.Ф. Котс, специально приехавшие для знакомства с ним в 1913 году, рассказывали, что после нескольких относительно коротких ответов на вопросы Ганс заявил: «В поле я встретил милую госпожу Краль, которая меня кормила». Поведение его было столь впечатляющим, что вводило в заблуждение не только публику, но даже членов специальных комиссий, включая Н. Н. Ладыгину-Котс. Предполагали, что хозяин подает коню некие скрытые сигналы (как дрессировщик — цирковым животным), однако его обследовали 13 экспертов (комиссия психолога К. Штумпфа) и не обнаружили никакого обмана. Они засвидетельствовали, что Ганс действительно «считает» и никаких скрытых сигналов ему не подают. И лишь много позднее наблюдатели постепенно заметили, что Ганс отвечает только на те вопросы, ответ на которые знает сам экспериментатор. Специальный анализ, проведенный психологом О. Пфунгстом, показал, что животное реагирует на мельчайшиенепроизвольные (идеомоторные) движения экспериментатора, например на отклонения корпуса на 2 мм, микродвижения бровей, мимику и т.п. Эта невольная подача сигналов происходила, по-видимому, из-за эмоционального напряжения человека, по мере того как число ударов копытом приближалось к искомому. Даже картонный щит, которым пробовал отгородиться от Ганса экспериментатор, не помогал: животное все равно улавливало какие-то только ему понятные знаки для определения правильного ответа.
|