Применение управления с помощью сигналов

Иногда, рассказывая о подкреплении в научных кругах, я вызывала, большую, чем предполагала, враждебность со стороны представителей других дисциплин, начиная от психологов, занимающихся познавательными процессами, кончая нейрологами и представителем высшего духовенства. Я часто подозреваю, что гневные слова являются симптомом преднаучения.

Я всегда сожалею, когда вижу приступы плохого настроения, связанного с преднаучением, даже у тунцов, потому что при определенных навыках можно провести субъекта по пути обучения, не вызывая столь большого раздражения.

Однако я пришла к убеждению, что вспышки раздражения в период преднаучения являются четким индикатором того, что вот-вот произойдет истинное обучение.

Если вы отойдете в сторонку и дадите ему отшуметь как ливню, то вслед за этим может появиться радуга.

Применение управления с помощью сигналов



Никому не нужно постоянно управлять или быть управляемым с помощью условных стимулов или выученных сигналов, живые существа -- это не машины. В действительности реакция на выученный сигнал представляет собой усилие, причем такое усилие, которое не только не должно, но и не может поддерживаться постоянно.

Большую часть времени у начальника нет надобности держать подчиненных радом. Если дети бездельничают, а вы не очень спешите, то вы можете сами расслабиться. Служащим, которые и так уже работают с полной отдачей, не нужны приказы и инструкции. Ни нас самих, ни других людей не должны опутывать ненужные правила и регламентации: они вызывают только сопротивление.

Совершенно очевидно, что управление с помощью стимулов используется, чтобы дети стали воспитанными, домашние животные слушались, персонал был надежным и т.д.

Очень своеобразное управление с помощью стимулов необходимо также для многих видов коллективной деятельности, таких, как марширующие колонны, танцевальные ансамбли, спортивные команды. Отвечать на выработанную систему выученных сигналов доставляет определенное удовольствие, даже животным, по-видимому, это нравится. Я думаю, эте происходит оттого, что стимулы становятся подкреплениями, как в поведенческой цепи, так что, когда овладеваешь всеми типами поведения и сигналами, осуществление ответов имеет сильное подкрепляющее действие. Словом, это интересно.

Отсюда то удовольствие от участия в управляемой стимулами групповой деятельности, как, например, согласованный танец, игра в футбол, хоровое пение и игра в оркестре.

Когда мы видим какой-либо пример прекрасно управляемого сигналом поведения, начиная с фигур высшего пилотажа, исполняемых группой истребителей, до класса хорошо умеющих вести себя детей, то, желая похвалить их, используем понятие дисциплины. "Они поистине хорошо дисциплинированы" или "Этот учитель знает, как поддерживать дисциплину". Однако понятие о дисциплине включает применение наказания, которое, как мы видели, совершенно не нужно при установлении управления с помощью стимулов.

В обиходе сторонниками дисциплины считаются инструктор, родитель, тренер, которые требуют совершенного исполнения и наказывают за любое отклонение, а совсем не те, кто добивается совершенства, подкрепляя улучшения в его сторону. И именно поэтому люди, задавшиеся целью установить "дисциплину", часто пытаются управлять с помощью стимулов на основе: "Делай, что я скажу, иначе..." Поскольку субъект должен ошибиться или не послушаться, чтобы узнать, что значит "иначе", и поскольку тогда становится уже слишком поздно этого не совершать, то этот распространенный подход вовсе не так хорош.

Истинное, изящное управление сигналами, установленное с помощью подкрепления, может делать то, что мы считаем дисциплиной субъекта. Однако кто должен стать действительно дисциплинированным так это тренер.

Да, но с чего начать? Что, если вы живете и работаете среди людей, которые являются закоренелыми неслухами?

Вот система Карен Прайор эффективного воздействия в тяжелом случае.

Карен Прайор (видя мокрые плавки и полотенце Юного Гостя на кушетке в гостиной): Пожалуйста, снимите свои мокрые вещи с кушетки и повесьте на сушилку.

Юный Гость: 0'кей, минуточку.

К.П. (подходит к Ю.Г. и стоит рядом с ним молча).

Ю.Г. В чем дело?

К.П. Пожалуйста, снимите свой мокрый купальник с кушетки и повесьте на сушилку (NB: не прибавляя: "Сейчас же!", "Сию минуту!", "Я сказала" или что-нибудь в этом роде. Я обучаю этого человека выполнять просьбы с первого раза, а не ждать, когда сигнал будет усилен дальнейшими деталями ими угрозами.) Ю.Г. Вот еще, если вы так спешите, то почему бы вам не сделать это самим?

К.П. (Любезная улыбка, но никакого ответа. Я жду момента подкрепить желаемое поведение. Препирательство со мной не является желаемым поведением, поэтому я пренебрегаю им.) Ю.Г. Ладно, ладно (Встает, идет к кушетке, забирает вещи, бросает их в комнату, где стирают.) К.П. В сушилку.

Ю.Г. (Ворчит, поднимает и вешает вещи на сушку.) К.П. (Широкая улыбка, искренне, без издевки) Благодарю вас!

В следующий раз, когда мне будет нужно попросить юного гостя что-нибудь сделать, возможно, мне потребуется всего лишь взглянуть на него, чтобы вызвать действие. Мало-помалу он станет одним из тех домочадцев, которые быстро исполняют мои просьбы, а я со своей стороны - буду платить ему тем же, буду выполнять то, что он просит, если это выполнимо, и буду стараться не просить его делать более, чем он должен.

Знание того, как добиться управления с помощью стимулов, не прибегая к крику и принуждению, в равной мере облегчает жизнь всем -- воспитателю и обучаемому. Когда моя дочь Гейл поступила в высшую школу, ей пришлось ставить учебную пьесу, ежегодно для этого выбирали кого-либо из студентов.

IV. Отучение: как использовать подкрепление, чтобы избавиться от нежелательного поведения



Итак, вы знаете о том, как сформировать новое поведение, а как вам избавиться от нежелательного поведения, которое уже имеется?

Люди и животные всегда совершают то, что с нашей точки зрения лучше бы они не делали. Дети устраивают потасовку и кричат в машине. Собака лает всю ночь. Кошки дерут когтями мебель. Ваш сосед по комнате всюду разбрасывает грязные вещи. От кого-нибудь из родственников слышишь постоянные придирки с требованием телефонных звонков. Все это -- нежелательные виды поведения.

Существует восемь способов избавиться от нежелательного вида поведения.

Всего восемь. И не важно, является ли это поведение укоренившимся, как в случае неряшливого соседа по комнате, или внезапным, как в случае детей, бесчинствующих в машине. Все, что вы можете предпринять по этим поводам, будет вариацией на тему одного из восьми методов.

(Я не касаюсь здесь сложных сочетаний поведенческих проблем, которые возникают у человека с психическими нарушениями или у непредсказуемо свирепой собаки; я рассматриваю только отдельные проявления нежелательного поведения.) Вот эти восемь методов.

Метод 1. "Убить зверя". Это безусловно подействует. Вам никогда больше не придется снова иметь дело с данным поведением у данного субъекта.

Метод 2. Наказание. (Предпочитаемо всеми, хотя оно почти никогда не приносит действительной пользы.) Метод 3. Отрицательное подкрепление.

Метод 4. Угашение: поведению предоставляется возможность исчезнуть самому по себе.

Метод 5. Выработка несовместимого поведения. (Этот метод имеет особую значимость для спортсменов и владельцев домашних животных.) Метод 6. Добиться, чтобы данное поведение совершалось по сигналу. (В последующем вы перестанете давать этот сигнал. Это наиболее изощренный метод, применяемый тренерами дельфинов для того, чтобы избавиться от нежелательного поведения.) Метод7. "Формирование отсутствия": подкрепляется все что угодно, кроме нежелательного поведения. (Вежливый способ превратить неприятных родственников в приятных.) Метод 8. Смена мотивации. (Это основной и самый лучший способ.) Видно, что есть четыре "злых волшебника", или отрицательных метода, и четыре "добрых волшебника", или методы, использующие положительное подкрепление. У каждого своя роль. Я собираюсь привести "за" и "против" каждого из методов по очереди, а также некоторые истории и обстоятельства, в которых данный метод оказывался действенным.

В рассмотрение каждого метода я включу повторяющийся набор знакомых всем проблем (шумливая собака, раздражительный спутник жизни и т.д.) и примеры того, как каждая из проблем может быть решена данным методом.

Я не считаю, что все эти решения применимы. Например, я думаю, что пригласить ветеринара, чтобы заставить собаку прекратить лаять, перерезав голосовые связки (метод 1), является отвратительным решением проблемы собаки, лающей по ночам. Я утверждаю это, несмотря на то, что мой дядя Джон Слэтер прибег к этому решению, и я вынуждена была согласиться, когда соседи стали жаловаться на лай его морских львов. Конечно, немногие держат морских львов у себя в плавательном бассейне.

Вероятно, в этом случае можно было бы найти какой-то другой способ.

Я не могу сказать, какой из восьми методов вам надо выбрать, чтобы избавиться от данной конкретной помехи. Вы тренер, вам и решать.

Метод 1. "Убить зверя" Это действует безотказно. С данным субъектом у вас наверняка больше не возникнет этой поведенческой проблемы. Фактически это широко распространенный и всеми признаваемый метод борьбы с собаками, загрызающими овец.

Метод 1 является высшей мерой наказания. Каковы бы ни были моральные или другие подтексты (аспекты) высшей меры наказания, но если казнить убийцу, он больше не совершит преступления. Методом 1 избавляются от поведения, временно или навсегда избавляясь от того, кто его совершает.

Увольнение служащего, развод с супругом, переселение в другую комнату от неряшливого соседа -- все это метод 1.

С другими людьми могут возникнуть новые проблемы, но того субъекта, чьим поведением вы сыты по горло, больше нет, и с ним исчезло данное поведение.

Метод 1 довольно жесток, но иногда вполне адекватен, когда проступок слишком велик для того, чтобы иметь продолжение и не представляется возможности для его легкого изменения. Допустим, например, что кто-то из ваших родителей, супруг (или ребенок) бьют вас. Некоторые находят из этого выход в реальном уничтожении того человека, и в крайних случаях самозащита может быть оправдана. Уход из дома -- тоже разрешение проблемы методом 1, но более гуманное.

Однажды у меня была кошка, у которой появилась привычка прокрадываться по ночам в кухню и мочиться на конфорку плиты. Запах, когда на следующий день вы, ничего не подозревая, включали одну из этих конфорок, был совершенно невыносимым. Кошка могла свободно выходить на улицу, я никогда не поймала ее на месте преступления, а если конфорки закрывались, она мочилась на то, чем они были закрыты. Я не могла понять побуждающих ее причин, и в конце концов ее пришлось усыпить. Метод 1.

Существует много простых и широко распространенных модификаций метода 1:

отправить ребенка в его комнату, когда он вмешивается в разговор взрослых; привязать собаку, чтобы она не гонялась за машинами; посадить того или иного человека в тюрьму на различный срок. Мы привыкли считать такие меры наказанием (Метод 2), и они могут рассматриваться, а могут и не рассматриваться субъектом как наказание, но они являются приемами метода 1.

В их основе лежит то, что они прекращают данное поведение, физически лишая субъекта возможности его осуществления или избавляясь от присутствия самого субъекта.

Самое важное, что нужно усвоить относительно метода 1., это то, что он ничему не учит субъекта. Не допустить того, чтобы субъект проявил данное поведение -- с помощью изоляции, тюремного заключения, развода, казни на электрическом стуле, -- не многому учит субъекта. Казалось бы, что человек, попавший в тюрьму за кражу, дважды подумает, прежде чем снова украсть, но мы знаем, что очень часто этого не происходит; мы можем быть уверены лишь в том, что он не стянет ваш телевизор, пока находится под замком.

Поведение не обязательно бывает рассудочным. Если оно уже сложилось как способ получения подкрепления, и если мотивация и обстоятельства, вызывающие поведение присутствуют, то весьма вероятно, что оно проявится снова.

Пока субъект находится в изоляции, никакого переучивания в отношении данного поведения не происходит; нельзя изменить поведение, которое не осуществляется. Ребенок, запертый в своей комнате, может быть, чему-нибудь и научится (вероятно, обижаться и бояться вас), но при этом он не учится тому, как вступить в вежливый разговор. Отпустите собаку с привязи, и она тут же снова начнет гоняться за машинами.

Тем не менее у метода 1 есть своя роль. Часто он даст наиболее практичное решение вопроса, и не обязательно связан с жестокостью. Мы часто пользуемся своего рода временным лишением свободы, когда у нас нет времени обучать или наблюдать за субъектом; мы, например, сажаем детей в манеж, и в течение некоторого непродолжительного времени большинство детей не протестует против этого. Вице-президент американского клуба собаководства рассказывал мне, что пользуется проволочным вольером на кухне в своей квартире при выращивании дома щенков. Щенков надо научить когда и где оправляться, что достигается тем, что их выносят в подходящее место, прежде чем они сделают это, и вознаграждают за то, что они там оправились. Но невозможно следить за щенками постоянно. Этот кинолог помещает своих щенков в клетку на ночь, когда ему надо уйти или когда он занят; там они могут делать лужи безнаказанно. Они ничему не учатся, но и не делают луж на ковре.

Положительное подкрепление может происходить только тогда, когда хозяин присутствует и может дать его, но метод 1 предотвращает неприятности лишением свободы.

Этот же владелец собак сажал на ночь в клетку, находящихся в доме трех взрослых терьеров, чтобы воспрепятствовать им вытворять то, что они никогда не делают днем: скулить под дверью спальни, грызть мебель, перевертывать корзины с мусором. Собаки совсем не обижались на это и весьма охотно отправлялись "в постель". Возможно, собакам тоже надо отдохнуть от нас.

Примеры применения метода 1. "Убить зверя" Метод 1 в некотором смысле решает проблему, но его применимость в каждой данной ситуации относительна.

Поведение Метод воздействия Сосед по комнате повсюду разбрасывает грязные вещи Сменить соседа Собака на дворе лает всю ночь Убрать собаку (застрелить, продать и т.п.) Дети слишком шумят в машине Пусть идут домой пешком. Пусть едут на автобусе. Поручить возить их кому-нибудь другому Супруг обычно возвращается домой в плохом настроении Развестись Неправильный удар при игре в теннис Прекратить играть в теннис Бастующий или ленивый служащий Уволить его Отвращение к благодарственным письмам Никогда не пишите благодарственных писем. Может быть, тогда люди перестанут посылать вам подарки Кошка влезает на кухонный стол Выставьте кошку за дверь, или избавьтесь от нее Грубый водитель автобуса вывел вас из себя Выйдите из автобуса и садитесь на следующий Взрослый отпрыск, который по вашему мнению должен жить самостоятельно, хочет снова поселиться вместе с вами Скажите "нет" и настаивайте на Метод 2. Наказание Это излюбленный метод всех. Если поведение неправильное, мы прежде всего думаем о наказании. Ругаем ребенка, шлепаем собаку, урезываем зарплату, налагаем штраф на компанию, преследуем инакомыслящих, вторгаемся в страну и т.д. Но наказание -- довольно грубый способ изменения доведения. Фактически в большинстве случаев наказание не помогает вовсе.

Прежде чем рассмотреть, что можно и чего нельзя достичь наказанием, отметим, что происходит, когда оно применено и не возымело действия.

Допустим, мы наказали ребенка, собаку или служащего за какое-либо поведение, а это поведение возникает снова. Разве мы говорим "Хм, наказание не подействовало, не попробовать ли что-нибудь другое?" Нет. Мы усиливаем наказание. Если выговор не помогает, пробуем шлепок. Если ваш ребенок принес дневник с плохими отметками, у него отбирается велосипед. А если в следующий раз дневник снова плохой, у него отбирается и льдянка. Ваши служащие не проявляют должной расторопности. Пригрозите им. Не помогает?

Урежьте их зарплату.

По-прежнему никакого результата? Прекратите выплату жалования, оштрафуйте, отдайте под суд! Плетка не изменяет поведения еретика? Можно попробовать испанский сапог или дыбу.

Самое страшное в усилении наказания то, что этому поистине нет предела.

Поиски такого наказания, которое было бы действенным, не встречается у обезьян и слонов, но занимает людей во все времена, известные истории, а может быть, даже и с доисторических времен.

Одна из причин, почему наказание обычно не действует, заключается в том, что оно не совпадает по времени с нежелательным поведением; оно возникает после, а иногда, как в случае, судебного законодательства, много позже.

Поэтому у субъекта может не образоваться связь между наказанием и своими прежними действиями; у животных этой связи не образуется никогда, людям тоже это обычно не дается. Если бы каждый раз при краже у вора отрывался палец, а неправильно запаркованная машина вспыхивала, я думаю, что воровство и штрафы за паркование практически не существовали бы.

Даже если субъекты понимают, за что их наказали, они не могут в настоящее время уменьшить себе наказание только потому, что не могут изменить своих действий в прошлом. Сейчас вы ничего не можете сделать с плохими оценками в дневнике, которые уже получили, поэтому ребенку, которого родители наказывают, ничего не остается, как получить наказание.

При методе 2, так же как при методе 1, субъект не учится тому, как изменить поведение. Наказание не научит ребенка, как получить более высокие оценки.

Большее, на что может рассчитывать наказывающий, это что у ребенка изменится мотивация: ребенок попытается изменить будущее поведение, чтобы избежать будущего наказания.

Научиться изменять будущее поведение, чтобы в будущем избежать его последствий -- выше понимания большинства животных. Если охотник ловит свою легавую собаку, предназначенную для охоты на птицу, и лупит за то, что она гонялась за кроликами, то собака не ведает, какое именно из предыдущих действий вызывает наказание. Она станет больше бояться хозяина, что с этих пор может позволить ему отзывать собаку, когда она гоняет кроликов. Сама по себе порка не повлияет на травлю, кроликов.

Между прочим, кошки, по-видимому, особенно тупы по части ассоциирования наказаний со своими преступлениями. Подобно птицам, они просто пугаются и ничему не учатся, когда их запугивают, вот почему считается, что дрессировать кошек трудно. Их действительно нельзя обучать карательными методами, но они сама живость при обучении на положительном подкреплении.

Наказание или угроза его не помогает субъекту в научении изменять текущее поведение. Если нежелательное поведение имеет такую сильную мотивацию, что субъекту необходимо его продолжение (красть пищу, когда голоден, быть членом какой-либо группы в подростковом возрасте), то наказание и его угрозы учат его не попадаться. В режиме наказания неуловимость быстро нарастает -- печальная ситуация в семейной установке, но не столь сильно выраженная в обществе в целом. Кроме того, влияние повторяющегося или жестокого наказания имеет некоторые очень неблаговидные стороны: страх, ярость, чувство обиды, даже ненависть в наказываемом, а иногда и в наказывающем тоже. Эти душевные состояния не способствуют обучению (если только у вас нет цели обучить субъекта страху, ярости и ненависти -эмоций, которые иногда специально развиваются у террористов).

Одна из причин, почему мы считаем наказание действенным, это та, что иногда поведение, приведшее к наказанию, прекращается -- если субъект понял, какое из действий наказуемо, если мотивация данного действия невелика, если боязнь будущего наказания велика, и наконец, самое главное, если субъект может контролировать поведение (например, наказание не может помочь, когда ребенок мочится в постель). Но ребенка, которой как следует отругали, когда он впервые раскрасил цветным карандашом стену, можно вполне успешно отучить портить дом. Человек, который смошенничал с подоходным налогом и был за это оштрафован, может и не попытаться сделать это снова.


Похожие страницы: Глава 5. Праздник непослушания страху.. Голодание. М.И.Кузин. Хирургические болезни. Практическая офтальмолпмфологпя. Очищение почек. Глава 5 Осложнения хронических простатитов*. Гравидан и гетерологичная моча беременных женщин. Ветви грудной части аорты. Язва желудка. Нужны специалисты. Корыстолюбие, скупость, жадность. 1. динамическая гимнастика. Питание во время болезни.


(c) 2004-2008