На последнем году обучения в Гарвардском университете (в 1930 обучался в магистратуре и в 1931 - докторантуре). Ящик Скиннера используется для изучения как оперантного обусловливания (научения, в ходе которого приобретение нового опыта и реализация его в поведении приводят к достижению определённой цели ), так и классического обусловливания (выработки условных рефлексов) . Скиннер создал оперантную камеру как вариацию на клетку-головоломку (англ. puzzle box ), созданную Эдвардом Торндайком .

Беррес Скиннер заявлял, что не хотел, чтобы его имя стало названием для изобретения . В дальнейшем он считал, что именно Кларк Халл (Clark Hull) и его студенты из Йеля связали его с изобретением: сам он утверждал, что никогда не использовал в качестве названия свою фамилию и всегда просил Говарда Ханта (Howard Hunt) употреблять название «ящик с рычагом» (англ. lever box ) вместо «ящик Скиннера» в опубликованном документе .

По мнению Б. Ф. Скиннера, оперантное поведение проявляется спонтанно и без очевидных стимулов. Подкрепление может модифицировать оперантное поведение. Таким образом, если создать определённую систему поощрений, можно контролировать поведение и управлять им .

Ящик Скиннера позволяет экспериментатору изучить обусловленное поведение через обучение подопытного животного совершать определённые действия (например, нажатие рычага) в результате воздействия раздражителей, таких как световой или звуковой сигнал. Если испытуемый объект правильно выполняет действия, специальный механизм доставляет в камеру еду или другое вознаграждение. В некоторых случаях механизм «наказывает» за неправильную или отсутствующую реакцию.

Б. Ф. Скиннер утверждал, что люди могут быть обучены по такому же принципу. Изменения в поведении, по его словам, - это результат ответа человека на события, происходящие в его среде. «Усиление поведения, которое становится результатом положительного стимула, называют „обусловливание“», - написал Скиннер в своей книге «Наука и поведение человека» (англ. Science and Human Behavior , 1953). - «В оперантном обусловливании мы „усиливаем“ оперантное поведение, делая ответ на стимул более вероятным и более частым» .

«Используя пищу, рычаги и другие факторы окружающей среды, Скиннер продемонстрировал, что то, что считалось независимым откликом, на самом деле является условным рефлексом, и тем самым поставил под вопрос казавшееся незыблемым понятие свободы воли», - пишет Лорин Слейтер .

Корпус камеры - это просторный ящик, в котором размещается испытуемое животное. (Обычно для опытов используют лабораторных животных, таких как грызунов - как правило это крысы, - голубей и приматов). Чаще всего камера звуко-и-светонепроницаемая, чтобы избежать отвлекающих стимулов.

В ящике Скиннера есть по крайней мере одно устройство (иногда таких устройств может быть два и более), которое автоматически фиксирует возникновение поведенческой реакции или действия. Типичными устройствами, фиксирующими реакции приматов и крыс, являются рычаги; если объект нажимает на рычаг, противоположная сторона приводит в действие переключатель, который контролируется компьютером или другой запрограммированной машиной. Устройствами подачи реакции для голубей или других птиц являются клавиши, которые подают сигнал, если птица клюнет клавишу с достаточной силой. Ещё одна обязательная составляющая ящика Скиннера - устройство подачи естественной награды или необусловленного стимула (еда или вода). Камера также может регистрировать получение обусловленного положительного стимула, такого как сигнал светодиодного индикатора LED как «знака» .

Несмотря на такую простую конфигурацию, включающую одно устройство подачи реакции и одну кормушку, камера позволяет изучить многие психологические феномены. Современные ящики Скиннера, как правило, имеют несколько устройств подачи реакции, например, рычагов, две или более кормушек и множество устройств, способных генерировать раздражители (источники света, звуки, музыка, картинки). В некоторых конфигурациях оперантных камер используются жидкокристаллические панели для компьютерного производства визуальных стимулов.

Некоторые камеры оперантного обусловливания могут иметь электрически заряженные сетки или полы, которые дают электрический разряд подопытным животным; или лампочки разных цветов, которые информируют животных о подаче еды. Несмотря на то, что использование электрических зарядов не является новшеством, в некоторых странах необходимо получить разрешение на подобные эксперименты над животными.

Для того, чтобы проверить, как вырабатываются условные рефлексы у некоторых беспозвоночных, таких как плодовая мушка , психологи используют прибор известный как «тепловая коробка » (англ. heat box ). В сущности, тепловая коробка имеет такую же форму, как и ящик Скиннера, однако, тепловая коробка состоит из двух частей: одна часть может подвергаться изменению температуры, а другая не может. Как только беспозвоночное животное пересекает сторону, которая может изменять температуру, область подогревается. В итоге беспозвоночное приспосабливается и остается на одной части тепловой коробки - на той, которая не изменяет своей температуры. Это наблюдается даже тогда, когда температура достигает своей низшей точки: плодовая мушка остается на той части коробки, на которой была, и не переходит на другую. Оба эти устройства (ящик Скиннера и тепловая коробка) позволяют экспериментаторам проводить исследования обусловленного поведения и тренировки через механизмы поощрения и наказания.

В свои ящики Б. Ф. Скиннер сажал голодных подопытных животных (например, крыс). В процессе изучения пространства, в которое их поместили, крысы случайно нажимают на рычаг. Вслед за нажатием в кормушку выпадает еда. После поощрения крысы едой вероятность того, что она снова коснётся рычага, возрастает . Вскоре Скиннер обнаружил, что подопытные быстро научаются определённым действиям, если за это их поощряют. Эксперименты показали, как крысы смогли превратить случайные действия в намеренные, которые основывались на полученном ранее опыте. После того, как крысы научались нажимать на рычаг с целью получения корма, Б. Ф. Скиннер устанавливал фиксированные интервалы, в которые будет выдано поощрение. Таким образом, крыса получала корм после двух, трёх, пяти или двадцати нажатий на рычаг. Кроме того, Скиннер устанавливал равные (или неравные) промежутки времени, через которое животному поступала пища. Его также интересовало поведение животного в ситуации, когда после нажатий на рычаг поощрение не поступало. После прекращения подачи еды крыса вовсе переставала нажимать на рычаг, даже если слышала, что в лотки соседних камер сыпется корм. Благодаря своим экспериментам Б. Ф. Скиннер получил возможность понять, как происходит процесс обучения живых организмов и как его можно контролировать

Тема лутбоксов в современных играх стала одним из трендов последних месяцев. Кажется, люди готовы бесконечно обсуждать и осуждать эту систему монетизации. Один из продвинутых пользователей Reddit разобрался, как работает новая система монетизации с помощью психологии и представил объяснение публике . На мой взгляд, мысли интересные, поэтому я решил перевести всё сообщение на русский язык.

В закладки

Поведение EA безусловно ужасно. Однако существуют опасения по поводу того, что люди упустят из виду всю суть происходящего, как только EA ощутит последствия своих действий. На самом деле сложившаяся ситуация затрагивает всю игровую индустрию и будет ухудшаться до тех пор, пока на сцене не появятся регуляторы, на подобие работающих в сфере азартных игр.

Слыхали про ящик Скиннера? В научной сфере этот прибор называют «камера оперантного обусловливания», но чаще используют тривиальное название по фамилии изобретателя – известного поведенческого психолога Б.Ф. Скиннера. В ящике содержится специальный рычажок («операнда»), активация которого ведёт к результату, стимулирующему организм к последующим нажатиям рычажка. В случае крыс, например, результатом является подача в ящик награды в виде лакомства. Подробное устройство прибора и эксперимента хорошо описан в Википедии .

Проблема лутбоксов не затрагивает исключительно Star Wars Battlefront II или жанр шутеров. Она задаёт тренд на разработку игр, призванных прежде всего заставлять людей «дёргать рычаг». Каждая активация рычага ведёт к ментальному награждению игрока, что ведёт к новым активациям рычага. При этом каждое следующее такое действие стоит реальных денег.

Вся система прогрессии в подобных играх создана для манипуляции поведением игрока и втягивает его в аналог азартных игр, наградой в которых служат социальные факторы – более высокая позиция в рейтингах, более крутые внутриигровые вещи. Бесконечные рейтинги, достижения, ранги игроков, достижения других «крыс» (игроков) благодаря более продвинутым цифровым предметам – всё это мотивирует людей к самоутверждению в сложившемся социуме.

Системы микротранзакций используют и другие, ещё более коварные приёмы. В психологии проверенным фактом является то, что наиболее эффективной формой награды за действия является неожиданная награда. В 1950-х годах эту закономерность исследовал Скиннер. Учёный обратил внимание на то, что лабораторные крысы наиболее бурно реагировали на случайные награды. Относительно мышей, из раза в раз получавших одно и то же, награждаемые различными лакомствами мыши нажимали на рычаг чаще.

Аналогичный механизм используют лутбоксы. Нет никакой гарантии, что из следующего ящика выпадает такой же предмет, как и предыдущий. Это является ещё одним психологическим моментом, мотивирующим покупателей: игрок с нетерпением ждёт открытия нового ящика, ожидая более весомого выигрыша, чем в прошлый раз.

Как только желанная награда достаётся игроку, цикл уходит на новый круг. Средний уровень мастерства в сообществе растёт, игроки получают более крутую экипировку, и чтобы идти вровень с ними нужно продолжать вкладывать деньги в игру. Новый герой, новое оружие, новый роскошный образ персонажа, новый вариант добиться лучших результатов в игре – ставки растут, а вместе с ним растёт и ментальная награда за нахождение в числе лучших. Всё, что нужно сделать, – всего лишь скормить игрушке несколько долларовых купюр. Каждый день вы тратите деньги на обыкновенный латте. Почему бы не заплатить за куда более привлекательную возможность управляя Дартом Вейдером разносить в клочья сотни не задонативших игроков?

Проблема микротранзакций затрагивает не только EA и проекты издателя. Каждая компания, от 2K Games до Valve и даже мастеров одиночных игр из Rockstar, начинают применять эти инструменты, поскольку они чрезвычайно выгодны. Даже CD Project Red поддаётся этому соблазну . Более того, пока сообщество демонизирует EA, в аналогичном направлении уверенно движется Activision, запатентовавшая систему злоупотребления микротранзакциями. Система подбирает игрокам более сильных противников до того момента, пока они не воспользуются микротранзакцией, после чего оппоненты в матчмейкинге становятся слабее, что создаёт ощущение награды за действие и мотивирует к покупке новых предметов. Это описано в патенте фактически прямым текстом:

«Система может включать в себя механику микротранзакций, которая позволяет результатам матчей влиять на вероятность внутриигровых покупок. К примеру, механизм может подобрать новичку гораздо более опытных/обвешанных противников, чтобы сподвигнуть новичка на покупку внутриигровых предметов, аналогичных используемыми сильными противниками. Новичок может захотеть подражать опытным игрокам и купит аналогичные предметы».

Но самой настоящей проблемой является то, что масштабный виртуальный Ящик Скиннера не только легален, но и никем не регулируется. Схемы работы игровых автоматов чётко регламентированы и запрограммированы заранее, чтобы позволить игрокам получить награду благодаря везению, а не просто отобрать их деньги. Разработчики видеоигр в свою очередь не ограничены подобными рамками и с радостью злоупотребляют человеческой психологией, зачастую действуя в ущерб интересам потребителей. И проблема отнюдь не локальная, а затрагивает индустрию в целом.

Введение

Скиннер полагал, что человек по существу не отличается от других животных и что мы более похожи на них, чем хотели бы это замечать. Изучение работ И.П. Павлова привело Б. Скиннера к выводу, что предсказание того, что будет делать средний индивидуум, часто малозначимо или совсем незначимо, когда имеешь дело с конкретным человеком. (Это соответствует правилу логики: то, что верно для собирательного понятия, может оказаться неверным для предмета, входящего в это понятие.) Кроме того, у него возникло убеждение, что психология из вероятностной науки превратится в точную. Своими предшественниками Б. Скиннер считал Дарвина, Д. Уотсона, И.П. Павлова.

Изучение философии привело Б. Скиннера к мысли, что бихевиоризм -- не наука о человеческом поведении, это философия такой науки. Бихевиоризм может сформулировать ясно вопросы, на которые могут быть найдены ответы. Он утверждал, что надо исходить только из данных. «Наука -- это стремление иметь дело с фактами, а не с тем, что кто-то о них говорит... Это поиск упорядоченности, единообразия, законосообразных отношений между событиями в природе... Она [наука] начинает... с наблюдения отдельных эпизодов, но быстро переходит к общим правилам и от них к научным законам».

Личность рассматривается Скиннером как сумма паттернов поведения. Различные ситуации вызывают различные реакции. Каждая индивидуальная реакция основана на предыдущем опыте и генетических особенностях. Не существует личности иной, нежели суммы поведения. Скиннер занимается не причинами и мотивами поведения, а только самим поведением.

В ходе экспериментов над животными Скиннер добился своих самых значительных достижений -- он стал развивать программируемое обучение. Его исследование показало, что когда люди по мере своего обучения получают мгновенную и быструю обратную связь, их обучение происходит намного быстрее.

В конце 1929 и начале 1930 года Скиннер работал над модификацией прибора, который йельский бихевиорист Кларк Л. Халл вначале назвал "Ящик Скиннера". Еще раньше Фред Скиннер соорудит звуконепроницаемый ящик, который поможет изолировать животное от отвлекающих шумов и тем самым сделает эксперимент более управляемым.

Скиннер смастерил беговую дорожку из еловой доски. Крыса получала корм в конце дорожки, затем ее рукой переносили обратно в звуконепроницаемый ящик, для осуществления ею новой попытки. Перемещение крысы вручную было неэффективно, и он сконструировал дорожку для обратного пути, так что крыса, не сворачивая, могла возвращаться без вмешательства экспериментатора. Пищевой стимул побуждал ее к следующей попытке. Но обнаружился новый неожиданный эффект: крыса не всегда повторяла попытку сразу же после поедания корма. Она какое-то время выжидала, прежде чем сделать еще одну попытку, и это промедление животного заинтересовало Скиннера. А что если изучить время между поеданием корма и началом новой пробежки? Скоро он уже мог в ходе эксперимента контролировать эту переменную (время). Затем Скиннер сократил путь крысы до пробега по наклоняющейся доске. Когда крыса сбегала, но этому укороченному пути, она наклоняла доску, при этом, за счет наклона, вращался диск, с которого корм начинал сыпаться в кормушку. Поскольку крыса, таким образом, сама добывала свой корм, она стала делать пробежки чаще, отметка кимографа устанавливалась все дальше и дальше. Проведя линии между отметками, Скиннер смог графически измерить время между отдельными пробежками - это была наиболее достоверно измеряемая величина.

Одно цеплялось за другое, и вот, неожиданно счастливый случай, озарение - возможно, самая большая удача в экспериментаторской карьере Скиннера. Деревянный диск, служивший для подачи корма, имел центральный шпиндель, выступающую часть которого ученый не срезал: однажды ему пришло в голову намотать веревку вокруг шпинделя и дать ей разматываться по мере опорожнения диска. Таким образом, он получал новый способ регистрации. Теперь вместо отметок он имел кривую - кривую, позволяющую выявить изменения в скорости реакции, что было невозможно сделать с помощью отметок. Скиннер изобрел накопительное регистрирующее устройство, записывающее кривые с замечательной точностью. Он получил кривую поглощения пищи и "тангенс кривой точно указывал, насколько крыса голодна на данный момент времени".

Теперь необходимость в наклонной доске отпадала: достаточно было просто ящика с проволокой, загнутой горизонтально, при участии которой подавался корм, когда крыса торопилась, на кривых кумулятивного регистрирующего устройства отмечались закономерные изменения. На свой 26-й день рождения Фред написал родителям: "То, что всегда считалось "свободным поведением" крысы, как оказалось, подчиняется вполне естественному закону, подобно частоте ее пульса". Удивительным научным достижением молодого Скиннера оказалась возможность видеть воочию, как на его глазах, в действительности происходило нечто, предсказанное им заранее.

Весной 1930 года произошло еще два удивительных открытия. Скиннер вспоминает: "Я вовсе не стремился доказать, что "подкрепление" изменяет поведение, но, к моему изумлению, я обнаружил, что это именно так". Действительно крыса, в конце концов, нажимает на рычаг, корм высыпается и съедается. Однако не пища обеспечивает непосредственное подкрепление. В качестве такового выступает стук кормушки, в котором находится корм: "Если я даю животному еду, это не происходит одновременно. Когда крыса толкает рычаг и раздается "бомм", это "бомм" и есть главное. Он абсолютно совпадает во времени с движением крысы, и именно это и делает возможным немедленное подкрепление".

Его интерес к голубям зародился в апреле 1940 года, во время путешествия на поезде в Чикаго. Глядя в окно на проплывающий мимо пейзаж, он обратил внимание на птиц, которые летели рядом с поездом, взмывали вверх и описывали круги, при этом, не нарушая стройного порядка в соотношении групп. Птицы представились ему механизмами с необыкновенной маневренностью и способностью к точному ориентированию. Почему бы не использовать их в качестве управляющего устройства ракет, используемых для перехвата вражеских бомб - бомб, убивающих и калечащих тысячи мирных жителей? Таково было начало финансируемой правительством программы развития идеи птице-управляемых ракет под названием проект «Голубь». Хотя, в конечном счете, правительство отказалось от использования голубей для этих целей, усилия Скиннера по развитию "голубиной технологии" положили начало его карьере социального изобретателя. У голубей вырабатывалось условное поведение - они должны были клевать мишень внутри ракеты, которая затем выводила из строя бомбу. Голубиная технология была просто способом достижения социального эффекта - минимальной потери человеческих жизней при бомбардировках в военное время.

Скиннер проводил исследования с голубями для изучения «суеверного» поведения. Некоторые психологи утверждали, что суеверия являются примером уникально человеческого поведения. С целью опровергнуть это, Скиннер провел эксперимент. Для этого он построил приспособление для выдачи пищи так, что пищевые шарики падали в лоток с интервалами в 15 с., независимо оттого, что делало животное в это время. Т.е. в этом случае обеспечивалось подкрепление, которое не было случайным. Другими словами, животные получали подкрепление каждые 15 с., вне зависимости от того, что они делали. Подопытными в этом исследовании были 8 голубей. Они в течение нескольких дней получали пищи меньше их нормального рациона, так что во время тестирования они были голодными, и, следовательно, в высокой степени мотивированными для осуществления необходимой для получения пищи активности. Каждого голубя каждый день на несколько минут помещали в экспериментальную камеру, где он мог свободно вести себя так, как свойственно голубю. В течение этого периода подкрепление выдавалось регулярно через каждые 15 с. После нескольких дней такого обуславливания два независимых наблюдателя протоколировали поведение птиц в камере. Как пишет Скиннер, в шести из восьми случаев реакции были настолько четко определены, что описания обоих наблюдателей полностью соответствовали друг другу. У одной из птиц сформировалась реакция, состоящая в движении по клетке против часовой стрелки и выполнение 2-х или 3-х поворотов в промежутках между подкреплениями. Другая раз за разом вытягивала голову в один из верхних углов камеры, третья демонстрировала качательные движения, попеременно будто бы засовывая голову под невидимую преграду и поднимая ее вверх. Еще у одной птицы наблюдались движения, напоминающие чистку перьев, направленные к полу, но не касающиеся его. Ни одно из указанных движений не наблюдалось у птиц до эксперимента. Тем не менее, птицы вели себя так, как если бы определенное действие порождало пищу, т.е. они стали « суеверными».

Далее Скиннер решил посмотреть, что произойдет, если временной интервал между подкреплениями будет увеличен. Для одной из качающей головой птиц интервал между выдачами пищи был увеличен до одной минуты. По мере увеличения интервала движения голубя становились все более и более энергичными, пока наконец, вынужденные вследствие интенсивного движения головой шаги не становились настолько выраженными, что казалось, будто птица исполняет некий вид танца в течение минутного интервала между подкреплениями. В конце концов вновь сформировавшееся поведение птиц было подвергнуто угашению. Это означает, что подкрепление этого поведения было прекращено. « Суеверное» поведение постепенно сходило на нет и прекращалось. Однако в случае надеющегося голубя, где интервал был увеличен до 1 минуты, было зафиксировано более 10.000 реакций, прежде, чем произошло угашение. Птица ведет себя так, как будто между ее поведением и появлением пищи существует причинно- следственная связь, хотя на самом деле ее нет.

Следующий шаг - применить эти данные к человеку. Скиннер описывал как боулер (игрок в кегли), толкнувший шар по дорожке, продолжает вести себя так, как если бы он управлял его движением, изгибая и поворачивая свою руку и плечо вслед за движущимся шаром. Скиннер отмечал. Что было бы не совсем правильно утверждать, будто между движениями руки и плеча боулера и движением шара нет никакой связи. Верно то, что после того, как шар выпущен из руки, поведение боулера не оказывает влияния на шар, но поведение шара оказывает влияние на боулера. Причина необычайной устойчивости суеверий к угашению была продемонстрирована голубем, который « надеялся» 10.000 раз, прежде чем прекратилось его «суеверное» поведение. Когда какое-то поведение подкрепляется лишь время от времени, оно все же с большим трудом поддается угашению. Это обусловлено сильно выраженным ожиданием того, что суеверное поведение может « сработать» и вызвать подкрепляющие последствия. Нетрудно себе представить, что если бы связь между действием и подкреплением имела место в каждом отдельном случае, а потом исчезла, то суеверное поведение прекратилось бы быстро. Однако у людей ситуации, в которых имеют место подобные случайные подкрепления, обычно возникают с большим временным интервалом, и в результате суеверное поведение часто сохраняется на протяжении всей жизни.

Скиннер в 1936 году оставил Гарвард, чтобы впервые встать за преподавательскую кафедру в Миннесотском университете, он уже не был холостяком, его женой стала Ивонна Блю, дочь процветающего офтальмолога из Чикаго. К 1944 году в семье Скиннеров было уже две дочери, Джулия и Дебора. Самое близкое социальное окружение Фреда, его семья, в значительной мере повлияло на его активность социального изобретателя.

Еще не оправившись от разочарования, вызванного отказом правительства от проекта "Голубь", летом 1944 года, подгоняемый в своих творческих усилиях рождением второй дочери, Деборы, Скиннер начал строить специальный прибор. Вначале от назвал его "механическая няня", затем прибор получил торговое название "воздушная камера". Устройство Скиннера обеспечивало уникальное жизненное пространство для его новорожденной дочери - термостат с регулируемыми параметрами среды, замкнутая камера со смотровым окном из безопасного стекла и эластичным полом с марлевой подстилкой, легко меняемой по мере загрязнения. Ребенок содержался в идеальных комфортных для него условиях без всяких пижам на застежках и даже без пеленок. Дебора наслаждалась необычайной свободой движений и росла крепким, здоровым ребенком. К тому же камера освободила его жену. Ей уже не нужно было постоянно следить за состоянием Доборы, хотя в любое время она имела возможность вынуть ребенка из камеры, чтобы подержать на ручках или поиграть.

Дебора Скиннер стала причиной появления еще одного изобретения, имеющего большой социальный потенциал. Дебора училась читать намного медленнее, чем ее сестра Джулия, что очень огорчало как ее, так и ее отца. Фред Скиннер обеспокоился качеством преподавания в "Шэди Хилл", частной школе, которую посещали дети многих сотрудников Гарварда. Однажды Скиннер навестил свою дочь и ужаснулся тем, как преподается в классе математика. Некоторые дети уже закончили решать задачи, и им нечем было заняться; другие безуспешно сражались с заданием; результаты теста можно было узнать только на следующий день. Ему представилось, что должен был существовать более рациональный способ обучения. И он сконструировал первую примитивную обучающую машину - устройство, в котором на сложенной гармошкой бумажной ленте, а позднее на картонных карточках, были напечатаны математические задачи. Вопросы были подобраны с постепенно возрастающей трудностью, так, чтобы обеспечить отвечающему возможность получения правильных ответов. Подвижной рычаг с помощью прозрачного окошка показывал, верно ли решена задача. Если ответ учащегося был правильным, передвигался другой рычаг, выставляя следующий вопрос. Если ответ на вопрос оказывался неверным, рычаг не мог двигаться, и студенту предоставлялась возможность попытаться решить задачу правильно. Машина не могла прочитать правильный или неправильный ответ; все, что она могла - это с помощью механического устройства показать, верно ли выполнено задание.

Сутью скиннеровского изобретения была разработка учебных схем, в которых было обеспечено продвижение ученика от выполнения простейшего задания по арифметике или правописанию ко все более трудным, но так постепенно, что ученик редко ошибался. Подкрепление в виде демонстрации в окошке правильного ответа на вопрос побуждало ученика переходить к следующему вопросу, потом к следующему, позволяя, в конце концов, вполне овладеть предметом.

Таким образом, ученик осваивал тему не методом проб и ошибок, а движимый стимулом в виде подкреплений - его собственных правильных ответов на вопросы, появляющихся в окошке. Но Скиннер понял, что успеху его изобретения препятствует не только его неумение найти правильный подход к американским предпринимателям. Школьные учителя и администраторы боялись, что обучающие машины лишат их работы.

скиннер программированный обучение поведение

Заключение

Бихевиористы пришли к выводам, что обусловливание происходит и без осознавания. Оно наблюдается даже во сне. Обусловливание поддерживается независимо от сознания. Это привело Скиннера к выводу, что возможности сознания в управлении поведением сильно преувеличиваются. Но все-таки обусловливание наиболее эффективно, когда человек сознает его и активно участвует в его выработке.

Интересны разработки Скиннера по программированному обучению. Здесь каждый учащийся двигается в своем собственном темпе. Он переходит к более сложному заданию после того, как усвоил менее сложное. Благодаря постепенности продвижения учащийся почти всегда прав (положительное подкрепление), так как он постоянно активен и получает немедленное подтверждение своего успеха. Кроме того, вопрос всегда сформулирован так, что учащийся может понять то, что существенно, и дать правильный ответ. За содержание программы и его доступность отвечает составитель программы, учителю остается только помочь отдельным ученикам и организовать классную работу вне программированного материала.

Работы Скиннера, оказали большое влияние на психологию, клиническую практику и педагогику. Возникли новые школы психотерапии, новая социальная практика, новые технологии обучения. К сожалению, мы от всего этого остались в стороне.

Но и на Западе идеи Скиннера подвергали жестокой критике журналисты за то, что он отрицал идеи свободы, творчества, личности, психологи за то, что не уделял внимания другим проблемам, философы и теологи -- за игнорирование проблемы внутреннего бытия. Тем не менее, Скиннер предложил свой прямой и без тумана взгляд на природу человека. Он позволяет нам понять себя без обращения к интуиции и божественному вмешательству.

Список использованных источников

1. Литвак М.Е. Из ада в рай: Избранные лекции по психотерапии/ Учебное пособие.- Ростов н/Д: Изд-во «Феникс», 1997.- 448 с.

2. Хок РоджерР.40 исследований, которые потрясли психологию. Секреты выдающихся экспериментов.- СПб.: «Прайм-ЕВРОЗНАК», 2003. - 416 с.

3. http/ www.bfskinner.org/ index.asp

1. Голодную подопытную крысу помещали в специально оборудованный ящик – «ящик Скиннера». При нажатии на рычаг, установленный внутри, животное получало порцию еды. Скоро крыса понимала, что, нажав на рычаг, сможет полакомиться (позитивный результат), поэтому вследствие позитивного подкрепления такая форма поведения закреплялась.

2. Далее крысу снова помещали в ящик и воздействовали на ее лапки через решетку в полу слабым разрядом электрического тока. Когда животное нажимало на рычаг, разряд прекращался, и так далее. Разряд, нажатие на рычаг и прекращение подачи тока. Таким образом, каждый последующий раз, когда на крысу воздействовали током, она закрепляла поведение, которое клало конец неприятным ощущениям. Это пример негативного подкрепления, поскольку животное приучали к определенной форме поведения, чтобы прекратить действие негативного фактора.

3. Крысу помещали в ящик, и каждый раз, когда она нажимала на рычаг, через лапки воздействовали на нее слабым электрическим разрядом (негативное подкрепление). Постепенно такое поведение затухало из‑за негативного последствия – это пример наказания.

4. И последнее: крысу помещали в ящик, не давая ей при этом еды, но не воздействуя на нее и электрическим током, сколько бы она ни жала на рычаг. В этом случае в мозге животного не формировалась связь между нажатием на рычаг и позитивными либо негативными последствиями, поэтому постепенно такая форма поведения затухала.

«Ящик Скиннера»

Издержки изобретения «ящика Скиннера»

В 1943 году беременная жена Скиннера попросила его придумать безопасную детскую кроватку для будущего малыша. Будучи изобретателем по природе, исследователь изготовил закрытую подогреваемую кроватку с плексигласовым окошком и назвал ее «Няней». Чрезвычайно довольный своим изобретением, Скиннер отправил описание кроватки в журнал Ladies’ Home, и там статью напечатали под названием «Малыш в ящике». Поскольку к тому времени уже многие знали об исследованиях Скиннера в области оперантного обусловливания, в обществе довольно быстро распространились слухи о том, что ученый сажает в изобретенную им экспериментальную камеру собственную дочь, из‑за чего малышка тронулась умом и хотела покончить жизнь самоубийством. Но это, конечно, были просто слухи.

Режимы подкрепления

Еще один важный аспект оперантного обусловливания – идея о режимах подкрепления. Частота и момент выдачи подкрепления весьма существенно влияют на интенсивность закрепления нужного поведения и быстроту реакции; причем может использоваться как позитивное, так и негативное подкрепление. Цель – закрепить поведение и повысить вероятность его повторения в будущем. Существует два типа режимов подкрепления:

1. Постоянное подкрепление – поведение подкрепляется каждый раз, когда оно имеет место.

2. Частичное подкрепление – поведение подкрепляется не во всех случаях.

Следует отметить, что реакция, вырабатываемая в результате частичного подкрепления, оказывается более стойкой к угасанию, поскольку в этом случае для научения требуется время; и оно проводится не за один раз. Частичное подкрепление, в свою очередь, подразделяется на четыре типа:

1. Режим подкрепления с постоянным соотношением: реакция закрепляется после конкретного количества реакций. Например, еда появляется в кормушке только после того, как крыса нажимает на рычаг три раза.

2. Режим подкрепления с вариативным соотношением: подкрепление возникает после какого‑то в среднем предопределенного числа реакций. Например, крыса нажимает на рычаг несколько раз, но еда в кормушке появляется произвольно, независимо от количества нажатий.

3. Режим подкрепления с постоянным интервалом: реакция вознаграждается по истечении определенного периода времени, прошедшего с момента предыдущего подкрепления. Например, если крыса нажимает на рычаг в течение тридцати секунд, она получает пищу. В данном случае неважно, сколько раз она нажмет, поскольку за этот промежуток времени ей в любом случае выдадут только одну порцию.

4. Режим подкрепления с вариативным интервалом: подкрепление выдается по истечении неопределенного промежутка времени. Например, крысе дают еду каждые пятнадцать секунд, потом каждые пять секунд, затем каждые сорок пять секунд и так далее.

Мы с вами ежедневно видим примеры четырех режимов подкрепления в повседневной жизни. Скажем, подкрепление с постоянным соотношением очень часто встречается при игре в видеоигры: чтобы получить приз, игроку нужно набрать определенное количество баллов или собрать определенное число монет. Торговые автоматы представляют собой пример режима подкрепления с вариативным соотношением. Необходимость раз в одну или две недели оплачивать счета – это пример режима с постоянным интервалом. А если ваш начальник время от времени заходит в отдел, чтобы проверить работу конкретных сотрудников, – это режим подкрепления с вариативным интервалом. Следует отметить, что для научения совершенно новой форме поведения лучше всего подходит режим с постоянным соотношением, зато режим с вариативным интервалом дает наиболее стойкий к угасанию результат.

Несмотря на то что сегодня бихевиоризм не так популярен, как раньше, значимость и теорий, и открытий Фредерика Скиннера никто не отрицает. Его методики научения остаются чрезвычайно важным инструментом в работе врачей‑психиатров, а идеи подкрепления и наказания используются в педагогике и при работе с животными.

Зигмунд Фрейд

(1856–1939)

Отец психоанализа

Зигмунд Фрейд родился 6 мая 1856 года во Фрайберге, в Моравии (теперь это Чешская Республика). Его мать, вторая жена отца, была на двадцать лет моложе мужа. У Зигмунда было двое сводных братьев, тоже на два десятка лет старше его. Он был первым из семи детей своей матери. Когда мальчику исполнилось четыре года, семья переехала из Моравии в Вену, где Фрейд провел бо льшую часть своей жизни, несмотря на то что постоянно твердил о своей нелюбви к этому городу.

В школе Зигмунд учился хорошо. Поскольку он был евреем (по вероисповеданию Фрейд называл себя атеистом, не причисляя ни к какой религии), то после школы в 1873 году он поступил в медицинскую школу при Венском университете: в те времена в Австрии медицина и юриспруденция считались единственно приемлемыми профессиональными стезями для еврейского юноши. По окончании университета Фрейду больше всего хотелось заниматься нейропсихологией, однако получить место в исследовательской лаборатории оказалось чрезвычайно трудно, поэтому он открыл частную практику со специализацией на нервных расстройствах. В этот период Фрейд подружился с врачом‑физиологом Джозефом Брейером, и эта дружба во многом определила дальнейшее направление его научной деятельности, особенно после того как Брейер стал лечить пациентов, страдающих истерией, посредством гипноза, поощряя их вспоминать и рассказывать о своем прошлом. Во время гипнотических сеансов, которые одна из пациенток Брейера по имени Анна О. назвала «целительными беседами», пациенты обсуждали воспоминания, в сознательном состоянии никогда не всплывавшие в их памяти, и это способствовало заметному облегчению симптомов заболевания. Несколько позже Фрейд стал соавтором книги Брейера «Очерки об истерии», а потом, решив больше узнать о гипнозе от знаменитого французского психиатра Жана Мартена Шарко, отправился в Париж.

В 1886 году Зигмунд Фрейд вернулся в Вену и открыл новую частную практику. Поначалу для лечения пациентов, страдающих неврозами и истерией, он применял гипноз, но скоро понял, что добивается значительно лучших результатов, когда во время сеанса терапии пациент просто расслаблен (например, полулежит на кушетке) и рассказывает психотерапевту обо всем, что приходит ему в голову, – этот метод называется свободные ассоциации . По мнению Фрейда, такой подход позволяет врачу проанализировать услышанное и выявить в прошлом пациента травмирующее событие, приведшее к психическому заболеванию, что существенно облегчает задачу исцеления больного.

Самые известные труды Зигмунда Фрейда появились буквально один за другим. Всего за пять лет он опубликовал три книги, оказывавшие огромное влияние на психологию на протяжении целого ряда десятилетий: «Толкование сновидений» (1900 год), в которой Фрейд поведал миру о своей идее бессознательного; «Психопатология обыденной жизни» (1901 год), в которой он теоретизирует по поводу того, что наши оговорки – позднее их начали называть оговорками по Фрейду – на самом деле представляют собой вполне осмысленные комментарии, выдаваемые динамическим бессознательным; «Три очерка по теории сексуальности»(1905 год), где автор, в числе прочего, рассказывает о таком психическом феномене, как эдипов комплекс.

Фрейд считался одним из самых выдающихся умов своего времени, а в 1933 году оказался в центре весьма нежелательного внимания: пришедшие к власти нацисты сжигали его книги. В 1938 году немецкие войска вошли в Австрию, и у Фрейда отобрали паспорт. Только благодаря всемирной славе и давлению высокопоставленных и влиятельных иностранцев ему разрешили выехать в Англию, где он прожил до самой смерти (1939 год).

Похожая информация.

Слайд 10. Разнообразие идей Скиннера

Занимаясь психологией, Скиннер конструировал различные приборы и педагогические технологии и даже изобрёл манеж для маленьких детей. Манеж представлял собой что-то вроде шкафа со встроенной колыбелью для малыша, лежащего за прозрачным стеклом. В ящике поддерживалась оптимальная для ребёнка температура и влажность, в нём был специальный матрас, который легко менялся, а также развивающие игрушки. Так как в ящике всегда была комфортная температура, Скиннер рекомендовал держать младенца всегда голым, чтобы его тактильные ощущения развивались без помех. Именно в таком манеже он вырастил собственную дочь.

Скиннер изобрел теорию и технику программированного обучения и обучающие машины. Правда начал разрабатывать свою обучающую машину он после того, как посетил четвертый класс, в котором училась его дочь, и решил, что необходимо что-то сделать для улучшения учебного процесса.

Он разработал программу бихевиорального контроля общества, идеи которой изложил в романе «Уолден Два», который и через пятьдесят после выхода в свет оставался популярным. А в 1971 году его книга «По ту сторону свободы и достоинства» стала национальным бестселлером.

Все его идеи и изобретения основывались на ортодоксальном бихевиористском взгляде, согласно которому такие «субъективные реальности», как разум, мысль, память, рассуждения не существуют. На самом деле они являются лишь «вербальными конструкциями, грамматическими ловушками, в которые попало человечество в процессе развития языка», «объяснительными сущностями, которые сами по себе необъяснимы». Целью Скиннера было не понимание психики, а определение того, как поведение формируется внешними причинами. Он не сомневался в правильности своих взглядов и писал, что «бихевиоризм, возможно, нуждается в прояснении, но нет необходимости его доказывать».

Выше упоминалось о влиянии на Скиннера позитивистской философии. Одним из важных элементов позитивизма является операциональный подход или операционализм. Операционизм утверждает, что значимость теорий или конкретных научных данных зависит от значимости тех измерительных операций, которые использовались для получения этих данных. Все концепции, лишенные физической измерительной основы, должны отбрасываться.

Впервые основные положения операционализма были изложены Бриджменом в его книге «Логика современной физики» (1927 г.), которая привлекла внимание многих психологов, особенно бихевиористов.

Бихевиористам особенно понравилось положение Бриджмена об отбрасывании псевдопроблем - то есть тех проблем, ответы на которые не могут быть проверены объективными экспериментами. Все понятия или предположения, которые не могут быть подвергнуты экспериментальной проверке, - такие, например, как вопросы существования или сущности души, - не имеют никакого смысла для науки.

Скиннер все объективировал и измерял, то есть операционализировал. На картинке – существенно модифицированная им клетка Торндайка – проблемный ящик Скиннера , приспособление для исследования закономерностей оперантной активности подопытных животных

Оперантное поведение возникает без воздействия каких-либо внешних наблюдаемых раздражителей. Реакция организма кажется спонтанной в том смысле, что внешне она никак не связана с каким-либо наблюдаемым раздражителем. Это вовсе не означает, что стимула, вызывающего ту или иную реакцию, не существует; это значит, что при возникновении данной реакции ни один стимул не является наблюдаемым.