Кликер тренинг что это
Кликер для собак: что это такое и как использовать для дрессировки
Что такое кликер для собак, знает не каждый собачник. Однако это устройство поможет быстрее получить результат дрессировки, сделает питомца более послушным. При этом повышается не только скорость обучения животного, но и эффект от занятий.
Кликер для собак
Что такое кликер
Кликер для дрессировки собак внешне представляет собой небольшую коробку, которая размерами не превышает спичечный коробок. Внутри располагается небольшая металлическая пластина, которая издает специфический звук при надавливании на нее пальцем через кнопку на корпусе устройства.
Основные функции кликера
Основной функцией кликера является поощрение правильного действия животного. Использовать прибор можно для дрессировки, как крупных особей, так и маленьких щенков. Подобным образом подготавливают собачек для участия в цирковых номерах, соревнованиях, выставках, а также для охоты.
Этот метод воспитания животных на данный момент считается наиболее эффективным и безопасным, поскольку в процессе дрессировки не требуется использовать наказания, которые могут травмировать психику собаки.
Как работает кликер для собак
Когда хозяин разберется, что это такое — кликер для собак, можно начинать дрессировать своих питомцев. Принцип работы устройства основан на том, что у человека механическая реакция лучше развита вербальной и опережает ее. Механизм работы изделия прост: требуется просто нажать на кнопку в момент совершения питомцем нужного действия.
Словесный маркер собака может слышать в повседневной жизни, из-за чего он обесценивается. У питомца отсутствует сильная позитивная реакция, связанная с правильными действиями с ее стороны. Поэтому чтобы ускорить процесс обучения, рекомендуется использовать кликер.
Дрессировка собак кликер-треннингом
Преимущества кликера для дрессировки собак
Кликер-тренинг для собак имеет ряд преимуществ в использовании во время дрессировки. При этом недостаток может быть только один — он может оказаться неэффективным в некоторых случаях, связанных с плохим слухом питомца.
Перевод на собачий язык
Часто проблемы с дрессировкой возникают не из-за нежелания питомца учиться, его плохого настроения, а просто из-за непонимания хозяина. Из-за этого владелец животного может начать злиться, что сводится к наказанию собаки. У пса начинается стресс, из-за чего занятий он избегает всеми возможными способами.
Кликер для собак помогает избавиться от проблемы. Щелчок требуется производить в тот момент, когда животное выполнило правильное действие, которое от него ожидалось. Подобный переводчик на собачий язык поможет избежать возникновения недоумения, которое можно прочесть в глазах собачки. Щелчок также должен сопровождаться поощрением.
Повышенная обучаемость
Если пользоваться кликером для собак, повышается скорость их обучения. Для животного щелчок прибора отличен от других звуков, которые привычны слуху питомца. Собака не понимает, что от нее требуется, поскольку ровный разговор с невнятной интонацией животные не воспринимают.
Улучшение запоминаемости
Человек лучше запоминает то, до чего он сам дошел, а не что ему преподнесли на блюдечке и тщательно пережевали. С питомцами та же ситуация.
Без явного влияния со стороны хозяина на собаку у животного появляется инициатива и самостоятельное мышление. Полученные в результате работы навыки лучше усваиваются.
Собака смотрит на кликер
Основные правила в обучении с устройством
Немногие владельцы животных знают, как использовать кликер для дрессировки собак. В первую очередь, питомец должен понять, что значит звуковой сигнал. Нужно следовать некоторым правилам, чтобы четвероногий друг реагировал на щелчок устройства.
Элементарные команды с использованием кликера
Когда собака начнет реагировать на звук тренинга, можно приступать к ее дрессировке. После каждой выполненной команды питомец должен получать сигнал о том, что сделал все правильно. Кликер можно использовать на прогулках. Для этого не обязательно даже выполнение определенной команды. Животное может пройти мимо приманки, лежащей на земле, не обратив на нее внимания, хозяин в этот момент должен поощрить поведение питомца щелчком.
Угощение пса лакомством
Обучение с кликером проходит легко и непринужденно. Однако устройство требуется правильно использовать. Для этого следует знать определенные правила, которые не следует нарушать:
Основными командами послушания считаются:
Использование кликера должно быть обдуманным. Нельзя использовать устройство наугад. Не стоит ждать от питомца, что он продолжит выполнять команду после того, как получит звуковой сигнал. Он поймет, что все сделал правильно, а потому начнет радоваться и просить вкусняшку.
Необходимо для себя решить, что именно требовать от животного. Если хочется, чтобы питомец просто выполнил команду, то щелкать кнопкой можно после того, как он сядет. Если же необходимо приучить животное оставаться в этом положении, то нужно ждать несколько секунд, а только затем издавать заветный звук.
Обзор популярных моделей кликеров-тренингов для собак
На данный момент в ветеринарных магазинах имеется большое разнообразие кликер-тренингов для представителей семейства собачьих. Они различают не только ценой, но и функциональностью. Наиболее популярными являются:
Можно ли изготовить кликер своими руками
Устройство можно изготовить самостоятельно в домашних условиях. Для этого не требуется особых талантов. Необходимо просто найти небольшой предмет, который будет производить характерный щелчок.
Для этих целей можно использовать крышечку из-под детского питания, элемент пьезозажигалки, шариковую ручку с кнопкой. Однако если изделие сломается, впоследствии придется искать с таким же звуком.
Правильное использование прибора для дрессировки пса поможет быстрее добиться желаемого результата. Между животным и хозяином возникнет особое взаимопонимание, собака будет самостоятельно догадываться о том, что от нее хотят.
Кликер для собак — что это такое и как использовать эффективно
Новая методика дрессировки – кликер для собак – завоевывает мир. Многие хозяева собак утвреждают, что с помощью этого небольшого устройства можно дрессировать свою собаку гораздо быстрее и эффективнее. С помощью кликера обучать животное гораздо проще. Сам процесс похож на увлекательную игру.
Что это такое
Кликер для дрессировки собак – это специальное приспособление, которое придумала Карен Прайор, известная дрессировщица. Она просто переняла принцип, что первоначально использовался для обучения дельфинов. Дрессировка животных, особенно тех, кто обитает в водной стихии, требует особых методов. Ведь на дельфина нельзя одеть ошейник, сбрую или поводок, чтобы как-то контролировать его поведение.
Обучение дельфинов требовало использования положительных методов, когда животное выполняет упражнение исключительно за награду. Необходимо было разработать особый способ общения с животным, чтобы иметь возможность вознаграждать его даже на расстоянии.
Ключом успеха стала работа со свистком, который издает специфический звук. Как известно, дельфины общаются с помощью ультразвука. Он отдаленно похож на серию щелчков, свист. Звук свистка определенного тона означал для животного, что оно сейчас получит вознаграждение за выполненный трюк. Таким образом, дрессировка водных млекопитающих стала гораздо проще и начала быстро приносить нужные результаты.
Кликер же имитирует ту же самую работу с собакой, а не дельфином. Только вместо свистка, что гораздо удобнее, применяется щелчок. Карен Прайор, известная дрессировщица, адаптировала эту методику для собак и написала свою знаменитую книгу «Дрессировка собак с кликером».
Сегодня кликер используется для обучения самых разных животных – тюленей, лошадей, обезьян, попугаев и даже зебр.
Кликер обеспечивает четкую связь с животным. С его помощью можно научить его не только различным трюкам, но и выполнять сложные действия.
Сегодня использование кликера стало очень популярным для дрессировки собак и коррекции поведения любимых питомцев.
Что представляет собой кликер?
Стоимость такого инструмента небольшая, всё зависит от особенностей кликера.
Виды кликеров
Существуют разные виды кликеров, которые удобно применять для всевозможных способов дрессировки. Некоторые обладают тихим звуком, другие, напротив, громким.
Простые кликеры кнопочные и пластинчатые стоят дешево, в пределах 100 рублей. Цена кликера с таргетом значительно дороже.
Можно ли изготовить кликер своими руками
Здесь ничего делать своими руками не потребуется. Достаточно найти небольшой предмет, который может производить характерный щелкающий звук.
Только нужно помнить, что если предмет сломается или потеряется, то трудно будет впоследствии найти точно такой же, чтобы звук получился как можно более похожим.
Почему кликер эффективнее слов поощрения?
Конечно, звук кликера можно заменить подходящим словом. Для собаки это будет значить то же самое, что и щелчок. Однако словесное поощрение лучше не использовать начинающим дрессировщикам. Собаки очень чувствительны к человеческому голосу. А ведь человек произносит каждый раз одно и то же слово поощрения по-разному. Меняется интонация, скорость, тональность голоса и громкость. Поэтому животное воспринимает это слово по-разному. В какой-то момент оно может звучать для него как нечто совершенно незнакомое.
Зачем нужен кликер для собак – понять просто. Он издает всегда одинаковый звук. Поэтому собаке гораздо легче привыкнуть к этому постоянному звуку, чем к слову, которое произносит человек.
Преимущества и недостатки использования кликера для обучения собаки
Чтобы понять, как использовать кликер для тренировки собак, нужно знать о всех его достоинствах и недостатках. Вот несомненные преимущества:
Однако, у этого комфортного и эффективного инструмента есть и свои недостатки, когда применение кликера нужно приостановить на время или использовать только в определенной обстановке:
Как работает кликер для собак
Прежде всего, собака должна понять, что означает для неё звуковой сигнал, который издает кликер. Для этого нужно всего лишь «закодировать» с помощью специальных действий мозг собаки так, чтобы она всегда реагировала на звук. Сделать это очень просто с помощью поощрения, награды – вкусняшек.
Первый этап. Звук кликера – это награда!
Возьмите в руку кликер и несколько кусочков любимого сухого корма. Просто нажмите на кнопку устройства, привлекая внимание собаки, и затем дайте ей вкусняшку.
Сейчас, на первом этапе совсем не нужно требовать от животного выполнять какие-то команды. Главная задача, приучить своего питомца к тому, что звук кликера для него означает, что ему сейчас дадут вкусняшку.
В первый раз нажмите на кликер тогда, когда собака сама обратила на вас внимание. Затем кликайте в любой другой момент времени. Главное, чтобы животное заинтересовалось этой «игрой», и у него выработался стойкий рефлекс на кликер.
Тогда звук кликера перестанет быть для собаки одним из множества других звуков в фоновом режиме.
Второй этап. Тестируем закрепленный эффект
Спустя несколько дней следует проверить, насколько эффективен ваш кликер тренинг для собаки. Если на звук кликера уши собаки приподнимаются, голова поворачивается в сторону дрессировщика и глаза ищут взгляд хозяина, это значит, что сигнал работает.
Поэтому мы уже можем начать использовать кликер для награждения собаки после выполнения простых и уже известных ей команд или действий. Любая собака, даже не дрессированная, но общающаяся уже некоторое время со своим хозяином, умеет выполнять некоторые действия по его просьбе. Например, подходит на призыв «иди сюда» или хотя бы знает свою кличку.
Вот именно это, самое простое действие и можно закрепить с помощью кликера и следующего за его звуком вознаграждения.
Как и когда можно проводить такой тест? Например, когда собака находится на небольшом расстоянии от вас, например, проходит из кухни в комнату или спокойно идет рядом с вами на поводке по улице. Вот здесь и можно нажать на кнопку кликера и понаблюдать за её реакцией, а затем обязательно вознаградить.
Такой тест нельзя выполнять слишком часто, поскольку таким образом мы можем непреднамеренно закрепить случайное поведение животного. Одного-двух раз будет вполне достаточно, чтобы получить четкое представление, насколько закрепилась реакция собаки на кликер.
Обучение собаки с кликером – как это происходит
Если собака уже реагирует соответствующим образом на звук кликера, мы можем приступить к обучению командам или формированию новых моделей поведения. Собаке при этом будет гораздо легче учиться. Собака, после каждой выполненной должным образом команды, получает четкий сигнал о том, что именно такое действие правильно. Хозяин именно такого поведения от неё ожидает!
Таким образом устанавливается полное взаимопонимание между животным и дрессировщиком.
Кликер особенно полезно использовать во время прогулки
Кликер можно отлично использовать в повседневных ситуациях. Например, нейтральная реакция собаки, когда она не обращает внимания на хлеб или другую приманку, лежащую на земле. Идет спокойно рядом на свободном, отпущенном поводке.
Такого поведения очень многие владельцы собак хотели бы добиться от своих питомцев. Тогда прогулка превращается в наслаждение, а не постоянное «перетягивание каната» и нервотрепку. Это очень ценные навыки.
Приобрести их и усилить можно очень просто с помощью кликера. Просто нажмите кнопку в нужное время, и ваш питомец узнает, что его поведение в данный момент заслуживает награды.
Тогда он будет стремиться изменить своё поведение, а затем это закрепится у него как норма.
Можно формировать новые сложные модели поведения с помощью кликера
Подобный метод обучения новым моделям поведения нужно разделить на отдельные этапы. Каждый из таких этапов должен иметь конкретную, маленькую цель, очередной шаг к формированию нужной поведенческой реакции.
Например, вы хотите научить собаку спокойно выходить из подъезда на прогулку. Для этого разделите всё действие на несколько этапов. Сначала формируйте правильное поведение перед выходом за дверь квартиры. Затем – во время открытия двери, далее проход по подъезду и т.д.
При этом пользуйтесь кликером и следующим за ним поощрением, чтобы хорошо закрепить каждую из маленьких достигнутых целей.
Можно поощрять те положительные действия, которые собака проявляет по собственной инициативе.
Иногда прогулка, особенно во время плохой погоды или холодной зимой, бывает недостаточна для того чтобы собака могла хорошо развлечься, набегаться и выплеснуть ту энергию, которая у неё накопилась. Вернувшись с прогулки, животное по-прежнему будет «беситься», стараясь вовлечь в свои шумные игры всех вокруг. Это далеко не всегда хорошо сказывается на мебели, коврах, даже вашей одежде. Да и соседям вовсе не нравится постоянный «тарарам».
Предложите ей интеллектуальную игру, которая потребляет большое количество избыточной энергии.
Вот как это может выглядеть в реальности:
Кликер для собак как пользоваться — основные принципы дрессировки и обучения командам
Обучение с кликером проходит очень легко. Разве трудно нажать на кнопку или пластинку? Конечно, нет. Однако применять этот инструмент нужно правильно. Здесь существуют определенные правила, каждое из которых имеет своё значение. И эти правила ни в коем случае нельзя нарушать. Иначе вся тренировка пойдет насмарку.
Вот как нужно пользоваться кликером.
Только один клик
Самый важный принцип обучения – это кликать только один раз перед тем как наградить собаку вкусненьким. Если нажать на кликер несколько раз, например, пять, то и поощрить её следует столько же раз, выдать пять вкусных кусочков.
Каждое нажатие на кликер сопровождается наградой, и никак иначе!
Продолжительность тренировки должна быть небольшой и длится всего лишь 15 минут
Не нажимайте кнопку, если у вас нет вкусняшки
Перед тем как кликнуть, убедитесь, что у вас в кармане есть вкусный кусочек, который вы можете дать своему питомцу. Отсутствие награды – это обман животного. Никогда нельзя разочаровывать свою собаку! Получив однажды негативный опыт, питомец запомнит его хорошо. И в следующий раз будет очень трудно, почти невозможно преодолеть это чувство. Оно окажется четко связаным со звуком кликера.
Если вы нажали на кнопку кликера случайно – тут же обязательно дайте собаку вкусняшку.
Никогда не кликайте просто так, если у вас для этого нет никакой причины.
Щелкайте кликером обдуманно
Звук кликера для собаки означает «хорошо сделано». А затем, когда поощрение получено, собака удаляется восвояси. Она своим поведением показывает, что выполнила свою миссию, а теперь вправе бросить всё и побежать по своим собачьим делам.
Поэтому, если вы, например, отрабатываете команду «сидеть» с помощью кликера, не ждите, что после щелчка собака останется в сидячем положении. Каждый раз внимательно обдумывайте, за какое именно поведение вы хотите вознаградить свою собаку.
Если нужно отработать сам момент, когда собака опускается на землю после поданной команды «сидеть», тогда кликайте и вознаграждайте её немедленно.
В том случае, когда вы хотите, чтобы животное, присев, не убегало сразу же, а оставалось в заданном положении – подождите несколько секунд и только потом щелкайте кликером и поощряйте животное. Постарайтесь во время этой паузы поддерживать с собакой контакт глазами, как бы подкрепляя своим обещанием ожидание награды. Вознаграждайте не за то, что собака присела, а за проявленное терпение.
Голос и кликер?
Конечно, все команды нужно подавать голосом, без использования кликера. И только после того как команда выполнена правильно, раздаётся щелчок и даётся нечто вкусненькое.
Можно ли при этом поощрять собаку еще и голосом? Конечно, но только после того как прозвучал кликер.
Не подзывайте к себе собаку на прогулке с помощью кликера
Звук кликера используется только для того чтобы вознаградить желаемое поведение собаки. Если же заменить кликом команду «ко мне», то это будет большая ошибка.
Собака поймет, что её вознаграждают за то, что она находится как можно дальше от хозяина. Поэтому будет стараться отбежать от вас на большое расстояние, с каждым разом увеличивая дистанцию.
В таком случае нужно применять кликер, отрабатывать команду «ко мне», поданную исключительно голосом, только когда собака окажется рядом.
Какой должна быть вкусняшка
Для поощрения используйте маленькие кусочки достаточно мягкие, которые собака в состоянии съесть быстро. Даже крупные породы нужно вознаграждать маленькими кусочками.
Перед дрессировкой старайтесь не кормить собаку. Она должна «работать» за еду.
Создавайте атмосферу благожелательную, положительную, беритесь за дрессировку собаки только в хорошем настроении.
Дрессировать собак с помощью кликера просто, вы только что убедились в этом. Отзывы людей, использующих эту методику в интернете, в основном, положительные.
Хозяева собак отмечают, в основном, что их питомцы резко «умнеют» после таких тренировок. Быстро учатся, становятся спокойнее, уравновешеннее. Сам процесс похож на веселую игру, поэтому занимаются они со своими животными с удовольствием.
Собака.com желает и вам попробовать эту замечательную методику дрессировки, которая дает очень многое, как для собаки, так и для тренера. Ведь между питомцем и его хозяином начинает складываться особая аура взаимопонимания буквально с первого взгляда.
Вот, взгляните на видео, как работают профессионалы дрессировки собак, используя кликер.
Дрессируем кошку: метод кликер-тренинга
Многие думают, что кошки практически не поддаются дрессировке, однако это не так: многие пушистые домоседы очень страдают от недостатка умственной нагрузки, начинают лениться и переедать. Развить интеллектуальные способности питомца поможет дрессировка с помощью положительного подкрепления. Хорошим помощником станет специальное устройство – кликер.
Что такое кликер?
Это небольшое устройство, которое издает особый щелкающий (кликающий) звук. С его помощью можно моментально «пометить» желательное поведение животного. Его можно купить в зоомагазине или использовать подручное устройство – например, механическую шариковую ручку, но помните, что в случае использования самодельного кликера вы легко можете запутать животное, если, например, просто так будете щелкать ручкой.
Выбираем лакомство по душе
Чтобы замотивировать животное сотрудничать с вами, найдите угощение, которое нравится вашей кошке больше других, и используйте его в качестве поощрения, советует портал «Кот, пес и я». Сначала надо приучить кошку к связи звука кликера и вознаграждения. Для этого щелкните прибором и тут же дайте угощение, повторите процедуру несколько раз, пока животное не запомнит последовательность. Старайтесь не перегружать зверя информацией. Помните, что в дрессировке важны последовательность и регулярность занятий.
Начинаем обучение
Выберите простые команды для начала дрессировки – например «сидеть». Для этого расположите лакомство перед мордой животного и постепенно сдвигайте его назад – потянувшись за угощением, кошка непроизвольно сядет. В этот момент щелкните кликером и угостите питомца. Когда животное освоит простые команды, начинайте разучивать более сложные.
Почему именно кликер?
С помощью условного сигнала проще «пометить» нужное действие. Животное быстрее понимает, чего вы хотите от него добиться, ведь щелчок она слышит ровно в тот же момент, когда совершает нужное вам действие. Кликер-тренинг широко применяется для дрессировки животных, этот метод эффективнее многих других помогает создать нужные ассоциации в мозге животного.
Хорошим поощрением для питомца может стать поглаживание и почесывание. Больше всего кошки любят, когда их гладят в тех местах, где есть ароматические железы. По словам специалистов, те части тела, за которыми питомцы чаще всего ухаживают или обнюхивают, имеют самую высокую концентрацию ароматических желез.
Кликер-тренинг с точки зрения науки. Как это работает?
Обзор статьи Lynna C. Feng, Tiffani J. Howell, Pauleen C. Bennett «How clicker training works: Comparing Reinforcing, Marking, and Bridging Hypotheses» // Applied Animal Behaviour Science 181 (2016)34-40
Кликер-тренинг или дрессировка с помощью кликера — сравнительно недавнее изобретение Карен Прайор, которое становится все более популярным. Австралийские ученые, чью статью мы выбрали для очередного выпуска Дайджеста, проанализировали более 50 работ, как посвященных кликер-тренингу (в их числе еще неопубликованная книга по нему) лабораторных и домашних животных, так и фундаментальным работам по научению, из которых, собственно идея кликер-тренинга и выросла. На этой основе был сделан ряд предположений о том, как именно работает кликер-тренинг, как он помогает или мешает обучению, и как его лучше использовать.
Существует несколько гипотез, которые могут объяснить, как условные сигналы могут облегчить процесс обучения. Авторы рассматривают три из них: 1) гипотеза условного (вторичного) подкрепления, 2) гипотеза маркера события (подчеркивание нужного тренеру поведения животного), и 3) гипотеза «мостика» — согласно которой кликер «заполняет паузу» между нужным поведением животного и его «материальным» поощрением.
Наиболее вероятной и простой в употреблении оказалась одна, она же получила подтверждение на основании одной из современных физиологических теорий. Поэтому я расскажу вам о ней, как наиболее полезной для практики. Если вам интересны и другие теории, вы найдете их в первоисточнике.
К сожалению, авторы не рассматривали более привычную для русского читателя теорию условно-рефлекторного поведения (по Павлову), поэтому будет интересно сравнить некоторые их выводы с теорией, привычной нам.
На основе чего появился кликер-тренинг.
В основе него лежал «закон эффекта» Торндайка (1911): любое действие, вызывающее удовольствие в определённой ситуации, ассоциируется с ней и в дальнейшем повышает вероятность повторения данного действия в подобной ситуации, неудовольствие же (или дискомфорт) при действии, связанное с определённой ситуацией, приводит к снижению вероятности совершения этого акта в похожей ситуации. Впрочем, на него авторы не сослались, а предпочли
Б.Ф. Скиннер
формулировку Скиннера (1938): если животное после какого-то поведения получит подкрепление (поощрение), то это поведение оно станет демонстрировать чаще, чем то, которое привело его к нежелательным последствиям (наказанию). (Тут, конечно же, есть ряд оговорок и исключений, через 20 лет экспериментов от второй часть его отказались, но мы на это отвлекаться не будем).
Опыт над белыми крысами (Grice,1948) показал, что задержка поощрения на 10 секунд снижает скорость обучения. Крысы, получающие поощрение немедленно, научались решать поставленную перед ними задачу в среднем за 20 повторений, а с задержкой в 10 секунд – в среднем за 580. Крысы, которые получали поощрение с опозданием, но получали вскоре после правильного поведения сигнал, который сообщал им, что еду они вот-вот получат, учились справляться с задачей в среднем за 155 повторений.
Карен Прайор
Далее авторы ссылаются на работы Прайор от конца 90-х годов прошлого века и сообщают, что тогда возникла идея кликера, как устройства, которое (вне лабораторных условий) подавало бы животному сигнал о том, что его вот-вот покормят. Первое подобие кликера (это был свисток у тренеров дельфинов) у нее был описан в работе 1975 года (книга «Несущие ветер»).
«Кликают», сразу же, как только произошло желательное поведение, и далее, как можно скорее животное получает еду.
Профессионалы часто используют кликер, как вторичное подкрепление; как маркер (нужного поведения); или как «мостик» (поясняющий животному, что его скоро поощрят «материально», т.е. оно получит первичное подкрепление) (Pryor, 2009).
Облегчает ли кликер-тренинг обучение?
Карен Прайор (Pryor, 1999) утверждает, что с помощью кликера животные учатся быстрее. Но что говорят исследования?
Существуют исследования, где сравнивали скорость обучения проверяемой группы животных, которым подавали предварительный сигнал кликером (дальше я ее буду называть кликер-группой) и контрольной группы животных, которых обучали прямым или первичным подкреплением (едой или водой). Два исследования были проведены с лошадьми (McCall and Burgin, 2002; Williams et al., 2004), одно с карликовыми козами (Langbein et al., 2007), и два с собаками-компаньонами (Smith and Davis, 2008; неопубликованные данные Blandina, n.d.).
Только одно из этих исследований (то, что на карликовых козах) показало, что животные из кликер-группы учатся достоверно быстрее, чем животные из контрольной группы.
В случае с собаками одно исследование (неопубликованные данные Blandina) показало, что контрольная группа учится быстрее, чем животные из кликер-группы, но статистики по этим данным нет, поэтому непонятно, достоверны ли эти отличия.
В других исследованиях достоверных различий между кликер-группой и контрольной группой по скорости обучения не было найдено. (Так и хочется добавить – а если не видно разницы, зачем платить больше?)
То есть, обучение с кликером идет или с той же скоростью, что и с прямым подкреплением (собаки и лошади), но также кликер может способствовать ускорению обучения (у коз) и замедлению его (у некоторых собак).
Стоит учесть, что связь сигнала с первичным подкреплением в этих исследованиях считалась установленной за 20 повторов. При этом нигде не оценивалась эффективность именно такого количества связи сигнала с прямым подкреплением у этих видов животных. Кроме того, для такого рода исследований всегда берут необученных животных. Ясно, что собака, с которой занимались кликер-тренингом (и она хорошо знает «правила игры») может обучаться очень быстро, но исследовать ее трудно – практически нереально отследить возникла ли у нее ассоциативная связь между задачей, условным и безусловным стимулом или она догадалась, что хочет хозяин по его взгляду, неосознанным жестам, опыту уже освоенных похожих трюков.
Сигналы, которые использовались для поощрения лабораторных животных, отличались от щелчка кликера. В исследованиях Скиннера (1938) голодная крыса научилась связывать предупредительный сигнал с пищей с первого предъявления. 20 повторений потребовалось для того, чтобы крыса связала предупредительный сигнал с поощрением водой со вкусовыми добавками. В дальнейшем Скиннер использовал от 50 до 200 повторений для того, чтобы крыса выучила сигнал, как поощрительный.
Гипотеза условного или вторичного подкрепления.
В отличие от прямого или первичного подкрепления (пищи, воды), которое имеет изначальную ценность для животного, условное или вторичное – это изначально нейтральный стимул (щелчок кликера), который, при соединении с первичным подкреплением, со временем станет для животного столь же ценным. То есть, вторичное подкрепление становится наградой само по себе (временно или навсегда — тема отдельных исследований).
Теоретически любой нейтральный для животного стимул может стать вторичным подкреплением. И тогда он сможет обеспечить поощрение животному независимо от его местоположения или позы. Spence (1947) предположил, что все обучения с отсроченным подкреплением происходят в результате немедленного вторичного подкрепления.
Является или нет сигнал вторичным подкреплением, можно определить стандартными методами (Williams,1994): измерить скорость обучения, установить, как долго при поддержке него задачи решаются правильно (сохраняется нужное поведение), и проверить возможность сформировать новое поведение при поддержке только сигнала.
«ящик Скиннера»
В 4 работах (с 1938 по 1999 годы, в разных лабораториях), проведенных на крысах, показано, что в группе крыс, которых обучали с использованием сигнала+пищи обучение шло достоверно быстрее, чем в контрольной группе (подкрепление только пищей).
В 7 исследованиях на крысах нужное поведение при поддержке только сигнала сохранялось дольше у группы, которую обучали с сигналом+пищей по сравнению с контрольной группой
Сохранялось нужное поведение дольше и у голубей (2 исследования из 2).
Обучение новой задаче только на сигнале, Скиннер провел на 4 крысах. 60 повторов с уже знакомой задачей сигнал подавался одновременно с первичным подкреплением. Затем крысам дали новую задачу и правильные решения поощряли только сигналом. Крысы обучились ее решать довольно быстро, но после 30-50 испытаний только с сигналом — перестали ее решать.
По той же схеме эксперимента, с поощрением одним лишь сигналом, обучались решать новые задачи крысы в еще двух исследованиях, и мартышки.
McCall and Burgin (2002) подтвердили, что сигнал не работает как поощрение неопределенно долгое время. В их исследовании лошади из группы кликер+пища, работали лучше, чем лошади только на прямом подкреплении, но через полчаса работы производительность у обеих групп оказалось одинаковая. (Читая эту часть я, выражаясь ненаучным языком, «выпала в осадок». Лошадей целый час заставили решать логические задачи. Да кроме удовольствия от поощрения есть еще простое утомление!)
Далее авторы рассуждают о том, почему условное подкрепление не может быть эффективным постоянно, а я думаю: все это как раз четко ложится в рамки учения об условном рефлексе, который без поддержания имеет свойство ослабевать.
Физиологический подход.
Если этологи изучают поведение, глядя на объект, то физиологи смотрят на влияние химических процессов в организме на поведение. Я люблю, когда оба подхода объединяют (а если еще генетику добавляют, вообще красота получается), поэтому с интересом прочла то, что авторы «нарыли» в работах по физиологии.
(Domjan, 2003) определил, что дофамин играет определенную роль во внутренних процессах вознаграждения и мотивации (вообще-то это еще в учебнике по физиологии от 1992 года, по которому я училась, было написано, ну ладно).
Сейчас у физиологов в моде теория действия дофамина от Шульца (Schultz, 1998): ошибочно предсказанной награды. Получили эту теорию так: у обезьян вырабатывали условный рефлекс по Павлову (наконец-то!) и при этом следили за активностью дофаминовых нейронов. Когда она увеличивается — животное получает удовольствие.
Обезьяны в эксперименте получали стимул, а затем в рот им впрыскивали сладкий сок. Удалось выяснить следующее:
В процессе обучения активность дофаминовых нейронов увеличивалась, когда обезьяна получала сок неожиданно, или после сигнала.
Когда условный рефлекс был сформирован, выяснилось, что активность дофаминовых нейронов возрастает уже после подачи сигнала и до впрыскивания сока. Дальнейшее получение сока (после сигнала) не влияло на активность нейронов.
А вот если после сигнала сок обезьяна не получала, активность дофаминовых нейронов снижалась.
То есть, на физиологическом уровне была подтверждена гипотеза условного подкрепления.
Но если прямое подкрепление задержится сильно, уровень дофамина снизится. И значение сигнала, как вторичного подкрепления – обесценится.
Дальнейшие исследования (Stauffer et al., 2015) показали, то, что Шульцу (Schultz, 1998) обнаружить не удалось: дофаминовый ответ имеет две составляющие. Первая — увеличение уровня дофамина в ответ на стимул, и, вторая — еще одно увеличение уровня, когда получается обещанная награда или падение уровня – если обещанной награды нет. Это еще предстоит исследовать, но похоже, что для нормального действия условного подкрепления (кликера) у нас есть время поощрить животное прямым подкреплением до того момента, как начнет снижаться уровень дофамина, выросший на условном подкреплении.
Замечу, что в экспериментах Павлова и Скиннера есть сходства, и есть различия. Мы сравниваем здесь выводы только в том, в чем они действительно похожи – как нейтральный стимул становится условным (в результате чего собака начинает обращать внимание на щелчок кликера). Но обучение происходит иначе. Когда собака проявляет инициативу, принимает участие в процессе собственного обучения, ее мотивации (и их физиологическая основа — дофамин, эндорфины) отличаются от обучения, где собака – объект к которому применяют «безусловные раздражители».
Итак, вывод, который вы можете сделать из этой части статьи: при кликер-тренинге
при кликер-тренинге во время щелчка кликера у собаки активируются дофаминовые нейроны, так что она действительно получает удовольствие, когда находит «правильный ответ»
во время щелчка кликера у собаки активируются дофаминовые нейроны, так что она действительно получает удовольствие, когда находит «правильный ответ».
Карен Прайор (Pryor, 1975) сообщает, что если за поведением не всегда следует поощрение едой (вариативный режим подкрепления), то животное начинает заниматься азартнее. Также возрастает интерес к занятиям, если животное изредка получает «большой куш» (большое количество первичного подкрепления).
Мне самой не раз приходилось убеждаться, что куш и вариативный режим подкрепления работают. С точки зрения разобранных здесь теорий непонятно, как это происходит. Почему кратковременная отмена лакомства и куш заставляют работать азартнее? Но есть ведь и другие теории (например, теория значимого стимула у физиологов). Что ж, будем ждать, когда кто-нибудь подробно разберет их в связи с кликером!
Спасибо за репост! 🙂