Affichage des articles dont le libellé est renforcement négatif. Afficher tous les articles
Affichage des articles dont le libellé est renforcement négatif. Afficher tous les articles

samedi 10 août 2013

L'affectif et l'entrainement

Traditionnellement les chevaux sont entrainés à l'aide du renforcement négatif. Récemment des méthodes intégrant le renforcement positif sont devenues plus fréquentes.

Cette étude visait à comparer les effets du RN et du RP sur l'état affectif du cheval en utilisant des indicateurs comportementaux et physiologiques.

Les chevaux utilisant le RP (dans ce cas clicker training) ont appris à suivre une cible.
Les chevaux utilisant le RN  subissaient une pression d'intensité graduelle appliquée puis enlevée dès que la réponse désirée était donnée.

Durant l'entrainement les chevaux entrainés par le RN se montraient plus indifférents, irrités (tension corporelle) ils avaient les oreilles en arrière plus de 50% du temps, avaient une attitude neutre envers l'entraineur alors que les chevaux entrainés à l'aide du RP étaient plus motivés (tension corporelle), avaient les oreilles plus avant, cherchaient le contact avec l'entraineur.

L'observation des comportements montre que les chevaux entrainés avec le RP étaient plus dans un état affectif positif que ceux entrainés avec le RN.

L'intégration du RP dans l'entrainement du cheval peut être bénéfique pour le bien-être du cheval.

Source:
S.Briefer et all Who’s in a better mood? Comparison of behavioral indicators in horses trained with negative or positive reinforcement

dimanche 30 juin 2013

Renforcements et Punitions


Je vous parle depuis quelque temps déjà de renforcement positif (RP) renforcement négatif (RN)... et même de punitions... C'est un sujet qui porte à confusion, et cet article ( je l'espère) devrait vous aider à y voir plus clair... (vous avez le droit à une version simplifié des définitions)

Il y a donc le renforcement positif, le renforcement négatif mais aussi la punition positive et la punition négative 

Les renforcements sont faits pour accroître la probabilité qu'un comportement se répète à l'aide d'un stimulus ... Les punitions sont là pour diminuer la fréquence d'un comportement toujours à l'aide d'un stimulus.

Le terme positif ne veut pas dire quelque chose d'agréable, le terme positif ici est utilisé pour dire qu'on ajoute quelque chose et donc le terme négatif indique que l'on enlève quelque chose.

Je vais vous donner les définitions, cependant je vais les simplifier et les illustrer avec des exemples:

Le renforcement positif :
on ajoute quelque chose que le cheval trouve plaisant, pour accroître la possibilité qu'il refasse le comportement 
ex humain: la paye que vous recevez a la fin du mois 
ex-cheval : je lui donne une rondelle de carotte puisqu'il n'a pas bougé au montoir...

La punition positive:
Quelque chose que le cheval trouve déplaisant est ajouté a l'environnement afin de diminuer la possibilité de répétition du comportement 
ex: vous claquer la porte au nez de quelqu'un car vous n'avez pas envie de le voir
ex: je mets une baffe a mon cheval quand il essaye de me mordre


Le renforcement négatif: 
Quelque chose d'aversif est enlevé de l'environnement du cheval pour accroître la possibilité qu'il refasse le comportement... (jusque-là vous me suivez?)...Vu qu'on enlève quelque chose d'aversif ça veut dire qu'on a ajouté quelque chose d'aversif avant... (logique hein ?) donc le renforcement négatif contient en fait une punition positive... pour faire simple, quelque chose de désagréable est ajouté puis enlevé dès que la réponse qu on souhaite est donnée...

ex: Je te harcèle jusqu'à ce que tu passes l'aspirateur ...vous harceler votre conjoint pour qu'il passe l'aspirateur ( punition positive vu qu'on ajoute quelque chose de désagréable, le but étant de diminuer le comportement assis à ne rien faire), si votre compagnon se lève pour passer l'aspirateur, le harcèlement s’arrête. Il a appris que pour éviter d'être harcelé il doit passer l'aspirateur... Pendant que l'action assise à ne rien faire a été punie, le comportement de se lever et de passer l'aspirateur a été renforcé négativement

ex l'enfant donne des coups de tallons au poney jusqu'à ce que le poney avance... poney immobile, coups de tallons (PP, punit l'inactivité du poney) Le fait d'avancer fait cesser les coups de talons... il apprend que pour éviter les coups de talons il doit avancer... Être immobile a été punit, et le comportement pour éviter les coups de tallons c'est-à-dire avancer a été renforcé négativement 

Bien sûr, cette approche n’enseigne pas quoi faire, mais comment éviter d’être punis. Par exemple, pour apprendre à un cheval à s’arrêter à la voix, nous allons punir tout ce qu’il fait, excepter l’immobilité, et plus tard, le mot « arrêter » deviendra une menace qu’il pourra éviter en s’arrêtant. 



La punition négative
On enlève quelque chose que le cheval aime, pour diminuer la possibilité de répétition du comportement
ex:Pas d'argent de poche cette semaine puisque ta chambre n'est pas rangé
ex: La nourriture du cheval est enlevée si ce dernier s'est montré agressif


Bon nous avons défini les termes, c'est une bonne chose. Passons à la suite:

Quand on utilise le renforcement positif il est intéressant et nécessaire de travailler avec les renforçateurs
 positifs primaires, ils correspondent à un besoin vital et le cheval n'a pas besoin de les apprendre : nourriture, grattouille, jeux, contact social etc. il y a aussi des renforcateur secondaires, pour être efficaces ils devront être associés a un renforcateur primaire car seul ils ont une valeur neutre et le cheval aura besoin de les apprendre : la caresse si elle n'est pas couplée a la grattouille est un renforcateur secondaire... le fameux "oui c'est bien" s'il n'est pas couplé à un renforcateur primaire est neutre ... chez nous ça serait l'argent... l'argent n'est qu'un bout de papier mais avec lequel on va pouvoir faire beaucoup de choses avec 

Il y aussi les punisseurs primaire: , la douleur, la surprise,isolation sociale... et secondaire la cravache, les éperons, le mors...

Le renforcement positif présente ainsi des effets durables, tant sur l’apprentissage que sur la relation Homme-cheval. Alors que le renforcement négatif joue sur l’anxiété, le cheval anticipe la situation à venir. Il peut créer à terme une altération de la relation avec l’homme.
Pour nous, il est naturel d’utiliser les punitions, nous avons été élevé ainsi... et le monde qui nous entoure est basé aussi sur ce concept... on envoie des gens en prison, on se dit qu'ainsi ils y réfléchiront avant de recommencer...mais le plus souvent ça ne marche pas aux vues des taux de récidives... 
Pour que les punitions fonctionnent, elles doivent être répétées et/ou rudes. Plus un cheval est motivé pour faire quelque chose, plus grande l’intensité de la punition devra être . Les punitions répétées ou sévères ont des effets secondaires comme la peur, colère, ressentiment, résistance... La raison pour laquelle nous continuons de penser que la punition est efficace est que parfois elle marche, si la peur de la punition est grande, si la motivation pour faire le comportement est faible ...

La plupart du temps, il est acceptable d’utiliser la cravache les éperons sur un cheval. Si nous le faisions de la même façon sur un chien nous finirions surement en prison.


Auteur: Agnès Ppdt

La voiture qui murmurait à l'oreille des chevaux ?


Avez vous entendu parlé du Join-up ? C'est une technique qui utilise un round-pen et qui a été popularisé par Monty Roberts.

Des chercheurs Australiens, ont mené une étude sur cette méthode et ont présenté leurs résultats à la conférence de l'"International Society for équitation science" qui avait lieu en juillet à Edinburgh.

"Deux caractéristiques principales de cette méthode dépendent de l'habilité de l'entraineur à être capable de communiquer avec le cheval en utilisant le langage corporel du cheval, et que c'est une forme d'entrainement "humaine"...

Notre étude jette un doute sur ces 2 revendications...

Nous croyons que notre recherche met en évidence les fondements désagréables de l'entrainement en round pen, et c'est pour cette raison que nous mettons en garde contre son utilisation à grande échelle car cette méthode utilise la peur pour contrôler le cheval.

Telle qu'elle est actuellement pratiquée, cette technique repose sur un entraineur qui utilise du bruit et des mouvements afin de conduire le cheval dans le périmètre de l'enclos... L'entraîneur réduit progressivement ses mouvements agressifs, après quoi le cheval finira éventuellement par ralentir et approcher

Les chercheurs ont utilisé une voiture téléguidée pour imiter la technique et éliminer le rôle essentiel de l'humain parlant le langage des chevaux...

Nous avons "récompensé" les chevaux pour s'être arrêté et s'être tourné vers la voiture par une période de "sécurité" car la voiture ne les a pas chassés aussi longtemps qu'ils continuaient à faire face à cette voiture. Nous avons entrainé certains chevaux, à marcher vers cette voiture et à la toucher ...

Etant donné que l'on peut entrainer un cheval à donner des réponses similaires même si elles ne sont pas totalement identiques, la réaction des chevaux face à ces stimuli non humain sape l'affirmation que l'habilité des humains à imiter les comportements du cheval, est un composant essentiel de cette méthode.

Les chercheurs croient que les résultats ont été atteints suite à une pression et au relâchement de cette pression et non l'habilité de l'entraineur ou l'habilité de la voiture à imiter les comportements des chevaux.




Bien que ni la méthode de Monty Roberts ni la nôtre n'utilise une pression directe sur le corps du cheval, les 2 appliquent une forme de pression émotionnelle en faisant peur puis en chassant le cheval.

Les partisans du Join-up et autres méthodes similaires prétendent que non seulement cette méthode est humaine car, aucun équipement n'est utilisé sur le corps du cheval, mais aussi que le cheval peut choisir si il veut approcher l'entraîneur.

Nos résultats indiquent que c'est parce que ces méthodes reposent sur la peur et la "sécurité",que  le cheval est forcé de choisir entre une peur répétée ou bien de rester avec l'entraineur. Nous nous demandons si c'est humain de se baser sur la peur et sa cessation pour entrainer un cheval.

Bien que ce soit attrayant de penser qu'un cheval dans un round-pen choisisse de suivre l'entraineur, car ils nous répondent comme si nous étions un cheval, nous croyons que l'utilisation de la peur n'a pas sa place dans une véritable méthode d'entrainement éthique et humaine."



Source: Researchers urge rethink of 'Monty Roberts' horse training method :http://sydney.edu.au/news/84.html?newsstoryid=9617

Puis-je combiner le renforcement positif et le renforcement négatif?


Le renforcement positif, en particulier quand il est utilisé avec le clicker, est communément combiné avec l'utilisation du renforcement négatif. et ou avec la punition. Typiquement le stimulus aversif (ex appliquer une pression) dans ce cas, va être léger et cette approche combinée, est utilisée pour clarifier ou hâter l'entrainement. Y a-t-il un problème avec ça? Ceux qui répondent oui, sont il juste dogmatique et puriste dans leur approche du renforcement positif? Ou avons-nous tous besoins, de prendre du recul et de réfléchir davantage pour savoir à quel point notre entrainement avec le renforcement positif, est si positif que ça?
Si vous allez utiliser dans la même cession, ou pour enseigner un même comportement, la combinaison du renforcement négatif et du renforcement positif, des choses variées peuvent arriver.

Si un cheval expérimente deux renforcements différents à peu près en même temps, le cheval va être renforcé davantage par l'un des renforcements. Il y a un terme pour expliquer ça, ça s'appelle la "salience", et c'est effectivement la valeur relative des renforcements, du point de vue du cheval. Est qu'il y aura plus de valeur dans le relâchement de la pression ou dans la récompense? Leurs valeurs n'est probablement pas identiques. Dans le clicker training, la présence du click et de la récompense, peut aider le cheval à mieux comprendre, et confirmer qu'il effectue le bon comportement. Si vous utilisez en même temps du renforcement négatif, le cheval peut encore chercher à changer de comportement, parce qu il cherche le relâchement de la pression et non à gagner une récompense. L'ajout de récompense ne rend pas votre entrainement positif. Tout se résume à la perception qu'a votre cheval vis-à-vis de son entrainement, et les raisons qu'ils l'ont poussé à changer de comportement.

Une autre objection concerne le terme, "signal empoisonné" par Karen Pryor. À cause du conditionnement classique (ex pavlovien) si vous utilisez la pression , alors le niveau de pression que le cheval ressent lors de ses entrainements, va être associer à vous, à l'endroit ou se passe l'entrainement, et à votre équipement. C'est un peu comme recevoir un appel téléphonique de quelqu'un à qui vous ne voulez par parler, vous commencez à redouter le moment ou le téléphone sonne. Donc si vous combinez la pression avec une forme de renforcement positif, la valeur du renforcement positif va diminuer ( comme quand vous recevez votre chèque à la fin du mois, mais que vous savez déjà qu'il va disparaître pour régler toutes les factures)jusqu'au point de devenir sans importance... .

Si un animal vit une véritable expérience de renforcement positif, alors si on en croit les études en neurosciences, une région particulière du cerveau est activée et il y a libération de dopamine. C'est un opioïde qui nous fait nous sentir bien, quand quelque chose de bien arrive. Au fil du temps cette libération de dopamine peut avoir lieu même en l'absence de récompense réelle. Donc si nous travaillons beaucoup a l'aide de récompense qui déclenchent la dopamine, alors juste notre arrivée pourra déclencher la même chose, que nous ayons ou non des récompenses pour eux. Les chevaux ne nous veulent pas que pour avoir des récompenses. Nous faisons le cheval se sentir bien. C'est la base neurologique, c'est le résultat pour les expériences de Pavlov et de ses chiens. Nous nous sentons heureux quand notre fiche de paye arrive, non pas parce que c'est une simple feuille de papier, mais pour ce qu'elle représente.

Si nous utilisons les techniques basées sur la pression, ou même un entrainement neutre, alors il n'y a pas de libération de dopamine même si on relâche cette pression. Un circuit différent dans le cerveau est stimulé, et en fonction de la pression que vous utilisez il peut y avoir une libération d’adrénaline ex une réponse de stress.

Si on combine le renforcement positif et le renforcement négatif, la réponse dopaminergique risque d'être supplantée par l’adrénaline. Même si vous utilisez habituellement le renforcement négatif (en fonction du degré de pression physique ou émotionnel) et que vous décidez d'utiliser occasionnellement seulement du renforcement positif, vous n'êtes pas sûr d'obtenir une libération de dopamine, à cause de ce que vous représentez normalement pour votre cheval. Ainsi dans les meilleurs des cas, il se peut que vous ne renforcez pas du tout positivement votre cheval. Vous lui donnez peut-être des récompenses, mais ce n'est pas la même chose qu'un cheval qui se sent renforcé positivement. Cela ne veut pas dire que c'est mauvais, cela peut vous aider dans vos entraînements si votre timing est bon, mais ça peut vous aider à donner du sens à ce que vos faites et éviter les faux fuyants....

L'utilisation du renforcement positif, peut encourager un cheval à proposer des comportements dans le but de gagner une récompense, ce qui met le cheval dans une position très vulnérable émotionnellement (ce qui explique pourquoi une bonne session de shaping en liberté à l'aide du renforcement positif peut rassurer le cheval, en lui montrant que ce qu'il fait est bien et qu'il n'y a pas de conséquence négative si il donne une mauvaise réponse). Si la pression est susceptible d'être utilisé quand le cheval donne le mauvais comportement, alors, cela peut créer un conflit majeur dans l'esprit du cheval, augmentant encore plus le stress. Si beaucoup de pression est utilisée, alors la meilleure chose a faire pour le cheval est de faire comme ce qui a été demandé, afin d'éviter la pression. Mais s'il est encouragé à proposer spontanément des comportements, le cheval est dans une position très difficile. C'est comme quand vous êtes à l'école et que vous devez avoir le courage de prendre la parole devant la classe, puis que votre professeur vous dit que vous êtes stupide. Ce n'est pas une «mauvaise formation», techniquement cela peut être bon, mais c'est sans empathie et c'est quelque chose que j'ai vu chez différents entraineurs qui (peut-être par inadvertance)ont donné la priorité à la réalisation de certains comportements sans tenir compte des sentiments du cheval. Un cheval que j'ai pu observer, se distingue en particulier , il était formé par une combinaison d'une méthode de Natural Horsemanship et de CT (clicker training). La pression était à niveau relativement faible, mais cela n'a pas empêché le cheval d'être très stressé à propos de ce qu'il était censé faire. Il savait clairement le coût d'une réponse fausse, mais il était incapable de simplement éteindre son cerveau et de répondre aux signaux car le CT exigeait qu'il propose des comportements. La différence dans l'attitude d'un cheval dans ce genre de conflit et un cheval ayant une véritable session libre de shaping, représente des mondes tellement à part qu'il est très difficile de rendre justice sur un clavier ....

Mais si vous ne recevez pas de dopamine, vous ne serez pas idéalement placé pour développer pleinement vos émotions. Chez l'être humain nous appelons ça la «dépression». Le cheval n'a pas la possibilité d'effectuer de choix psychologique simples, ni même d'apprécier le travail. Il répond simplement à des signaux et essaye d'éviter les ennuis. L'idéal est que le cheval utilise son cerveau et pense," que diriez-vous si je fais un pas en arrière" plutôt que " je dois reculer pour éviter la pression), le shaping en liberté est plus une histoire d'exercice pour le cerveau qu'un entrainement physique...

Source: (Traduction partielle) http://equilibrehorses.wordpress.com/2012/03/14/combining-positive-and-negative-reinforcement/

Monter un cheval dans un van, comparaison entre le renforcement négatif et le renforcement positif, au niveau du stress et de l’efficacité :


La façon traditionnelle d'entrainer un cheval se fait par l'application du renforcement négatif (RN). Ces dernières années cependant l'utilisation du renforcement positif (RP) est devenue plus commune. Pour évaluer l'efficacité et les possibles effets stressants de ces 2 méthodes d'entrainement, 12 chevaux présentant de sévères problèmes pour monter dans un van, ont été sélectionnés et ont du monter dans un van. Ils ont été assigné de façon aléatoire à une des 2 méthodes. Le RN consistait à des degrés de pressions variées, et la pression était enlevée dès que le cheval se conformait à la requête de l'entraineur. Les chevaux entrainés à l'aide du RP ont été entrainés au clicker training, et on leurs a enseigné à suivre une cible dans le van. La fréquence cardiaque (HR) et les comportements indiquant une gene ont été observés.

En conclusion les chevaux qui ont été entrainés à l'aide du renforcement positif ont fourni des résultats plus rapidement et avec moins de stress que le groupe NR. Il est préférable d'utiliser le RP dans des situations potentiellement stressantes.

Le groupe NR a montré plus de signe d'inconfort, ce qui sugerre des réponses de stress plus élevés,si ce stress se maintient sur une plus longue période cela pourrait avoir un effet sur le bien-être du cheval.(Beerda et al., 1997). Innes and Mc Bride (2008) conclue que le renforcement négatif peut nuire au bien-être d'un cheval déjà stressé et que Heleski et al. (2008) soutiennent, que le renforcement positif créé un environnement plus sur pour l'entraineur, et est plus facile à appliquer que le RN.

Source:Payana Hendriksen, Katrine Elmgreen, Jan Ladewig (2011)Trailer loading of horses: Is there a difference between positive and negative reinforcement concerning effectiveness and stress-related signs? Journal of Veterinary Behavior 6, p 261-266