第一节-操作性条件反射论课件

1第一节第一节 操作性条件反射论操作性条件反射论1第一节 操作性条件反射论一、操作性条件反射与人类行为的学习一、操作性条件反射与人类行为的学习二、强化理论二、强化理论（一）强化、强化物及其作用（一）强化、强化物及其作用2一、操作性条件反射与人类行为的学习2（二）建立操作性条件反射的原则二）建立操作性条件反射的原则1.1.任何反应任何反应若有强化刺激随后呈现，都有重复出若有强化刺激随后呈现，都有重复出现的倾向。现的倾向。2.2.强化刺激可以是增加操作反应的概率的强化刺激可以是增加操作反应的概率的任何刺任何刺激物激物。这两条原则可以用来解释人类学习的许多现象。这两条原则可以用来解释人类学习的许多现象。个人的性格、社会规范、价值观等，实际上是个人的性格、社会规范、价值观等，实际上是被社会强化了的个人特征、行为方式和观念被社会强化了的个人特征、行为方式和观念积淀积淀而成的。而成的。3（二）建立操作性条件反射的原则3（二）强化的类型（二）强化的类型按照强化的性质分为两种：按照强化的性质分为两种：1.正强化正强化：呈现正强化物呈现正强化物反应概率增加。反应概率增加。正强化物：正强化物：如果如果呈现呈现某一刺激物，有机体的操作反应某一刺激物，有机体的操作反应概率概率增加增加，那么该刺激物就是这一反应，那么该刺激物就是这一反应的正强化物。的正强化物。2.负强化负强化：撤去负强化撤去负强化物物反应概率增加。反应概率增加。负强化物负强化物：如果：如果撤去撤去某一刺激物，有机体的操作反应某一刺激物，有机体的操作反应概率概率增加增加，那么该刺激物就是这一反应的负强化物。，那么该刺激物就是这一反应的负强化物。正、负强化在人类行为学习中经常运用。正、负强化在人类行为学习中经常运用。4（二）强化的类型4正强化正强化：负强化负强化：另外，我们也可以用另外，我们也可以用惩罚惩罚来减少不合乎希望的行为。来减少不合乎希望的行为。当有机体做出某种反应以后，呈现一个厌恶刺激（电当有机体做出某种反应以后，呈现一个厌恶刺激（电击、打骂），或者撤销一个正面刺激（把喜欢的玩具击、打骂），或者撤销一个正面刺激（把喜欢的玩具拿走），以消除或抑制此类反应的过程，称为惩罚。拿走），以消除或抑制此类反应的过程，称为惩罚。负强化和惩罚是两个不同的概念。区别在于：负强化和惩罚是两个不同的概念。区别在于：5正强化：5负强化负强化惩罚惩罚通过厌恶刺激的通过厌恶刺激的排除排除来来增加增加反应在将来发生的概率。反应在将来发生的概率。1.1.通过厌恶刺激的通过厌恶刺激的呈现呈现来来降低降低反应反应 在将来发生的概率。在将来发生的概率。2.2.惩罚并不能使行为发生永久性的惩罚并不能使行为发生永久性的 改变，只能改变，只能暂时抑制暂时抑制行为。行为。负强化与惩罚的区别负强化与惩罚的区别惩罚的效果如何？惩罚的效果如何？6负强化惩罚通过厌恶刺激的排除来增加反应在将来发生的概率。1惩罚的有效性也是有限的。惩罚的有效性也是有限的。首先，首先，惩罚惩罚不能教给人不能教给人恰当的行为，只是减少了不合乎恰当的行为，只是减少了不合乎希望行为的发生率。惩罚爱打人的孩子，还不如教给他希望行为的发生率。惩罚爱打人的孩子，还不如教给他用别的方法对付使他受挫的情境。用别的方法对付使他受挫的情境。第二，第二，为了有效，惩罚必须是为了有效，惩罚必须是即时性即时性和和恒常性恒常性的。的。当孩子出现问题行为时，应立即惩罚，而不是当孩子出现问题行为时，应立即惩罚，而不是“等你爸等你爸回来再收拾你回来再收拾你”。惩罚还必须要有惩罚还必须要有相当的力度相当的力度，并且在每一次不合希望的，并且在每一次不合希望的行为出现时都给予惩罚。孩子说脏话时，父母有时容忍，行为出现时都给予惩罚。孩子说脏话时，父母有时容忍，有时惩罚，这不能改变孩子说脏话的行为。有时惩罚，这不能改变孩子说脏话的行为。7惩罚的有效性也是有限的。7第三，第三，惩罚可能带来很多消极的影响。惩罚可能带来很多消极的影响。（1）连带反应：尽管父母的本意是削弱孩子的某一行）连带反应：尽管父母的本意是削弱孩子的某一行为，但孩子可能会把其他行为与惩罚联系起来。（一个为，但孩子可能会把其他行为与惩罚联系起来。（一个孩子因为把玩具扔向窗外而受到惩罚，结果这个孩子可孩子因为把玩具扔向窗外而受到惩罚，结果这个孩子可能再也不玩玩具了）能再也不玩玩具了）同时，伴随着惩罚的同时，伴随着惩罚的沮丧感沮丧感可能会与实施惩罚的人联系可能会与实施惩罚的人联系起来。（挨父母打的孩子会把父母与挨打的痛苦联系起起来。（挨父母打的孩子会把父母与挨打的痛苦联系起来来恨父母）恨父母）8第三，惩罚可能带来很多消极的影响。8（2 2）习得不合希望的行为：有样学样。（挨父母打）习得不合希望的行为：有样学样。（挨父母打的孩子长大变得有力量的时候，也会通过打别人解决的孩子长大变得有力量的时候，也会通过打别人解决问题）问题）（3 3）带来消极的情绪：比如恐惧、焦虑等，强烈的）带来消极的情绪：比如恐惧、焦虑等，强烈的消极情绪会干扰孩子学习恰当的反应。（就不给你学、消极情绪会干扰孩子学习恰当的反应。（就不给你学、就不给你写作业）。就不给你写作业）。所以，斯金纳认为，尽管惩罚在矫正不良行为方面可所以，斯金纳认为，尽管惩罚在矫正不良行为方面可能有一定的效果，但它在塑造行为中的效果不如强化能有一定的效果，但它在塑造行为中的效果不如强化好，而且会带有许多消极影响。好，而且会带有许多消极影响。因此，不到因此，不到万不得已万不得已，尽量不要使用惩罚的手段。，尽量不要使用惩罚的手段。（惩罚要少用、慎用，有条件的运用）。（惩罚要少用、慎用，有条件的运用）。9（2）习得不合希望的行为：有样学样。（挨父母打的孩子长大变得操作条件反射的程序、目的及应用操作条件反射的程序、目的及应用程序程序目的目的应用应用正强化正强化增加行为增加行为行为之后给予奖励行为之后给予奖励负强化负强化增加行为增加行为行为之后撤销厌恶刺激行为之后撤销厌恶刺激无强化无强化减少行为减少行为无刺激（停止强化）无刺激（停止强化）惩罚惩罚减少行为减少行为行为之后给予厌恶刺激或撤销行为之后给予厌恶刺激或撤销正面刺激正面刺激10操作条件反射的程序、目的及应用程序目的应用正强化增加行为行为（四）强化物的来源（四）强化物的来源斯金纳按强化物的来源，把强化物分为两类：斯金纳按强化物的来源，把强化物分为两类：1.1.一级强化物（原增强物）：指那些不需学习也起强一级强化物（原增强物）：指那些不需学习也起强化作用的刺激。如食物、水、氧气、异性等满足生化作用的刺激。如食物、水、氧气、异性等满足生理需要的刺激物（无条件刺激物）。理需要的刺激物（无条件刺激物）。一级强化物是同一级强化物是同有机体生存有机体生存有关的事物。从生物学有关的事物。从生物学意义上看，如果有机体长期缺乏某一种一级强化物，意义上看，如果有机体长期缺乏某一种一级强化物，就可能无法生存下去。就可能无法生存下去。11（四）强化物的来源112.2.二级强化物（次增强物）：指那些开始不具有强化作用二级强化物（次增强物）：指那些开始不具有强化作用（中性刺激物），由于经常与一级强化物或其他强化物（中性刺激物），由于经常与一级强化物或其他强化物联系在一起而具有了强化作用的刺激物联系在一起而具有了强化作用的刺激物（条件刺激物）。（条件刺激物）。对于人类个体而言，诸如财富、特权、名声、地位、分对于人类个体而言，诸如财富、特权、名声、地位、分数、认可、表扬、关注等都可能成为二级强化物。数、认可、表扬、关注等都可能成为二级强化物。概括化的强化物：概括化的强化物：指那些与许多一级强化物联系在一起指那些与许多一级强化物联系在一起的二级强化物。如金钱、母亲等。的二级强化物。如金钱、母亲等。122.二级强化物（次增强物）：指那些开始不具有强化作用（中性刺二级强化物在特定的社会文化中起作用，对人的行为有着二级强化物在特定的社会文化中起作用，对人的行为有着极大的影响力。极大的影响力。斯金纳曾指出：一个守财奴被金钱强化得如此之深，以致斯金纳曾指出：一个守财奴被金钱强化得如此之深，以致他情愿饿死也不愿花去一分钱。（如利令智昏、私欲膨胀、他情愿饿死也不愿花去一分钱。（如利令智昏、私欲膨胀、以权谋私、铤而走险等）。以权谋私、铤而走险等）。可见，在人类的行为学习中，强化物不仅作为可见，在人类的行为学习中，强化物不仅作为特殊的反馈特殊的反馈信息信息控制着个体对自己行为和个性品质的认识和评价，也控制着个体对自己行为和个性品质的认识和评价，也是是直接调动直接调动个体的行为动机的重要激励因素。个体的行为动机的重要激励因素。对不同个体，强化物的作用是否一样？对不同个体，强化物的作用是否一样？13二级强化物在特定的社会文化中起作用，对人的行为有着极大的影响能够作为强化物的刺激很多，但是，同样的强化刺激能够作为强化物的刺激很多，但是，同样的强化刺激对于不同的个体和不同行为反应而言，其强化的效果对于不同的个体和不同行为反应而言，其强化的效果是不尽相同的。是不尽相同的。如同样表扬，效果不一样；同样奖励，反应不一样。如同样表扬，效果不一样；同样奖励，反应不一样。（不吃这一套）。有人爱才如命，有人视金钱如粪土。（不吃这一套）。有人爱才如命，有人视金钱如粪土。所以，在行为塑造和行为矫正的过程中，选择适当的、所以，在行为塑造和行为矫正的过程中，选择适当的、有效的强化物是一门有效的强化物是一门学问学问，也是一门，也是一门艺术艺术。14能够作为强化物的刺激很多，但是，同样的强化刺激对于不同的个体（五）强化的安排（五）强化的安排斯金纳将强化按间隔时间和频次分为两大类：斯金纳将强化按间隔时间和频次分为两大类：1.1.连续强化：每一次正确反应后都给予一次强化连续强化：每一次正确反应后都给予一次强化2.2.间歇强化：有时强化，有时不强化间歇强化：有时强化，有时不强化在实际生活中，间歇强化比较多见。（打电话约人）在实际生活中，间歇强化比较多见。（打电话约人）斯金纳对斯金纳对间歇强化间歇强化作了更详细的研究。作了更详细的研究。15（五）强化的安排15间歇强化有两种安排方式：间歇强化有两种安排方式：（1 1）比例强化：根据）比例强化：根据反应次数反应次数决定。又可分为：决定。又可分为：固定比例强化、变化比例强化固定比例强化、变化比例强化（2 2）时间间隔强化：根据反应）时间间隔强化：根据反应时间间隔时间间隔决定。又可分决定。又可分为：为：固定时间间隔强化、变化时间间隔强化固定时间间隔强化、变化时间间隔强化16间歇强化有两种安排方式：16常用的强化程式常用的强化程式强化程式强化程式说明说明实例实例固定时距固定时距按间隔一定的时间进行反按间隔一定的时间进行反应，才能得到一次强化应，才能得到一次强化 计时付工资计时付工资固定比率固定比率必须做一定次数的反应，必须做一定次数的反应，才给予一次强化才给予一次强化 计件付工资计件付工资变动时距变动时距不按固定时间，给予一次不按固定时间，给予一次强化强化 如渔夫平均每一小时打一网鱼，如渔夫平均每一小时打一网鱼，但有时隔但有时隔1515分钟，有时隔分钟，有时隔2 2天天 变动比率变动比率每隔几次正确反应之后，每隔几次正确反应之后，给予一次强化给予一次强化 自动售货机平均每次售自动售货机平均每次售1010个，但个，但有时售有时售5 5个，有时售个，有时售1515个个 17常用的强化程式强化程式说明实例固定时距按间隔一定的时间进行反不同的强化方式所导致的行为习得的速度、行为反应不同的强化方式所导致的行为习得的速度、行为反应的强度和行为消退的速度是不同的。的强度和行为消退的速度是不同的。所以，可以根据学习过程的实际要求，来选择强化类所以，可以根据学习过程的实际要求，来选择强化类型和决定何时、怎样给予强化（将不同的强化方式组型和决定何时、怎样给予强化（将不同的强化方式组合起来使用）。合起来使用）。实验表明实验表明，建立某一操作反应的，建立某一操作反应的最佳的训练组合最佳的训练组合可能可能是：是：最初最初使用连续强化，使用连续强化，然后然后是固定时间间隔强化，是固定时间间隔强化，最后最后是变化比例强化。是变化比例强化。18不同的强化方式所导致的行为习得的速度、行为反应的强度和行为消（六）行为的消退、自然恢复、类化与分化（六）行为的消退、自然恢复、类化与分化1.1.行为的消退行为的消退已经形成的行为不再强化，操作反应就会随之消退。已经形成的行为不再强化，操作反应就会随之消退。行为的消退和行为的建立是相反的过程。行为的消退和行为的建立是相反的过程。斯金纳认为：行为建立和行为消退能够说明我们的许斯金纳认为：行为建立和行为消退能够说明我们的许多人格现象的共同规律：受到强化的行为得到建立和多人格现象的共同规律：受到强化的行为得到建立和保持；没有得到强化的行为自行消失。保持；没有得到强化的行为自行消失。对于行为的改变，基本原则是：对于行为的改变，基本原则是：强化所期望的行为，强化所期望的行为，忽视所不期望的行为。忽视所不期望的行为。19（六）行为的消退、自然恢复、类化与分化19 斯金纳认为，对待我们所不期望的行为的合适斯金纳认为，对待我们所不期望的行为的合适方法是消退，而不是惩罚。方法是消退，而不是惩罚。惩罚无论对被处罚者的不良行为，还是对于惩惩罚无论对被处罚者的不良行为，还是对于惩罚实施者的罚实施者的“生气生气”、“发怒发怒”行为，都是一种行为，都是一种强化，可能会导致恶性循环。强化，可能会导致恶性循环。20斯金纳认为，对待我们所不期望的行为的合适方法是消退，而不是2.2.行为的自然恢复行为的自然恢复已经消退的行为，经过一段休息，虽不予强化，会已经消退的行为，经过一段休息，虽不予强化，会重新出现。重新出现。自然恢复现象表明：行为消退不是一次就能完成的。自然恢复现象表明：行为消退不是一次就能完成的。抓反复，反复抓，才能使之真正消失。抓反复，反复抓，才能使之真正消失。212.行为的自然恢复213.3.行为的类化（泛化、概括化）行为的类化（泛化、概括化）条件反射建立后，有机体不仅对条件刺激做出相应条件反射建立后，有机体不仅对条件刺激做出相应的行为反应，而且对与条件刺激相类似的其他刺激的行为反应，而且对与条件刺激相类似的其他刺激也做出相应的行为反应。（巳、已、己）也做出相应的行为反应。（巳、已、己）如：举一反三、触类旁通、闻一知十等都是类化的如：举一反三、触类旁通、闻一知十等都是类化的结果。越相似，发生类化的可能性就越大。结果。越相似，发生类化的可能性就越大。223.行为的类化（泛化、概括化）224.4.行为的分化（辨别化）行为的分化（辨别化）与类化相反，是指个体对不同的刺激做出不同的行为与类化相反，是指个体对不同的刺激做出不同的行为反应。反应。分化使个体学会辨别发生反应的前提条件，在合适的分化使个体学会辨别发生反应的前提条件，在合适的时间和情境下，做出合适的情境反应，而避免出现不时间和情境下，做出合适的情境反应，而避免出现不恰当的行为（好心办坏事）。如：礼貌、机智、有分恰当的行为（好心办坏事）。如：礼貌、机智、有分寸等。寸等。234.行为的分化（辨别化）23三、行为的塑造和矫正三、行为的塑造和矫正对于复杂的行为，斯金纳提出了对于复杂的行为，斯金纳提出了“强化相倚原理强化相倚原理”，把，把复杂行为分解成一系列小的循序渐进的步骤，精确地安复杂行为分解成一系列小的循序渐进的步骤，精确地安排强化的组合方式，逐渐向目标逼近，学习过程总会达排强化的组合方式，逐渐向目标逼近，学习过程总会达到成功。（不能一口吃个胖子）。到成功。（不能一口吃个胖子）。斯金纳举例说明母亲怎样不知不觉中塑造孩子不良行为斯金纳举例说明母亲怎样不知不觉中塑造孩子不良行为的。忙时的。忙时孩子小声喊孩子小声喊不理睬不理睬大喊大喊应答；以后习惯了大喊，才能引起关注。应答；以后习惯了大喊，才能引起关注。孩子就形成了大声喊叫的行为。孩子就形成了大声喊叫的行为。24三、行为的塑造和矫正24斯金纳利用强化相倚原理发展出斯金纳利用强化相倚原理发展出“程序教学程序教学”的思想，并的思想，并制造了程序教学机器，还将这一原理运用到精神和情感疾制造了程序教学机器，还将这一原理运用到精神和情感疾病的治疗中去，这就是行为疗法。病的治疗中去，这就是行为疗法。“代币疗法代币疗法”是其中的一种，颇受称道。所谓代币就是用是其中的一种，颇受称道。所谓代币就是用一些塑料卡，当病人每完成一些规定的行为或任务，就发一些塑料卡，当病人每完成一些规定的行为或任务，就发给一定数量的代币，当代币积累到一定数量时，可换取一给一定数量的代币，当代币积累到一定数量时，可换取一些实物奖励或参加某种活动，如游泳、看电影等。些实物奖励或参加某种活动，如游泳、看电影等。事实证明，代币疗法不仅对病人的行为矫正有一定疗效，事实证明，代币疗法不仅对病人的行为矫正有一定疗效，而且对正常人不良行为的矫正也是有效的。而且对正常人不良行为的矫正也是有效的。25斯金纳利用强化相倚原理发展出“程序教学”的思想，并制造了程序