1904—1990
　　The major problems of the world today can be solved only if we improve our understanding of human behavior.
Skinnerian 斯金纳的操作性条件反射理论和方法
B.F.斯金纳 （1904-1990） 美国行为主义心理学家，新行为主义的代表人物，操作性条件反射理论的奠基者。他创制了研究动物学习活动的仪器——斯金纳箱。1950年当选为国家科学院院士，1958年获美国心理学会颁发的杰出科学贡献奖，1968年获美国总统颁发的最高科学荣誉——国家科学奖。
    斯金纳简介及主要著作       
    斯金纳(Burrhus Frederic Skinner，1904-1990)1904年3月20日出生在美国宾夕法尼亚州的萨斯奎汉纳镇上。像许多心理学先驱者一样，斯金纳在1922年进汉密尔顿学院读书时，并未打算成为一名心理学家，而是专修英文，打算成为一名作家。在毕业后的两年内，从事于写作，结果感到没有什么可写的，于是攻读生物学。在这个过程中，他读了华生和巴甫洛夫的著作，从而开始对人类和动物的行为感兴趣，就进了哈佛大学攻读心理学。1930年获心理学硕士学位，1931年获哲学博士学位。接着留校从事研究工作。1936年至1944年在明尼苏达大学任讲师和副教授，1945年任印第安纳大学心理系教授和系主任，1948年返回哈佛大学任心理学教授，直到1974年退休。在这期间，他于1958年获美国心理学会授予的杰出科学奖；1968年获美国政府颁发的最高科学奖--国家科学奖；1971年获美国心理学会基金会颁发的金质奖章。
主要著作
1938
The Behavior of Organisms：An Experimental Analysis《有机体的行为：一种实验分析》通过对白鼠和鸽子的观察，经验性地描述学习的法则，从而为操作性条件作用原理奠定了基础。
1948
Walden Two《沃登第二》根据人类行为的科学原理，试图形成一种以积极控制的方法加以管理的理想社会
1953
Science and Human Behavior《科学与人类行为》探讨了人类行为的一些重要方面，如思维、自我和社会化等
1957
Schedules of Reinforcement
1957
Verbal Behavior《言语行为》
1959
Cumulative Record: Definitive Edition
1961
The Analysis of Behavior: A Program for Self-Instruction
1968
The Technology of Teaching《教学技术学》探讨了他的基本原理在人类学习中的运用。
1969
Contingencies of Reinforcement ：A Theoretical Analysis《强化的相倚关系：一种理论分析》
1971
Beyond Freedom and Dignity《超越自由与尊严》对他自己观点的总结，并驳斥了他人的种种批评。
1974
About Behaviorism《关于行为主义》
1976
Particulars of My Life: Part One of an Autobiography
1978
Reflections on Behaviorism and Society
1979
The Shaping of a Behaviorist: Part Two of an Autobiography
1983
A Matter of Consequences: Part Three of an Autobiography
1983
Enjoy Old Age: A Program of Self-Management
1987
Upon Further Reflection
1989
Recent Issues in the Analysis of Behavior
操作性条件反射实验
    斯金纳从20世纪20年代末，在哈佛大学就读研究生时起，便开始了动物学习的实验研究。他采用的被试多为大白鼠、鸽子和猫等动物。他自制实验装置，早期的实验装置构造比较简单，适于用大白鼠做实验，在一个矩形通道中间穿一根横轴，使其呈天平状平衡安置在一块固定的木板上。当大白鼠从矩形通道的一端跑向另-端时，矩形通道就发生倾斜。每当通道倾斜时，附臂就钩住旁边安置的一个轮子，并使轮子移动一个缺口，使一个缺口内的食物经漏斗落入食物盘内。这样，大白鼠在矩形通道内学会来回穿梭跑动，通过自己的动作获得食物奖励，见右图所示。

　　30年代后期,斯金纳为研究操作性条件反射，精心设计制作了一种特殊的仪器，即一个阴暗的隔音箱，箱子里有一个开关（如用白鼠为被试，即是一小根杠杆或一块木板；如以鸽子为被试，就是一个键盘）。开关连接着箱外的一个记录系统，用线条方式准确地记录动物按或啄开关的次数与时间,如左图所示。这个实验装置被称为“斯金纳箱”(Skinner box)。在实验时，并不是动物每一次按杠杆或啄键盘都给食物，食物的释放方式由实验者决定。一面的箱壁上有一根横杆，恰巧装在一只小食盘和喷水口上面。老鼠在笼子里面爬来爬去，当它碰巧把前爪放在横杆上并压下它时，一粒饲料会自动落下到食盘里。笼子外面连接的一些设备会自动的在移动纸带上画出一条线，一分钟一分钟的记录下压下横杆的次数，从而记录老鼠的行为。这比桑代克的迷箱方法先进了很多，更容易收集数据，实验者所作的工作也更为简单、容
易，他们不需要时时盯着老鼠，更不需要在横杆压下时及时的递送饲料，而只需要查看纸带上的记录就行了。
操作性条件反射理论
    应答性行为和操作性行为--经典式条件反射学习和操作式条件反射学习
　　斯金纳的行为主义理论与华生的行为主义观点有一个显著的区别。华生坚持“没有刺激，就没有反应”的信条。而斯金纳却认为这种观点不尽全面，也不准确。斯金纳提出要注意区分“引发反应”与“自发反应”，并根据这两种反应提出了两种行为：应答性行为和操作性行为。前者是指由特定的、可观察的刺激所引起的行为，如在巴甫洛夫实验室里，狗看见食物或灯光就流唾液，食物或灯光是引起流唾液反应的明确的刺激 ；后者是指在没有任何能观察的外部刺激的情境下的有机体行为，它似乎是自发的，如白鼠在斯金纳箱中的按压杠杆行为就找不到明显的刺激物。应答性行为比较被动，由刺激控制，操作性行为代表着有机体对环境的主动适应，由行为的结果所控制。人类的大多数行为都是操作性行为，如游泳、写字、读书等等。
　　据此，斯金纳进一步提出两种学习形式：一种是经典式条件反射学习，用以塑造有机体的应答行为；另一种是操作式条件反射学习，用以塑造有机体的操作行为。西方学者认为，这两种反射是两种不同的联结过程：经典性条件反射是S--R的联结过程；操作性条件反射是R--S的联结过程。这便补充和丰富了原来行为主义的公式。

    斯金纳的操作条件反射与桑代克的效果律的比较
　　桑代克的效果律指出“如果一个操作行为出现以后有强化刺激跟随，其反应的强度便增加”。可见两者都提及了强化的概念。但是在斯金纳的行为分析中，强化所扮演的角色发生了重大的变化。
　　首先，在桑代克那里，强化是用来解释刺激-反应联结加强的一条主要原理，而在斯金纳体系中，强化只是一个用来描述反应概率增加的术语，即强化增加的是反应发生的概率，如何安排强化才是核心所在。
　　其次，其他学习理论家（如巴甫洛夫）把消退看作是一个主动的抑制过程，而斯金纳认为不能把消退看作是一种与强化无关的独立的过程。事实上，强化可用于消退行为，停止强化可以使反应概率下降。消退过程可用来表明强化效果持续的时间。
　　现在我们回忆一下桑代克的“猫的迷笼实验”，再与斯金纳的操作性条件反射实验相比较，我们会发现两者既有不同之处，也有相似之点。
　　不同之处在于：桑代克的迷笼实验是刺激情境在前，偶发的反应在后；而斯金纳的"斯金纳箱实验"是自发的反应在前，强化刺激在后。
　　相似之处：两种学习都依赖于动物做出自发的反应动作。
　　
反射学说
　1、 操作性条件反射的建立
　　如果一个操作发生后，接着给予一个强化刺激，那么其强度就增加。斯金纳的操作性条件反射所建立的原理，在许多动物和人类的学习中得到印证。例如，鸽子偶一抬高头，受到强化，此后会继续抬高它的头；婴儿偶尔叫一声"妈"，妈妈便报以微笑和爱抚，于是孩子学会了叫"妈妈"。斯金纳甚至依据这个原理，训练两只鸽子玩一种乒乓球游戏，获得成功。实际上，只要巧妙安排强化程序，可以训练动物习得许多复杂的行为。
　2、 操作性条件反射的消退
　　关于操作性条件反射的消退，斯金纳总结说："如果在一个已经通过条件化而增强的操作性活动发生之后，没有强化刺激物出现，它的力量就削弱。"可见，与条件作用的形成一样，消退的关键也在于强化。例如，白鼠的压杆行为如果不予以强化，压杆反应便停止。学生某一良好反应未能受到教师充分的关注和表扬，学生便最终放弃这一作出良好反应的努力。
　　但是，反应的消退表现为一个过程。即一个已经习得的行为并不即刻随强化的停止而终止，而是继续反应一段时间，最终趋于消失。斯金纳以实验表明，一只已经习得压杆反应的白鼠在强化被停止之后，仍然能按压杠杆达50-250次之多，然后最终停止反应。至于消退的时间，则与该习得反应本身力量的强弱成正比，即如果原来反应非常牢固，那么消退的时间较长，反之亦然。例如，在上述实验中，受过多次强化的白鼠在强化停止后，可连续按压杠杆250次左右，而仅受过一次强化的白鼠在强化停止后连续按压杠杆的次数为50次左右。所以，消退过程的时间长短也是斯金纳衡量操作性条件反射力量的一个指标。
斯金纳的强化原理
    斯金纳的强化原理包括以下几个方面的内容：
强化物
　　强化物一般分为两类，一类是指与反应相依随的刺激能增强该反应，此为积极强化物，如水、食物、奖赏等；所谓消极强化物，是指与反应相依随的刺激物从情境中被排除时，可增强该反应。例如，将白鼠放进一特别箱子中，给予白鼠电击直至白鼠按压杠杆。经过几次强化以后，白鼠很快习得了有压反应．以逃避电击。电击即是增强压杆反应的消极强化物，其它诸如强光、噪声、批评等厌恶性刺激皆属此类。
　　强化还可划分为一级强化和二级强化两类。一级强化满足人和动物的基本生理需要，如食物、水、安全、温暖、性等。二级强化是指任何一个中性刺激如果与一级强化反复联合，它就能获得自身的强化性质。如金钱，对婴儿它不是强化物，但当小孩知道钱能换糖时，它就能对儿童的行为产生效果。再如分数，也是在受到教师的注意后才具有强化性质的。
　　二级强化可分为社会强化(社会接纳、微笑)、信物(钱、级别、奖品等)和活动(自由地玩、听音乐、旅游等)。
　　在强化时，可以使用这样一个原则--普雷马克原理(Premack Principle)，即用高频的活动作为低频活动的强化物，或者说用学生喜爱的活动去强化学生参与不喜爱的活动。如"你吃完这些青菜，就可以去玩。"如果一个儿童喜爱做航空模型而不喜欢阅读，可以让学生完成一定的阅读之后去做模型，等等。
　　在实际教育中，人们对各种不同的强化作出反应。有的学生能因在班上受口头表扬而受到激励，但有的学生则不然。一个强化事件本身并不必然有效。因此，在教学中要注意：
　1．教师要针对班上不同的学生提供不同的强化物系列。教师要注意观察和了解学生对什么强化物感兴趣。在一个30多人的班级中，可以事先让学生填写一个问卷。如"在课堂里你喜欢干什么或玩什么东西?在课堂上你最喜爱干的三件事是什么?如果你去商店，你将买哪三件喜爱的玩具?"这些问题还可针对不同的年级加以修改。
　2．教师选择强化物时应考虑年龄因素。有些活动如帮助老师、做谜语题，对小学生可能是更合适的强化物。因此，必须对不同年龄的学生提供相应的有力的强化刺激和事件。
　条件性强化
　所谓条件性强化是指一个中性刺激与一个强化刺激反复匹配联合，那么它也具备了强化的性质，这与赫尔关于次级强化的概念是一致的。例如，在白鼠按压杠杆时，让灯光和食物同时出现，白鼠很快形成条件反应。此后同时撤除灯光和食物，反应迅速消退。此时，在安排白鼠按压杠杆，不给食物而仅呈现灯光，白鼠的压杆反应增加。这表明，灯光已具备了强化性质。许多中性刺激都是由此而获得条件性强化的性质的。
　应该指出，条件强化物的强化力量与相匹配的原始强化物的配对次数成正比。如灯光与食物的匹配次数越多，灯光的强化作用便增加。如果某二条件性强化物与许多原始强化物相匹配，那么该条件性强化物便具备了多方面的强化作用而成为一个概括性强化物。最典型的例子莫过于金钱了，但由于它与衣、食、住、行等皆相联系、匹配，因而具有广泛的强化作用。斯金纳进一步指出，概括性强化物即使没有了赖以为基础的原始强化物相依随出现，效果也依然存在。
强化的程式
　　强化的程式是指反应在什么时候多或频繁地受到强化。强化的程式的分类情况如图所示。
　　每一种不同的程式都产生相应的反应模式。连续程式的强化在教新反应时最为有效。间隔式强化又称部分强化，它比起连续程式具有较高的反应率和较低的消退率。定时距式由于有一个时间差，随之以较低的反应率，但在时间间隔的末厂反应率上升，出现一种扇贝效应，见扇贝效应图 。
学生在期终考试前临时抱佛脚就证明了这-点。定比率式对稳定的反应率比较有益，而变比率式则对维持稳定和高反应率最为有效。

　在实际教育中，不想要的行为常常不明智地受到了强化。一个教师可能正在作间隔式的强化．一次侥幸就会使学生永远记住这个行为，学生认识到如果他们一直恳求教师，教师就会最终答应他们的要求。
　下面是一些强化程式原则：
　　1．教新任务时，进行即时强化，不要进行延缓强化。在行为主义学习理论中有一条重要的原理就是，后果紧跟行为比后果延续要有效得多。即时反馈有两个作用：首先是使行为和后果之间的联系更为明确，其次它增加了反馈的信息价值。
　　2．在任务的早期阶段，强化每一个正确的反应，随着学习的发生，对比较正确的反应优先强化，逐渐地转到间隔式强化。
　　3．强化要保证做到朝正确方向促进或引导。不要坚持一开始就做到完美。不要强化不希望的行为。

行为的塑造
　　所谓塑造，就是通过小步反馈帮助学生达到目标。斯金纳认为"教育就是塑造行为"，如何通过强化去塑造行为，斯金纳采用连续接近(successive appoximation)的方法，对趋向于所要塑造的反应的方向不断地给予强化，直到引出所需要的新行为。例如，训练鸽子或老鼠头抬到一定的高度，只有当其头朝着实验所需的方向抬起来时才强化，下一次要求再多一点，直到全部达到所需的方向和高度。这时，新的行为就塑造成了。
　在课堂教学中，塑造是一个重要的工具。假设我们想让学生写一段含有一个主题句和一句总结的英文段落，那么，这一任务包括许多部分：能识别并能写出主题句、佐证材料和总括句；能写出一个完整的句子；能正确使用大小写、标点符号和语法；能正确拼写。如果教师在一节课里教所有这些技能，要求学生写出一段文字，并且根据他们的内容、语法、标点和拼写而评分，那么大多数学生将会失败，学生从练习中将学不到什么。
　反之，老师可以一步一步地教这些技能，逐步塑造出最终的技能。学生可以先学如何写主题句，然后写佐证材料，然后写总括句，在此之前可能专门谈论过如何选题立意。然后，对段落和标点也提出要求。最后，拼写也作为一条标准。在每一阶段，学生都有机会获得强化，因为强化的标准都是他们可能达到的。
　在塑造行为时要注意这样一条原则：学生必须在他们能力所及的行为范围内得到强化，同时这些行为又必须能向新的行为延伸。学生能在15分钟之内解10道数学题，如果能在12分之内解出就应强化，但不要要求必须在8分之内才予以强化。但是，一个能做20题的学生必须做24题后才强化，不能在少于20题时就予以强化。
程序教学
    50年代，斯金纳完成了程序教学的一系列研究。其目的在于通过使用机器装置来提高学生在算术、阅读、拼写和其他学科的学习效率，希望机器能做某些胜过普通教师所做的事情。这样可以便教师腾出时间，从事那些他能做得更好的工作。这种机器的早期形式是呈现一些数字组合来教加法的装置。儿童在加法器的键盘上打上自己的答案。如果答案正确，则机器运转并呈现下一个问题。下-个问题的呈现也就成了正确答案的强化信号，这与教师对学生做对的算术题给予肯定的回答所起的作用是一样的。斯金纳程序教学的基本思想是对学生的正确学习效果必须给予及时的强化，以鼓励学生继续进行学习。而在课堂教学中，教师不可能对每一位学生都给予及时地强化。教学机器可以提供给学生进行个体化学习，并及时得到强化。

　　斯金纳的教学装置被称为"教学机器"或"自我教学装置"，而作为教学基础的材料被称为程序。斯金纳为教学机器编制的程序是"直线性程序"。该程序将教学内容分成一个个小的内容单元，依次呈现给学生，供他们学习。每个单元学完后，呈现-些测验题，测验学生的学习效果。如果学生做对测验题，教学机器就主动呈现下一个单元的教学内容；如果测验中学生出现错误，则要返回到先前学过的内容，重新进行学习。

　　利用教学机器所进行的教学称为"程序教学"。当然利用这种思想所进行的教学也可称为程序教学。程序教学的基本要求是：
　　(1)教师要编写一系列刺激(问题)-＞反应(答案)框面，这些框面由易到难地小步子地呈现教学内容。
　　(2)要求学生必须主动地学习，即要求他们对每个框面所呈现的内容(问题)作出积极的反应。
　　(3)给学生的每个反应(答案)提供即时的反馈(指出正确答案)。
　　(4)尽量安排好问题，使学生能经常作出正确的反应并得到及时强化。
　　(5)让每个学生按照自己的进度完成整个教学程序。
　　(6)给勤奋和学习效果好的学生提供大量支持性强化物。
对斯金纳的学习理论的评价
    斯金纳对学习理论的研究是有重大贡献的，其主要贡献表现在以下几个方面：

　　1、斯金纳发现了操作性条件反射现象，并对其进行了认真的实验和理论研究。这项研究丰富了条件反射的实验研究，填补了条件反射类型上的一项空白，同时也打破了传统行为主义的"没有刺激，就没有反应"的错误观点。
　　2、斯金纳的"无错误辨别"学习的实验研究是有意义的。它不论在动物的行为训练，还是在学生的行为塑造上都是可借鉴的。而且，对课堂教学也有指导意义。
　　3、斯金纳所做的"强化程序"的实验研究既深入，又具体，系统性很强。揭示出的强化规律客观可靠。它是驯兽师的必修课，对人类的行为管理和学生学习过程的控制和激励也有重要的参考价值。
　　4、50年代兴起的"程序教学"运动显然应该归功于斯金纳的贡献。这项工作推动了个体化教学形式的深入研究。
斯金纳学习理论的局限性
    1、斯金纳犯有同传统行为主义者同样的错误，即只注重描述行为，不注重解释行为；只注重外部反应和外部行为结果．而不探讨内部心理机制。他把内部过程看成是一个"黑箱"。因此．他是一位极端的行为主义者。有人把他的思想体系称为"描述性"的行为主义。
　　2、斯金纳在晚年仍然坚持自己的行为主义观点，反对认知心理学的研究，反对对学习过程和行为塑造过程的认知解释。站在行为主义心理学的立场上看斯金纳，他是一位坚定的行为主义者；而站在认知心理学和心理学发展的角度上看，他是一位顽固者。
　　3、斯金纳倡导的"程序教学"，其实践效果并不像斯金纳预想的那样好。教学实践表明，程序教学减少了师生直接对话的机会，阻碍了师生间的及时交流，这对学生的学习来说是极为不利的。学生在教学机器上学习，还会有盲目地追求学习进度、猜想问题的答案和不求甚解等不良倾向。这些不利因素致使程序教学运动没有得到继续发展，而只成为教育史上留下的。
    斯金纳是一位久负盛名的心理学家，堪称行为主义之父，他是著名的“斯金纳箱”的发明者，此外他还出版了 10 多本著作，发表了 70多篇科学论文。斯金纳的理论用一句简单的话来概括就是：在任一特定的情况下，你的行为都很可能伴随着某种结果，比如得到赞扬、报酬或解决问题后的满足感，那么随后在类似的情况下，你很可能重复这一行为；这些结果被称为强化。如果你的行为伴随着另一种结果，比如疼痛或尴尬，那么你在以后的相似情况下就很少会重复这种行为；这些结果被称为“惩罚”。
在斯金纳的众多研究中，有一篇题为《鸽子的迷信行为》，这篇文章不仅题目幽默，而且通过这个有趣的研究，我们不仅能够清楚的认识斯金纳的基本理论，他的研究行为方式、方法，还能对我们都熟悉的“迷信”现象进行一种斯金纳式的解释。

理论假设
　　人们总是会有这样那样的迷信行为，比方说，忌讳从梯子下走过，忌讳踩到裂缝等等。很多人不愿意承认这一点，但是某些时候人们是会因为迷信而做某些事情。斯金纳认为，人们这样做的原因是他们相信或推测在迷信行为和某些被强化的结果之间存在联系，即便是实际情况下两者并不相关。所以，斯金纳说了下面的话“如果你认为这是人类特有的行为，那么我将给你一只迷信的鸽子。”

实验方法
　　斯金纳在此项研究中使用了“斯金纳箱”，但做了重要的变化：即为了研究迷信行为，食物分发器被设定为每隔 15秒落下食丸，不管动物当时在做什么。可以看到这便产生了非关联性强化。换句话说，不管动物做了什么，每隔 15 秒它将得到一份奖励。
　　研究中的被试是 8只鸽子。连续几天对这些鸽子喂少于他们正常进食量的食物，以便在测试时，它们处于饥饿状态。由此增强寻找食物的动机（这增加了强化的效果）。让每只鸽子每天在实验箱里待几分钟，对其行为不作任何限制。在这期间，每个15 秒强化自动出现。几天后，两个独立的观测者记录了鸽子在箱中的行为。

实验结果
　　斯金纳在报告中写道：“ 8 只鸽子中的 6 只产生了非常明显的反应，两名观察者得到了完全一致的记录。一只鸽子形成了在箱子中逆时针转圈的条件反射，在两次强化之间转2 － 3圈；另一只反复将头撞向箱子上方的一个角落；第三只只显现出一种上举反应，似乎把头放在一根看不见的杆下面并反复抬起它。还有两只鸽子的头和身体呈现出一种摇摆似的动作，它们头部前伸，并且从右向左大幅度摇摆，接着再慢慢的转过来，它们的身子也顺势移动，动作幅度过大时还会向前走几步。还有一只鸽子形成了不完整的啄击或轻触的条件反应，动作直冲地面但并不接触。”
　　上述的行为都是在建立条件反射前未曾观测到的。实际上新的行为和鸽子得到食物毫无联系。然而，它们表现的就好像行为会产生食物似的；也就是说，它们变得迷信了。
　　接下来，斯金纳想知道如果两次强化之间的间隔被拉长了，又会发生什么。他用了一只摇头的鸽子，然后把两次投放食丸的时间间隔慢慢增加到 1分钟。这时，鸽子表现的更加精力充沛，直到最后在两次强化间的 1 分钟内，这只鸽子像在表演一种舞蹈（好像一种“鸽子食物舞”）。
　　最后是消除鸽子的这种新行为。这意味着在测试箱中的强化不再出现。这时，迷信行为逐渐消退，直到完全消失。然而，值得注意的是，这只“跳舞”的鸽子在完全消退前的这种反应次数超过了1 万次。

讨论
　　在实验中斯金纳得到了 6只迷信的鸽子。然而，他对这一成果的解释却极为谨慎：“这一实验可以说是证明了一种迷信。鸽子行为的依据是行为和食物之间的因果关系，虽然这种联系实际上并不存在。”
　　迷信难以消退的原因可以从那只在行为消除前跳了 1万多次舞的鸽子那儿去寻找。当某种行为只是偶然的被强化一次，它就变得非常难以消除。这是因为人们的期望值很高，期望迷信行为会产生强化的后果。你能想象，如果每种联系每次出现，然后突然消失，那么行为就会很快停止，然而，对人类而言，偶然的强化通常要过很长时间才能发生，因此迷信行为常常持续一生。

结论
　　迷信无处不在，从心理学角度看迷信是不健康的吗？绝大多数心理学家相信，尽管从定义上讲，迷信行为并不会导致你想要的结果，但它们还是有积极的功能。当一个人身处困境时，迷信行为经常能产生力量，不再失控。从事危险职业的人比其他人更加迷信。有时候，由迷信行为带来的力量感和控制感能降低焦虑、增强自信和信心，并提高成绩。