조작적 조건화(操作的條件化, Operant Conditioning)
조작적 조건화(操作的條件化, Operant Conditioning)는 행동주의 심리학의 이론으로, 어떤 반응에 대해 선택적으로 보상함으로써 그 반응이 일어날 확률을 증가시키거나 감소시키는 방법을 말한다. 여기서 선택적 보상이란 강화와 벌을 의미한다. 조작적 조건화는 작동적 조건화(作動的條件化), 도구적 조건화(道具的 條件化, Instrumental conditioning)라고도 한다.
반응행동과 조작행동
반응행동은 고전적 조건화에서 사용된 반응과 같이 자극에 의해 직접적으로 유발된 반응으로 침을 흘리는 행동이나 동공의 수축, 무릎 반사 등이 이에 속한다. 반면에 조작행동은 어떤 자극에 의해 일어나는 것이 아니라 스스로 일어나는 행동, 혹은 어떤 자극이 있었다고 하더라도 그것이 무엇인지 알 수 없었던 경우의 행동을 말한다. 스키너는 외부적 자극에 초점을 맞춘 고전적 조건화를 S(Stimulus)형 조건화라고 칭하면서 조작행동에 관심을 가진 조작적 조건화를 R(Response)형 조건화라고 구분하기도 했다.
즉, 조작행동은 어떤 유기체가 능동적으로 환경에 작용을 가하는 행동을 말한다. 조작행동으로 형성되는 조건을 조작적 조건화라고 하는데, 유기체가 행하는 조작행동은 결과에 따라 증가하기도 하고 감소하기도 한다. 이를 통해 어떤 반응을 증가시키거나 감소시키는 것이 조작적 조건화인 것이다.
스키너 상자
조작적 조건형성은 스키너 상자를 통해 실험되고 증명되었다. 스키너 상자는 빈 상자 안에 지렛대가 하나 들어 있으며, 이 지렛대는 먹이통과 연결되어 있어 지렛대를 누르면 먹이가 나오도록 되어 있다. 이 상자를 가지고 조작적 조건형성을 실험했는데, 그 과정은 다음과 같다.
- 배고픈 상태의 흰 쥐를 스키너 상자에 넣는다.
- 이렇게 배고픈 상태로 만드는 것을 박탈이라고 한다.
- 흰 쥐는 스키너 상자 안에서 돌아다니다가 우연히 지렛대를 누르게 된다.
- 지렛대를 누르자 먹이가 나온다.
- 지렛대와 먹이 간의 상관관계를 알지 못하는 쥐는 다시 상자 안을 돌아다닌다.
- 다시 우연히 지렛대를 누른 흰 쥐는 또 먹이가 나오는 것을 보고 지렛대를 누르는 행동을 자주 하게 된다.
- 이러한 과정이 반복되면서 흰 쥐는 지렛대를 누르면 먹이가 나온다는 사실을 학습하게 된다.
- 위의 실험에서 흰 쥐가 지렛대를 누르는 행동은 먹이에 의해 강화된 것이다. 만약 지렛대를 눌렀을 때 먹이가 나오지 않았다면 지렛대를 누르는 행동을 학습하지 못했을 것이다. 이렇게 어떤 행동을 한 뒤에 유기체가 원하는 것을 제공하는 것을 강화(Reinforcement)라고 한다. 고전적 조건화에서는 강화를 조건화의 과정에서 무조건자극(Unconditioned Stimulus)을 부여하는 것으로 명명했지만 조작적 조건화에서는 조건화의 과정에서 부여하는 보상을 의미하는 것으로 쓰는 것이다. 조작적 조건화가 이루어지기 위해서는 강화가 중요한 역할을 한다.
강화 이론
스키너는 유기체가 어떤 행동을 한 결과가 스스로에게 유리하면 그 행동을 더 자주 하게 된다고 보았다(1953). 이때 그 행동의 결과로 주어진 것으로 행동의 빈도를 높이는 자극을 강화인(Reinforcer)이라고 하는데(Chance,1999), 이런 강화인은 일차적 강화인과 이차적 강화인으로 나누어 볼 수 있다.
먼저 일차적 강화인(Primary Reinforcer)은 유기체의 행동을 직접적으로 증가시킬 수 있는 강화인이다. 예를 들면 음식이나 물과 같은 것이 되겠는데, 당장 배고픈 유기체에게 음식으로 만족을 주는 것으로써 바로 다음 행동을 증가시킬 수 있다. 반면에 이차적 강화인(Secondary Reinforcer)은 유기체의 행동을 바로 증가시키지 못한다. 하지만 일차적 강화인과 연합하여 행동을 증가시킬 수 있는데, 쿠폰이나 토큰 등이 이에 해당한다. 즉, 쿠폰이나 토큰으로도 유기체를 강화할 수 있지만 그것은 유기체를 직접 강화하는 것이 아니라 일차적 강화인과 교환할 수 있기 때문에 강화가 가능하다는 것이다.
이차적 강화인으로써 가장 대표적인 것이 돈이다. 돈은 여러 종류의 일차적 강화인과 교환할 수 있기 때문에 일반화 된 강화인이라고 부르기도 한다.
강화 스케줄
- 계속적 강화(연속 강화) : 바람직한 행동이 나타날 때마다 강화하는 것
- 간헐적 강화(부분 강화) : 바람직한 행동이 나타났을 때 가끔 강화하는 것
- 간헐적 강화에는 시간 간격에 따라 강화하는 간격강화와 반응 횟수에 따라 강화하는 비율강화가 있다.
- 간격강화와 비율강화 각각에는 고정적 강화와 변동적 강화가 있다.
정적 처벌과 부적 처벌
조작적 조건화에서는 단지 유기체가 하는 행동의 빈도를 증가시키는 것만을 이야기하지는 않는다. 어떤 행동을 수정하기 위해서는 특정 행동의 빈도를 감소시킬 필요가 있는데, 이때 혐오자극을 제공하거나 쾌자극을 제거함으로써 행동의 빈도수를 감소시킨다(Chance, 1999). 이렇게 행동의 빈도를 증가시키는 강화와 대별되는 것이 약화(벌)이다.
벌은 유기체의 행동의 결과로 어떤 쾌자극을 제거하거나 혐오자극을 제공하는 것을 의미한다. 특히 혐오자극을 제공하는 것을 수여성 벌이라고 하는데, 수여성 벌의 대표적인 예로 체벌을 들 수 있다. 학생이 바람직하지 못한 행동을 했을 때 교사가 체벌을 가함으로써 그 행동을 더 이상 하지 않게 만드는 것이다.
반면에 쾌자극을 제거하는 벌은 박탈성 벌이라고 한다. 박탈성 벌은 그동안 받아오던 강화인을 제거한다는 말과 같다. 박탈성 벌의 대표적인 예로 '타임아웃'(Time out)이 있다. 타임아웃은 어떤 학생이 교실을 시끄럽게 하는 경우, 그 학생을 일시적으로 교실 밖으로 추방하는 것이다. 편하게 교실에서 앉아 공부할 기회와 친구들과 함께 있을 기회를 박탈당하는 것은 직접적인 혐오자극을 부여하는 것이 아니라 쾌자극을 제거하는 박탈성 벌에 해당한다.
자극(이익과 불이익)의 정적 , 부적 강화 및 처벌
처벌을 적용할 때 주의해야 하는 점
처벌을 적용할 때 주의해야 하는 점은, 유기체가 스스로 바람직하지 않다고 여기는 행동을 했는데에도 불구하고 처벌을 제공하지 않는다면 유기체는 그 행동이 틀린 행동이 아닐수있다고 믿는다는 것이다. 처벌에는 이와 같은 부작용이 가능한데, 가장 대표적인 부작용은 처벌을 받은 유기체는 다른 유기체에게 공격적인 행동을 자주 보인다는 것이다. 혹은 부정적인 정서반응과 거짓말, 변명 등의 회피반응을 보이기도 한다.
하지만 불가피한 상황이라면 다음을 고려해야 한다.
- 처벌은 가능한 한 행위자의 바람직하지 못한 행동을 한 뒤에 즉각적으로 제공해야 할 필요성이 제기된다.
- 문제 행동이 일어날 때마다 처벌을 제공해야 한다. (주어지던 벌이 없으면 부적강화로 여길 가능성이 있다)
- 처벌의 강도는 처음부터 가능한 한 강하도록 한다. (행위와 처벌간에 객관적이고 합리적인 타당성이 강해야한다)
- 바람직하지 못한 행동은 벌을 제공하되 대안적 행동을 확실히 알려주고, 분명히 해야 한다.
또한 처벌은 '문제 행동이 일어날 때마다 처벌을 제공해야 한다. 주어지던 벌이 없으면 부적강화로 여길 가능성이 있다.'라는 처벌계획에서처럼 문제행동과 그에대한 처벌은 제공자와 처벌받는 이와의 관계에서 관심이라는 자극과 반응이 강화되고있을수있다는 또다른 측면에서처럼 처벌계획이 왜곡될경우 부정적으로 노출될수있다는점에서 안정적이지않다는 견해가 있다. 그러나 처벌과 보상을 동시에 사용하는것이 보상만을 사용하는것보다 유의미할수있다.
프리맥 원리
프리맥(Premack,1962)은 물질적 자극이 아닌 스스로의 행동도 강화인 역할을 할 수 있음을 알게 되었다. 프리맥에 의하면 유기체가 자주 하는 행동은 잘 하지 않는 행동을 증가시키기 위한 강화인으로 사용될 수 있다. 쉽게 예를 들자면 컴퓨터게임을 좋아하는 아이에게 일정한 양의 수학문제를 풀게 한 뒤에 컴퓨터게임을 하도록 허락하는 것이다. 이렇게 되면 컴퓨터게임은 수학문제를 풀게 하기 위한 강화인으로써 작용하게 되는 것이다.
그러나 컴퓨터게임을 먼저 한 뒤 수학공부를 시키면 효과가 없다. 프리맥 원리의 강화인은 어떤 긍정적 행동을 한 뒤에 제공해야 바른 효과를 얻을 수 있다.