도덕과 형성평가에 성장 마인드셋 개념을 적용하는 것은 도덕과 평가의 결과타당도를 향상시킬 수 있을 것으로 기대된다. 먼저, 타당도란 평가결 과의 활용, 평가결과에 대한 추론, 평가로 인한 결과의 적절성으로 정의 할 수 있으며, 정보를 수집하기 위하여 사용된 검사 자체의 특성이라기 보다는 평가결과의 활용이나, 이에 대한 추론의 타당성을 말한다. 즉 타 당도는 ‘검사의 타당도’보단 ‘검사결과의 해석, 추론 및 활용의 타당도’라 는 표현이 더 정확하다고 할 수 있다(McMillan, 2014). 일반적으로 타당 도는 내용 타당도, 준거타당도, 구인타당도에 의하여 검증되어 왔는데, 내용타당도는 검사 내용이 검사하고자 하는 바를 측정하고 있는지와 관 련된 타당도를 말하고, 준거타당도는 검사점수를 외적 변수에 비추어 검 증하는 것을 말하며, 구인 타당도는 규명하고자 하는 심리적 구인을 정 확하게 측정하고 있는지와 관련된 타당도를 말한다(성태제, 2003: 93).
그러나 평가가 학습자의 성장을 제한하는 부정적인 영향을 줄 수 있기 때문에, 평가의 결과가 교사, 학생을 포함한 가정, 사회, 국가에 미치는 영향에 대한 관심이 높아지고 있다(성태제, 2003: 92). 이에 AERA(American Educational Research Association), APA(American Psychological Association), NCME(National Council on Measurement in Education)(1999)에서는 평가가 미치는 영향에 대한 중요성에 주목하 고 ‘검사결과에 기초한 근거(evidence based on consequence of testing)’
로서 결과타당도(consequential validity)를 새로운 타당도의 개념 안에 포함시켰다. 즉 결과타당도에 대한 주목은 전통적인 타당도 개념이 포함 하지 못했던 평가의 결과적 영향까지를 평가의 타당성을 검증하는 준거 로 사용해야 한다는 인식에 기초하고 있다. 이와 관련하여 McMillan(2014; 손원숙 외 역, 2015: 95)은 결과타당도를 교실평가의 타 당도를 검증하는 중요한 준거로 사용할 필요가 있음을 주장하면서, 다음 과 같은 요소를 고려할 수 있다고 주장하였다.
평가는 학생들이 21세기에 필요한 핵심역량을 갖추는데 도움을 줄 것인 가? 학생의 책임감과 끈기를 향상시킬 것인가? 학생들은 실수, 오류 및 장애물을 학습의 일부라고 생각하고, 이들을 피하지 않고 포용할 것인 가? 평가는 자신의 학습내용에 대해서 긍정적인 태도를 개발하는 데 영 향을 줄 것인가? 평가 방식에 따라서 교수 방법은 어떻게 달라질 것인 가?
또한 평가의 결과는 ‘의도한 결과와 의도하지 않은 결과’, ‘실제적 결과 와 잠재적 결과’, ‘긍정적 결과와 부정적 결과’나(Shepard, 1997), ‘의도된 효과와 의도되지 않은 효과(effects)’로 범주화 될 수 있다(McMillan, 2014). 이는 결과타당도에서 다루는 ‘결과’의 범위가 매우 넓다는 것을 의미한다. 이상의 논의를 종합하였을 때, 결과타당도란 평가의 총체적 결 과를 본래의 평가 목적에 비추었을 때 타당한지를 검증하는 개념이라고 할 수 있으며, 이는 곧 “어떠한 평가 결과, 즉 의도한 결과가 도출되었는 지, 의도하지 않은 어떤 결과가 나타났는지 그리고 학생, 학부모, 교사,
학교, 사회, 국가에 미친 긍정적이거나 부정적인 영향과 결과는 무엇인 지, 실제적 영향과 결과 그리고 잠재적 영향과 결과는 무엇인지를 검증 하는 것”을 의미한다고 할 수 있다(성태제, 2003: 94).
도덕과 평가 연구 영역에서 결과타당도에 관한 논의는 정창우와 손경원 (2012)의 연구에서 유일하게 확인되는 것으로 보인다. 이들은 도덕과 수 행평가의 실행 진단 검사도구를 개발하여 타당화하는 과정에서 결과타당 도를 타당화 준거로 설정하였다. 해당 연구는 100명의 전국 중고등학교 도덕과 교사를 대상으로부터 확보한 92명분의 설문조사 결과를 바탕으로 최종적으로 선정된 검사도구의 요인구조에서 결과타당도에 관한 문항 내 용을 다음과 같이 구성하고 있다.
[표 4-1] 도덕과 수행평가 실행 진단 검사도구의 결과타당도 요인(정창우, 손경원, 2012: 124)
위 표에서 확인할 수 있는 점은 도덕과 평가가 도덕성 발달, 인격함양, 도덕과 공부를 위한 학업동기, 교사의 교직 효능감 등 학습자의 정의적
요인 구조
타당화
준거 문항 내용
요인3 결 과 타 당 도
교 육 개 선 및 활용도
J1. 도덕과 수행평가 시행이 학생의 도덕성 발달과 인격함 양에 기여한다.
J2. 도덕과 수행평가가 학생들의 도덕적 사고력 및 문제해 결 능력 향상에 기여한다.
J3. 도덕과 수행평가 과제가 도덕과 공부를 위한 학업동기 에 긍정적 영향을 준다.
J5. 도덕과 수행평가 과제가 교사 개인의 교직 효능감에 긍 정적 영향을 준다.
교 수 학 습 과 의 연계성
C1. 도덕과 수행평가 과제가 교수학습활동을 개선시키는데 기여할 가능성이 있다.
영역에 미치는 포괄적인 영향과 교수학습활동의 개선에 미치는 영향이 도덕과 평가의 타당도를 검증하는 중요한 요인이 될 수 있다는 점이다, 이는 도덕과 형성평가에 의한 학습자의 도덕 성장 마인드셋 발달이 도덕 과 평가의 결과타당도 향상에 기여할 수 있다는 점을 강력하게 시사한 다. 제3장까지의 논의를 바탕으로 확인할 수 있듯이, 도덕 성장 혹은 고 정 마인드셋은 학습자의 도덕과 학습 동기, 도덕성 및 도덕적 인성에 영 향을 미치는 중요한 심리적 변인이며, 도덕 성장 혹은 고정 마인드셋의 발달은 도덕과 형성평가에 의해 촉진될 수 있다. 즉 도덕과 형성평가의 결과가 도덕 고정 마인드셋 발달을 촉진할 경우, 해당 평가의 결과타당 도는 낮다고 할 수 있는 반면, 도덕과 형성평가의 결과가 도덕 성장 마 인드셋 발달을 촉진할 경우, 해당 평가의 결과타당도는 높다고 할 수 있 다.
이상의 논의를 종합하였을 때, 도덕과 형성평가에 대한 성장 마인드셋 개념의 적용은 도덕과 평가의 결과타당도 향상에 기여할 수 있다. 성장 마인드셋 개념은 주로 도덕과 평가의 의도되지 않은 효과나 잠재적인 결 과에 영향을 주는 방식으로 결과타당도에 기여할 것으로 예측된다. 이는 도덕과 평가에서 결과타당도를 고려하면, 평가목표 설정, 평가방법 선정, 증거수집 과정, 결과해석, 평가결과의 피드백을 포함하는 형성평가의 절 차에서 평가 대상에 대해 배려할 점이 많아질 수 있으며(성태제, 1999).
도덕과 평가로 인해 예상되는 부정적인 효과를 사전에 예방할 수 있다는 점(성태제, 2003)에서 더욱 중요하다고 할 수 있다.