2016/08/08 - [야행하는 리서치] - 8. 실험설계의 종류①

실험설계를 살펴보기 전에 실험설계를 묘사하는 기호들의 의미를 정리해 보면 아래와 같습니다.

진실험설계는 무작위배정을 통해 실험집단과 통제집단의 비교가 가능하고 독립변수가 조작가능하며, 경쟁가설의 통제가 가능한 실험설계를 말합니다. 진실험설계 중 현실적으로 많이 사용하는 설계의 유형에는 통제집단 사후측정 설계가 있습니다.

통제집단 사후측정 설계는 인과적 추론의 저해요인인 역사요인과 성숙요인, 그리고 회귀요인을 제거할 수 있습니다. 그러나, 실험처리 전에 실험집단과 통제집단의 관찰값이 동일한지 여부를 점검할 수 없다는 한계가 있습니다.

통제집단 사후측정 설계가 처리 전 실험집단과 통제집단의 관찰값을 알 수 없다는 점을 보완한 것이 통제집단 사전사후측정 설계 혹은 고전적 실험설계입니다.

통제집단 사전사후측정 설계은 사전측정과 사후측정을 실시하게 되므로 검사요인이 유력한 내적 타당성 저해요인으로 작용하게 됩니다. 진실험설계 중 가장 강력한 실험설계의 유형에는 솔로몬의 4집단실험설계가 있습니다. 솔로몬의 4집단실험설계는 일정 및 비용 상의 문제로 시장조사에서 본격적으로 적용하기에는 한계가 있습니다.

인과적 추론의 조건을 시간적 선행성, 공변화 및 경쟁가설의 배제라고 한다면 인과관계를 규명하기 위해서는 통계적 실험-설문조사 역시 인과적 추론의 조건에 맞게 계획해야 합니다.

그런데, 모든 실험이 인과적 추론의 조건을 충족한다는 것은 현실적으로 어렵고, 실험설계는 인과적 추론의 조건 충족 정도에 따라 진실험 설계, 준실험 설계, 비실험설계로 분류하게 됩니다.

시장조사에 빈번하게 이루어지는 횡단면 조사는 실험집단과 통제집단의 동질성을 확보하는데 한계가 있는 준실험설계에 근거해 이루어지는 경우가 일반적입니다. 검정의 대상이 되는 실험처리를 한 집단을 실험집단(experiment group)이라고 하고 실험처리를 하지 않고 실험집단과 비교하는 집단을 통제집단(control group)이라고 합니다.

진실험설계는 현실의 시장조사에 적용하기에는 무리가 따르지만 진실험설계에 대한 이해는 무척 중요합니다. 왜냐하면 실무에서 적용하는 다양한 실험설계의 준거가 되기 때문입니다. 마치 경제학에서 완전경쟁시장이 현실에 존재하지는 않지만 다양한 불완전경쟁시장에서의 자원배분의 성과를 판단하는데 기준이 되는 것과 유사하다고 생각하면 될 것 같습니다.

지난 2015년에는 실험설계에 대해 아주 기초적인 문제가 출제되었습니다. 미처 깊이있게 이해하지 못했더라도 기본적인 지식만 있으면 손쉽게 답변할 수 있는 문제였습니다.