1/2. 내적 타당성(조사설계의 타당성)

조사설계의 타당성 혹은 내적 타당성이란 조사의 설계와 분석이 원인과 결과를 얼마나 정확하게 추론하는가와 관련된 개념입니다.

조사의 내적 타당성은 조사의 설계와 분석이 원인과 결과를 정확하게 추론하는 정도를 말합니다.

내적 타당성의 저해요인들은 크게 조사대상집단의 특성 변화와 관련된 요인들과 표본의 대표성을 저해하는 요인들, 마지막으로 측정

방법과 관련된 요인들이 있습니다.

설문조사 실무에서 특히 빈번하게 직면하게 되는 문제는 회귀요인과 검사요인 및 측정수단요인에 의한 내적 타당성의 저하입니다.

회귀요인을 극복하기 위해서는 최대한 확률추출에 근접할 수 있도록 다양한 조사대상자를 확보하기 위해 노력하는 한편, 표본의 크기

를 확대하고 조사의 시행 횟수를 늘려야 하는데 현실은 그렇지 않다는 점에서 문제가 있습니다. 당장 예산상의 제약 때문에 비정기적

인 단발성 조사를 시행할 수 밖에 없다면 단 한번의 설문조사로 나온 결과를 마치 절대적이고 최종적인 결과로 오인해서는 안됩니다.

또한, 가능한 방법으로 추가정보를 수집해서 자료가 일관성이 있는지 파악해야 합니다. 

동일 설문으로 반복해서 시행하게 되는 목적성 패널 조사에서는 응답자들이 설문조사 자체에 익숙해져서 편향된 응답을 하는 경우가

경영지도사 시장조사론의 뚜렷한 최근 출제경향 중 하나가 조사방법론에 대한 관심이라고 할 수 있겠습니다. 조사방법론도 다른 시장조사론 분야와 마찬가지로 처음부터 암기해서 문제를 해결하려 하지 말고 우선 쳬계적으로 이해한 후, 잘 외워지지 않는 부분을 집중적으로 반복하는 노력하는 것이 필요합니다.

2011년 【문제 1】 사무기기 판매회사 A는 최근에 개발한 판매교육용 프로그램의 효과를 알아보기 위하여 전국 영업소 중 10곳을 선정하여 해당 영업소의 영업사원에게 교육시켰다. 그리고 교육실시 전 5개월과 교육실시 후 5개월 동안의 월별 판매량을 기록한 자료를 비교하고자 한다. (30점)

1) 위 사례에 적합한 실험 디자인을 제시하고 그 이유에 대해 논하시오.(6점)

                                          단일집단 사전사후측정설계

                                               (EG) : O1 X O2

                                               (E) = (O2 - O1)

2) 위 실험 디자인에서 통제가능한 외생변수와 통제불가능한 외생변수를 제시하고 그 이유에 대해 논하시오. (24점)

                               통제가능한 외생변수 : 회귀요인

                               통제불가능한 외생변수 : 선발요인, 성숙요인, 상실요인, 역사적 요인

 전술한 2011년 【문제 1】 의 사례는 단절적 시계열 설계로 볼 여지도 있습니다. 그러나 실험집단을 특정했다는 점에서 일반적인 의미의 단절적 시계열 설계로 보기에는 곤란한 측면이 있습니다. 사회과학방법론에서 언급되는 사례들을 보더라도 단절적 시계열 설계로 보기보다는 단일집단 사전사후측정설계로 보아야 할 것 같습니다. 문제에서 제공하는 정보가 다소 부족한 측면이 있고 출제 의도 역시 실험설계를 정확하게 이해하고 있는지를 파악하는 것이지 실험설계의 종류를 기계적으로 잘 암기하고 있는지를 보는 것은 아닐 것이므로 어떤 방향으로 답안을 쓰더라도 득점에는 차이가 없었을 것으로 보입니다.

                                                 단절적 시계열

                                  O1 O2 O3 O4 O5 X O6 O7 O8 O9 O10

                                        통제가능한 외생변수 : 성숙요인

                                통제불가능한 외생변수 : 역사적 요인, 회귀요인

  < 실험설계의 타당성과 위협요인 핵심정리 >

 조사의 설계와 분석이 원인과 결과를 정확하게 추론하는 정도를 조사설계의 타당성, 내적 타당성이라고 하는데 이 내적 타당성의 저해요인과 이를 저해하는 방안은 아래와 같습니다. 내적 타당성의 저해요인과 관련한 문제는 언제라도 나올 수 있으므로 잘 이해하고 있어야 하겠습니다.