상황판단검사의 채점용 답 결정방식과 채점방식이 타당도에 미치는 영향 : 왜곡여부에 따른 비교 연구 = Comparison of validities for scoring keys and scoring algorithms in situational judgment test : the influence of faking
저자
발행사항
천안 : 호서대학교 대학원, 2010
학위논문사항
학위논문(석사)-- 호서대학교 대학원 : 산업심리학과 2010. 2
발행연도
2010
작성언어
한국어
주제어
발행국(도시)
충청남도
형태사항
66 p. ; 26cm
소장기관
본 연구에서는 상황판단검사(SJT)에서 피험자가 의도적으로 자신의 점수를 높일 수 있는지 즉, 긍정적 응답왜곡(faking good)이 가능한지를 확인하고, 만약 응답왜곡이 가능하다면 검사의 준거관련 타당도와 증분 타당도에 어떠한 영향을 미치는지 알아보고자 하였다. 이와 더불어 상이한 채점용 답 결정방식(SME 합의 방법, 응답자 평균 방법, 경험적 방법)과 채점방식(Pick most 방식, 시나리오 채점방식, Best-Worst채점방식)을 조합하여 사용하였을 경우, 응답왜곡의 정도와 검사의 준거관련 타당도 및 증분 타당도에 미치는 영향이 달라 질 수 있는지를 탐색적으로 살펴보고자 하였다.
국내 A대학의 리더선발 프로그램에 지원한 2학년 학생 110명과 B학과의 재학생 129명을 대상으로 적성검사, 성격검사, 상황판단 검사를 순차적으로 실시하였다. 적성검사와 성격검사는 두 집단 모두 동일한 절차와 방법으로 시행하였으나, 상황판단검사(SJT)의 경우 제한된 수의 리더를 선발하기 위한 리더선발 프로그램에 지원한 학생들은 자연적으로 긍정적 응답왜곡이 발생하는 왜곡집단으로 간주하였다. B학과의 재학생들의 경우 검사의 목적이 자기진단임을 강조하고 별도의 지시문으로 솔직한 응답을 요구하였기 때문에 정직집단으로 간주하였다. 또한 A대학의 재학생 78명을 사용하여 응답자 평균, 경험적 채점용 답을 설정하였으며, B학과의 재학생 중 성적 우수자, 리더 경험자, 대학원 1학년생을 전문가로 설정하여 전문가 기반 채점용 답을 설정하였다. 수집된 자료들을 바탕으로 각각의 채점용 답 결정방식과 채점방식을 조합하여 솔직집단과 왜곡집단 모두에서 9개의 독립된 상황판단검사(SJT)점수를 산출하였으며, 이를 바탕으로 각각의 준거관련 타당도와 증분 타당도를 비교하였다.
그 결과, 독립적으로 산출된 9개의 상황판단검사(SJT) 모두에서 왜곡집단이 솔직집단에 비하여 유의미하게 높은 검사점수를 보이는 것으로 나타났으며 준거관련 타당도 또한 솔직집단이 왜곡집단보다 더 큰 것으로 나타났다. 증분 타당도의 경우 과업수행준거와 맥락수행 준거에 대한 결과가 상이하게 나타났으며, 맥락수행 준거에서만 9개의 상황판단검사(SJT) 모두 솔직집단이 왜곡집단 보다 더 큰 증분적 설명량을 보였다. 이러한 결과를 토대로 본 연구의 의의와 제한점에 대하여 논의하였다.
The purpose of the present study was to examine the fakability of the situational judgment test. Specifically, the study was focused on the following questions ; (1) whether participants are able to fake their answers on the situational judgment test in the real situation of selection, (2) whether faking influences the criterion-related validity of the situational judgment test and its incremental validity over cognitive and personality tests, and (3) whether the combination of different scoring key(SME consensus, average in response and empirical keying) and different scoring algorithm(scenario, Best-Worst, Pick most) has influence on the degree of faking as well as both criterion-related validity and incremental validity of the situational judgment test. 110 students who applied to the leadership program were considered the faking group, while 129 students of B department at A university were considered the honest group. The members of both group completed a cognitive test, a personality questionnaire and an situational judgment test. Only for the situational judgment tests, each group was asked to respond as instructed. Another group of 78 students of A university participated in the survey to develop two scoring key(empirical, average in response keying). SME consensus key was developed by 9 SMEs(3 students had experienced in leader, 2 students has a good GPA, 4 students is 1st-year graduate students). And then 9 situational judgment scores was produced independently.
Results indicated that the all scores of students in the faking group were significantly higher than those of students in the honest group. Furthermore, criterion-related validity of the situational judgement test in the honest group was higher than that of the faking group for both task performance and contextual performance. While faking had negative effects on the criterion-related validity for both criteria of performance, incremental validity of the situational judgement test in the honest group was higher than that of the faking group only for the contextual criteria. Finally, the limitation and future direction of the present study were discussed.
서지정보 내보내기(Export)
닫기소장기관 정보
닫기권호소장정보
닫기오류접수
닫기오류 접수 확인
닫기음성서비스 신청
닫기음성서비스 신청 확인
닫기이용약관
닫기학술연구정보서비스 이용약관 (2017년 1월 1일 ~ 현재 적용)
학술연구정보서비스(이하 RISS)는 정보주체의 자유와 권리 보호를 위해 「개인정보 보호법」 및 관계 법령이 정한 바를 준수하여, 적법하게 개인정보를 처리하고 안전하게 관리하고 있습니다. 이에 「개인정보 보호법」 제30조에 따라 정보주체에게 개인정보 처리에 관한 절차 및 기준을 안내하고, 이와 관련한 고충을 신속하고 원활하게 처리할 수 있도록 하기 위하여 다음과 같이 개인정보 처리방침을 수립·공개합니다.
주요 개인정보 처리 표시(라벨링)
목 차
3년
또는 회원탈퇴시까지5년
(「전자상거래 등에서의 소비자보호에 관한3년
(「전자상거래 등에서의 소비자보호에 관한2년
이상(개인정보보호위원회 : 개인정보의 안전성 확보조치 기준)개인정보파일의 명칭 | 운영근거 / 처리목적 | 개인정보파일에 기록되는 개인정보의 항목 | 보유기간 | |
---|---|---|---|---|
학술연구정보서비스 이용자 가입정보 파일 | 한국교육학술정보원법 | 필수 | ID, 비밀번호, 성명, 생년월일, 신분(직업구분), 이메일, 소속분야, 웹진메일 수신동의 여부 | 3년 또는 탈퇴시 |
선택 | 소속기관명, 소속도서관명, 학과/부서명, 학번/직원번호, 휴대전화, 주소 |
구분 | 담당자 | 연락처 |
---|---|---|
KERIS 개인정보 보호책임자 | 정보보호본부 김태우 | - 이메일 : lsy@keris.or.kr - 전화번호 : 053-714-0439 - 팩스번호 : 053-714-0195 |
KERIS 개인정보 보호담당자 | 개인정보보호부 이상엽 | |
RISS 개인정보 보호책임자 | 대학학술본부 장금연 | - 이메일 : giltizen@keris.or.kr - 전화번호 : 053-714-0149 - 팩스번호 : 053-714-0194 |
RISS 개인정보 보호담당자 | 학술진흥부 길원진 |
자동로그아웃 안내
닫기인증오류 안내
닫기귀하께서는 휴면계정 전환 후 1년동안 회원정보 수집 및 이용에 대한
재동의를 하지 않으신 관계로 개인정보가 삭제되었습니다.
(참조 : RISS 이용약관 및 개인정보처리방침)
신규회원으로 가입하여 이용 부탁 드리며, 추가 문의는 고객센터로 연락 바랍니다.
- 기존 아이디 재사용 불가
휴면계정 안내
RISS는 [표준개인정보 보호지침]에 따라 2년을 주기로 개인정보 수집·이용에 관하여 (재)동의를 받고 있으며, (재)동의를 하지 않을 경우, 휴면계정으로 전환됩니다.
(※ 휴면계정은 원문이용 및 복사/대출 서비스를 이용할 수 없습니다.)
휴면계정으로 전환된 후 1년간 회원정보 수집·이용에 대한 재동의를 하지 않을 경우, RISS에서 자동탈퇴 및 개인정보가 삭제처리 됩니다.
고객센터 1599-3122
ARS번호+1번(회원가입 및 정보수정)