자기보고식 심리검사에서 심층신경망 모형의 적용 가능성 탐색 = Investigating the Feasibility of Employing a Deep Neural Network Model in Self Report Inventories
저자
발행사항
서울 : 건국대학교 대학원, 2019
학위논문사항
학위논문(박사)-- 건국대학교 대학원 : 교육학과 측정평가 2019. 2
발행연도
2019
작성언어
한국어
주제어
발행국(도시)
서울
형태사항
129 ; 26 cm
일반주기명
지도교수: 이현숙
UCI식별코드
I804:11004-200000170443
소장기관
최근 인공신경망은 여러 기계학습 방법 중 가장 많은 관심을 받고 있으며 여러 분야에서 다양한 연구가 진행되면서 우수한 성능을 보여주고 있다. 심리측정 분야에서도 관심을 기울이기 시작하면서 기존 인공신경망의 연구 성과와 방법을 적용해서 기존 연구에서 해결이 어려웠던 문제에 대한 새로운 해법을 찾고자 하는 연구가 점차 시도되고 있다. 한편으로는 심리적 속성을 측정하는 문항 자료에 대해 신경망의 연구 방법을 적용하려는 노력도 진행되어서 검사 문항으로 심리적 속성을 측정하여 결과를 산출하는 과정을 구현하고자 인지진단모형에서 사용되는 Q행렬을 바탕으로 이상적 응답 반응을 생성해서 인공신경망을 훈련시키는 아이디어가 제안되었다.
본 연구는 이와 같은 선행 연구를 바탕으로 심리측정 분야에서 인공신경망의 새로운 활용 가능성을 탐색하고 향후 관련 연구의 기반을 제공하려는 목적으로 수행되었다. 이에 임상 분야에서 사용되는 자기보고식 심리검사인 MMPI의 결과 프로파일을 예측하는 심층신경망 모형을 설정하면서 그 절차와 유의점을 정리하고 심층신경망의 분류 결과를 일반화 선형 모형, 랜덤 포레스트의 결과와 비교하여 심리 검사 결과에 대한 예측 성능을 검증하였으며 훈련 자료 수의 변화에 따른 분류 결과의 정확성 변화를 확인하였다. MMPI의 8개 임상 척도를 대상으로 척도별 문항에 대한 정보를 Q행렬로 정리하여 이상적 응답반응을 103, 103.5, 104, 104.5개의 4가지 조건으로 생성하였으며 이것을 훈련 자료로 하여 신경망과 다른 모형들을 훈련시켰다. 검증과 평가를 위해서는 MMPI-2 규준 집단의 각 문항에 대한 긍정반응 비율을 바탕으로 가상의 응답 자료를 생성하였으며 이 과정에 긍정반응 비율을 그대로 사용해서 생성한 자료와 함께 각 척도 점수의 상승을 가정한 척도별 상승 집단의 가상 응답 자료를 별도로 생성하였다.
훈련된 인공신경망은 기존 방법의 결과와 유사한 예측 결과를 나타내었으며 일반화 선형 모형과 랜덤 포레스트보다 모든 면에서 정확한 분류 결과를 보여주었다. 훈련 자료가 일정 이상 커지게 되면 오히려 결과가 하락하는 다른 모형과 달리 전환 학습을 거치게 되면 보다 큰 자료에서도 정확성을 높일 수 있었다. 그러나 인공신경망 모형은 높은 정밀도를 보여준 반면 낮은 재현율의 문제가 있었으며 인공신경망 모형의 분류 특성은 확실한 척도 상승만 분류할 필요가 있을 때 더 적합할 것으로 판단할 수 있었다. 또한 높은 정확도에도 불구하고 훈련 자료에 포함되지 못한 응답 패턴으로 인한 문제도 있는 것으로 보였으며 좀 더 큰 규모의 자료를 충분히 효율적으로 학습시킬 수 있는 절차에 대한 고려가 필요할 것으로 보였다.
이 결과를 토대로 한 결론은 다음과 같다.
첫째, 인공신경망으로 문항 응답에서 검사 결과를 예측한 결과는 학습의 기준으로 사용한 기존의 방법과 유사하였으며 향후 성능을 더 높일 여지가 있었고 실제 자료를 사용한 연구를 통해 기존 방법보다 더 정확한 결과를 산출하는 것도 가능할 것이므로 이런 과정을 통해 새로운 심리 측정 모형으로써 다양한 연구에 적용하는 것이 가능할 것이다. 둘째, 일반화 선형 모형과 랜덤 포레스트의 결과와 비교했을 때, 인공신경망의 결과가 가장 우수했으며 자료의 다차원적인 특성으로 인한 높은 복잡성을 고려할 때 인공신경망 모형이 기존의 방법보다 더 적합할 수 있을 것으로 판단되었다. 셋째, 이상적 응답 반응의 패턴 전부를 생성할 수 없는 경우 일부만 생성하여 훈련시키는 방법을 사용하여 최소한의 정확도를 확보할 수 있었다. 그러나 훈련 자료 수의 증가에 대한 효과가 미미한 결과가 나온 것에 대해서는 모형과 분석 절차에 대한 추가 검토가 필요할 것이다.
인공신경망은 향후 실제 자료를 사용한 검증 과정을 거치고 다양한 아이디어를 통해 분석 절차를 보완하면서 모형을 개선하는 과정을 통해 타당한 심리 측정 모형으로 적용될 수 있을 것으로 기대한다.
Among the different kinds of machine learning methods, artificial neural networks have received great attention, and they have shown excellent performance in studies in various fields. In psychometrics, they have been used to identify new solutions to problems that have not been solved. In addition, another efforts are conducted to apply artificial neural networks on items of psychological tests that intended to measure psychological attributes. These studies aimed to train a neural network using an ideal response pattern generated by a Q matrix in the cognitive diagnostic model.
Based on these prior studies, the present study explored the potential possibility for employing artificial neural networks in psychometrics and to provide a groundwork for future studies, We created a deep neural network model that predicts the outcome profile of the Minnesota Multiphasic Personality Inventory (MMPI), a self-report tool that is used widely in clinical psychology, and summarized the procedure and significance. Additionally, the predictive performance of the model was verified by comparing its results to those obtained from a generalized linear model and random forest, and the fluctuation in the accuracy of the classification results, as the change in the number of training sets, was verified. The information on the relationship between the items and the MMPI’s 8 clinical scales were plotted using a Q matrix and the ideal response patterns in the following four conditions were generated: 103, 103.5, 104, and 104.5. These ideal patterns were used as training sets to train the neural network and other models. For the test and validation phase, we generated simulation data based on the positive response rate for each item of the MMPI-2’s norm groups. Additionally, the floating groups’ simulation data for each scale, assumed by each scale’s score, were generated separately.
The trained neural network reported predicted outcomes that were similar to those obtained from the calculation methods used earlier, and it exhibited better accuracy performance as compared to the generalized linear model and random forest. Contrary to the other models, which exhibited poor results with a larger volume of training data, the neural network implemented after transfer learning exhibited good accuracy with larger data. However, though the artificial neural network model exhibited high accuracy, it revealed “low value of recall” issues. Specifically, the classification characteristics of the neural network could be judged more appropriate when the definite floating scales are classified. In addition, despite the high accuracy, there was a consideration with the response patterns that were not included in the training sets and it should be considered that the procedures to ensure large amount data can be learned efficiently.
The following conclusions could be drawn from these results:
First, the artificial neural network’s predicted results for the test items were similar to those obtained by using previous calculation methods, and there was scope for better performance. Future studies using real data could yield more accurate results. The artificial neural network could be used a new psychological measurement model in future studies.
Second, neural network exhibited better predictive performance as compared to the generalized linear model and random forest. Further, considering the high complexity of the multi-dimensional characteristics in the present psychological data, the artificial neural network model was more feasible than the methods used before.
Third, if all the possible patterns of the ideal responses could not be usable, minimum accuracy could be achieved by training only a fraction of these patterns. However, the model and procedures need to be examined further because of the results that are less affected by the increase in the number of training sets.
Following validation using actual data, and by applying various ideas to complement the analysis process and improve the model structure, the artificial neural network could be employed as a valid psychological measurement method through the validating process using actual data.
분석정보
서지정보 내보내기(Export)
닫기소장기관 정보
닫기권호소장정보
닫기오류접수
닫기오류 접수 확인
닫기음성서비스 신청
닫기음성서비스 신청 확인
닫기이용약관
닫기학술연구정보서비스 이용약관 (2017년 1월 1일 ~ 현재 적용)
학술연구정보서비스(이하 RISS)는 정보주체의 자유와 권리 보호를 위해 「개인정보 보호법」 및 관계 법령이 정한 바를 준수하여, 적법하게 개인정보를 처리하고 안전하게 관리하고 있습니다. 이에 「개인정보 보호법」 제30조에 따라 정보주체에게 개인정보 처리에 관한 절차 및 기준을 안내하고, 이와 관련한 고충을 신속하고 원활하게 처리할 수 있도록 하기 위하여 다음과 같이 개인정보 처리방침을 수립·공개합니다.
주요 개인정보 처리 표시(라벨링)
목 차
3년
또는 회원탈퇴시까지5년
(「전자상거래 등에서의 소비자보호에 관한3년
(「전자상거래 등에서의 소비자보호에 관한2년
이상(개인정보보호위원회 : 개인정보의 안전성 확보조치 기준)개인정보파일의 명칭 | 운영근거 / 처리목적 | 개인정보파일에 기록되는 개인정보의 항목 | 보유기간 | |
---|---|---|---|---|
학술연구정보서비스 이용자 가입정보 파일 | 한국교육학술정보원법 | 필수 | ID, 비밀번호, 성명, 생년월일, 신분(직업구분), 이메일, 소속분야, 웹진메일 수신동의 여부 | 3년 또는 탈퇴시 |
선택 | 소속기관명, 소속도서관명, 학과/부서명, 학번/직원번호, 휴대전화, 주소 |
구분 | 담당자 | 연락처 |
---|---|---|
KERIS 개인정보 보호책임자 | 정보보호본부 김태우 | - 이메일 : lsy@keris.or.kr - 전화번호 : 053-714-0439 - 팩스번호 : 053-714-0195 |
KERIS 개인정보 보호담당자 | 개인정보보호부 이상엽 | |
RISS 개인정보 보호책임자 | 대학학술본부 장금연 | - 이메일 : giltizen@keris.or.kr - 전화번호 : 053-714-0149 - 팩스번호 : 053-714-0194 |
RISS 개인정보 보호담당자 | 학술진흥부 길원진 |
자동로그아웃 안내
닫기인증오류 안내
닫기귀하께서는 휴면계정 전환 후 1년동안 회원정보 수집 및 이용에 대한
재동의를 하지 않으신 관계로 개인정보가 삭제되었습니다.
(참조 : RISS 이용약관 및 개인정보처리방침)
신규회원으로 가입하여 이용 부탁 드리며, 추가 문의는 고객센터로 연락 바랍니다.
- 기존 아이디 재사용 불가
휴면계정 안내
RISS는 [표준개인정보 보호지침]에 따라 2년을 주기로 개인정보 수집·이용에 관하여 (재)동의를 받고 있으며, (재)동의를 하지 않을 경우, 휴면계정으로 전환됩니다.
(※ 휴면계정은 원문이용 및 복사/대출 서비스를 이용할 수 없습니다.)
휴면계정으로 전환된 후 1년간 회원정보 수집·이용에 대한 재동의를 하지 않을 경우, RISS에서 자동탈퇴 및 개인정보가 삭제처리 됩니다.
고객센터 1599-3122
ARS번호+1번(회원가입 및 정보수정)