대학생용 핵심역량 진단도구 개발 및 타당화 연구 : K대학교를 중심으로

다국어 초록 (Multilingual Abstract)

OECD (2003) defined core competencies as ‘abilities to achieve successful life throughout their lifetime for entire people in the world' and emphasized the enhancement of core competencies through education. Since then, many nations have emphasized the development and application of competency-based curricula in both primary and secondary education as well as in higher education. It is very important to diagnose and evaluate students' growth and development in order to understand the effects of newly implemented competency-based curriculum. Each institute of higher education has its own core competencies to reveal the founding philosophies. So researches are requited to develop proper assessment tools for each institute and to assess students’ competencies with the tools. Therefore, new core competency diagnostic tools for collegiate students suitable for the university are newly developed, Research is needed to confirm changes in core competencies.
The purpose of this study is to develop and to validate a diagnostic tool for the core competencies of K university students(KCCA, K university Core Competency Assessment) in Gyeonggi province, and to analyze their competency levels. The research questions are following.

1. Is the newly developed diagnostic tool for core competencies valid?
2. What are the core competency levels of K university students.

To address the questions, a 5 point Likert scale assessment tool for collegiate core competencies was developed with following procedures: a comprehensive literature review, two time expert review and a pilot test(78 students). The tool consisted of five sub-core competencies such as 'Boundless', 'Able’, ‘Reliable’, ‘Understanding’ and ‘Networking’. 2,151 students were participated in early September core competency assessment, and the result of the assessment was analyzed for construct validation and reliability. To analyze discriminant validity, 113 students were participated in early October Korea Collegiate Essential Skills Assessment (K-CESA), which is most commonly used for collegiate competency evalucation and developed by Korea Ministry of Education (MOE) and Korea Research Institute for Vocational Education and Training (KRIVET). Findings of the study is following;
First of all, the newly developed collegiate core competency assessment tool (60 questions) is valid. 7 professors and 2 administrators reviewed the questions twice, and the average of review results was 4.33 over 5 and the range were between 3.78~4.78. Confirmative factor analysis was examined successfully since the model fit was acceptable and 20 sub factors and 10 secondary factors were suitable(TLI 0.912~962, CFI 0.935~0.971, RMSEA 0.052~0,068). To analyze discriminant validity, correlation analysis between KCCA and K-CESA was examined, and the discriminant validity was good since the correlation was statistically not significant. The entire tool reliability (Cronbach α) was 0.956 and of sub competency reliabilities were between 0.816~0.882.
Secondly, the K university student core competency was 3.80 over 5 and sub core competencies were 3.67~4.00. According to the fields of study (‘Humanity’, ‘Social Science’, ‘Natural Science’, ‘Applied Science’ and ‘Art and physical education’), the art and physical education majors had higher level of competencies in ‘Able’ than the natural science majors, and the humanity majors had higher level of competencies in ‘Understanding’ than the natural science majors. The competency level in ‘Boundless’ and ‘Reliable’ were different by student year. Male students had higher level of entire competencies than female students. K university students were grouped in 3 by latent profile analysis: ‘excellent’, ‘average’, ‘poor’. The distribution was different by field of study and sex.
It is necessary to note the generalization of the results is limited since the assessment tool was developed in a self-report scale and small number of students participated in test-retest. To find out the effect of a university education in more comprehensive and stable manners, various types of assessment are supposed to be applied and stronger inducement should be used for more students participation.

국문 초록 (Abstract)

OECD(2003)는 핵심역량을 ‘모든 사람이 전생애를 통해 성공적인 삶을 영위하는데 핵심이 되는 역량’이라 정의하고, 교육을 통한 핵심역량의 증진을 강조하였다. 이후 각국은 초중등교육에서뿐만 아니라 고등교육에서도 역량기반 교육과정의 개발과 적용을 중시하고 있다. 이러한 맥락에서 새롭게 시행되고 있는 역량기반 교육과정의 효과를 파악하기 위하여 학생의 핵심역량을 진단하고 평가하는 것이 매우 중요하다. 특히 고등교육을 담당하는 대학들은 건학이념이나 추구하는 인재상이 다르고, 이를 기반으로 증진하고자 하는 핵심역량도 서로 다른 상황이므로 해당 대학에 적합한 대학생용 핵심역량 진단도구를 새롭게 개발하고 그 진단도구를 활용하여 대학생 핵심역량의 수준 등을 파악하기 위한 연구가 필요한 실정이다.
이 연구는 경기도 소재 K대학교 학생들의 핵심역량 수준을 파악하기 위하여 진단도구를 개발한 후 타당화하고, 그 진단도구를 이용하여 측정한 핵심역량의 수준을 분석하기 위한 것이며, 주요 연구 문제는 다음과 같다.

첫째, K대학교 학생용 핵심역량 진단도구는 양호한가?
둘째, K대학교 학생들의 핵심역량 수준은 어떠한가?

K대학교 학생용 핵심역량 진단도구를 개발하기 위하여, 관련 선행연구들을 종합적으로 분석하고, 2차에 걸친 전문가협의회와 예비검사(총 78명) 등을 거쳐 5점 리커트(Likert)형 척도를 활용하였다. 해당 진단도구는 5개의 핵심역량('창의융합역량', ‘전문역량’, ‘시민의식’, ‘소통역량’, ‘협업역량’)으로 구성되었다. 새롭게 개발한 K대학교 학생용 핵심역량 진단도구의 양호도를 검증하기 위하여, 9월초에 학부생 전체를 대상으로 본검사를 실시하여(총 2,151명), 구인타당도와 신뢰도 등을 분석하였다. 또한 해당 진단도구의 변별타당도를 분석하기 위하여, 교육부와 한국직업능력개발원에서 개발하여 실시하며 일반적으로 많이 사용하고 있는 ‘대학생핵심역량진단(K-CESA)’을 10월초에 실시하였다 (총 133명). 주요 연구 결과를 요약하면 다음과 같다.
첫째, 개발한 K대학교 학생용 핵심역량 진단도구(총 60문항으로 구성)는 K대학교 학생의 핵심역량을 측정하기에 양호한 것으로 나타났다. 교수 7인과 업무담당자 2인으로 구성된 전문가협의회를 통해 문항의 내용타당도를 검토한 결과 최종문항의 내용타당도는 5점 만점에 평균이 4.33점이며 그 범위는 3.78~4.78로 나타나 양호하였다. 그리고 진단도구의 구인타당도를 검토하기 위하여 각 핵심역량별로 확인적 요인분석을 실시한 결과, 모형의 적합도 중 TLI는 0.912~962, CFI는 0.935~0.971, RMSEA는 0.052~0,068의 범위로 나타나 모두 양호하였다. K-CESA의 6가지 핵심역량과의 변별타당도를 검토하기 위하여 K-CESA를 활용한 진단자료와 상관분석을 실시한 결과 전체 총점의 상관은 통계적으로 유의하지 않았으며, 개별 핵심역량들 간의 상관도 –0.016~0.357로 대체로 낮아 변별타당도가 양호한 수준이었다. 아울러 해당 진단도구의 신뢰도(Cronbach α)는 0.956으로 높게 나타났고, 5가지 핵심역량별 신뢰도의 범위도 0.816~0.882로 높게 나타나 양호하였다.
둘째, K대학교 학생의 전체 핵심역량은 5점 만점에 3.80점으로 나타났고, 5가지 핵심역량별 범위는 3.67~4.00으로 나타났다. 전공별 5개의 학문분야(‘인문학’, ‘사회과학’, ‘자연과학’, ‘응용과학’, ‘예술･체육’) 에 따라 분석한 결과 전체 핵심역량은 통계적으로 유의한 차이가 나타나지 않았으나, ‘전문역량’에 있어 예술･체육 전공 학생들의 핵심역량이 자연과학 전공 학생의 핵심역량보다 통계적으로 유의하게 높았고, ‘소통역량’에 있어 인문학 전공 학생들의 핵심역량이 자연과학 전공 학생의 핵심역량보다 통계적으로 유의하게 높았다. 4개 학년별 전체 핵심역량 수준은 통계적으로 유의한 차이가 나타나지 않았으나, 핵심역량별로 분석할 경우 ‘창의융합역량’과 ‘시민의식’에서 통계적으로 유의한 차이가 나타났다. 성별에 따라 분석한 결과 전체 핵심역량은 남학생이 여학생보다 통계적으로 유의하게 높았고(t=8.49, p<0.001), 핵심역량별로 분석할 경우 '창의융합역량'과 ‘전문역량’, ‘협업역량’에 있어 남학생이 여학생보다 통계적으로 유의하게 높게 나타났다. 아울러 전체 핵심역량에 대한 잠재프로파일분석을 실시한 결과 ‘우수’, ‘보통’, ‘미흡’의 3개 집단으로 분류되었고, 학문분야별 및 성별에 따른 집단별 분포에는 통계적으로 유의한 차이가 나타났고, 학년에 따른 집단별 분포 차이는 통계적으로 유의하지 않았다.
이 연구에서 개발한 K대학교 학생용 핵심역량 진단도구는 양호한 것으로 나타났으나 개발한 진단도구가 자기보고식 척도이고 검사에 응한 학생 수가 다소 제한적이었다는 점 등에서 결과의 해석과 일반화에 유의할 필요가 있다. 향후 대학생들의 핵심역량을 진단함에 있어서 관찰형이나 수행형 척도를 활용하는 등 진단방식을 다양화하고, 핵심역량과 그 진단의 중요성 등에 대한 홍보를 강화하거나 참여에 따른 인센티브를 제공하는 등 더 많은 학생들이 응답할 수 있도록 노력한다면, 해당 대학의 역량기반 교육의 효과를 보다 종합적이고 체계적으로 파악할 수 있을 것이다.

목차 (Table of Contents)

• Ⅰ. 서론 1
• 1. 연구의 필요성 및 목적 1
• 2. 연구 문제 4
• Ⅱ. 이론적 배경 5
• 1. 대학생의 핵심역량 5
• 가. 핵심역량 5
• 나. 대학생의 핵심역량 18
• 다. K대학교의 핵심역량 20
• 2. 대학생 핵심역량 진단도구 24
• 가. 국내 주요 대학교의 핵심역량과 진단도구 24
• 나. 생애역량 관점에서 대학생 대상 핵심역량 진단도구 29
• Ⅲ. 연구 방법 및 절차 33
• 1. 연구 대상 33
• 가. 측정도구 개발을 위한 예비검사 대상 33
• 나. 핵심역량 진단을 위한 본검사 대상 34
• 다. 변별타당도 검증을 위한 K-CESA 대상 35
• 2. 연구절차 36
• 3. 자료 분석 방법 39
• Ⅳ. 대학생용 핵심역량 진단도구 개발 및 타당화 41
• 1. K대학교 학생용 핵심역량 진단도구 개발 41
• 가. 이론적 탐색을 통한 하위영역 설정 및 초기문항 개발 43
• 나. 전문가협의회를 통한 내용타당성 검토 및 예비문항 선정 51
• 다. 예비검사 결과 분석을 통한 본검사 문항 선정 63
• 2. 대학생 핵심역량 진단도구 타당화 76
• 가. 내용타당도 76
• 나. 구인타당도 78
• 다. 변별타당도 검증 91
• 라. 신뢰도 96
• Ⅴ. 대학생 핵심역량 수준 97
• 1. K대학교 핵심역량의 전반적 수준 97
• 가. 기술통계 분석 97
• 나. 핵심역량 간의 상관분석 99
• 2. 응답자 특성별 핵심역량 수준의 차이 100
• 가. 학문분야별 핵심역량 수준 차이 검증 100
• 나. 학년별 핵심역량 수준 차이 검증 105
• 다. 성별 핵심역량 수준 차이 검증 107
• 3. K대학교 학생의 핵심역량 수준 잠재프로파일 분석 109
• 가. 잠재집단의 수 109
• 나. 잠재집단의 특성 112
• 다. 응답자 특성에 따른 잠재집단의 분포 114
• Ⅵ. 요약 및 논의 117
• 1. 요약 117
• 2. 논의 및 제언 119
• 참 고 문 헌 123
• [부록 1] K대학교 학생용 핵심역량 진단도구(최종) 143
• [부록 2] Mplus를 이용한 LPA의 명령문 예시 148
• [부록 3] 2017학년도 ACE+ 선정 대학교의 핵심역량 149
• Abstract 161

참고문헌 (Reference)

• 1 김양분, 최인희, 정승은, 박현정, 박경호, 남궁지영, "2016 KEDI 학생역량 조사 연구", 한국교육개발원 연구보고 RR2016-13, 2016
• 2 김용수, 장경원, 이병량, 유현아, "경기대학교 핵심역량 연구보고서", 경기대학교, 2015
• 3 이화선, 최인수, "대학교양교육에서의 창의성 교육의 방향", 창의력교육연구, 14(2), 1-7, 2014
• 4 박은혜, 조운주, "유치원 초임교사 핵심역량 구인타당화 연구", 육아지원연구, 10(1), 107-131, 2015
• 5 박상용, "5년만에 바뀐 인재상, 도전정신보다 소통･협력.", 한국경제신문, 2018.08.28. https://www.hankyung.com/economy/article/201808 2720901, 2018
• 6 김대중, 이희애, 김수동, "대학 자체 진단 도구와 K-CESA 연계 활용 방안 연구", 한국핵심역량교육학회 학술대회지, 4, 5-23, 2018
• 7 이화선, 표정민, 최인수, "창의적 문제해결 프로파일 검사의 개발 및 타당화", 영재교육연구, 24(5), 733-755, 2014
• 8 중앙공무원교육원, "공직적격성평가(PSAT), 시행 5년의 점검과 발전방향 모색", 공무원HRD, 57, 80-83, 2010
• 9 노윤신, 리상섭, "국내 4년제 대학교 대학생의 역량모델 구축 사례: D여대를 중심으로", 기업교육과인재연구, 5(1). 79-101, 2013
• 10 김민희, 최정윤, 최보금, 조옥경, 임후남, 이지은, 김혜진, 김은영, 김시진, "대학의 교수･학습 질 제고 전략 탐색 연구(Ⅴ) – 교수･학습 역량진단 체제 확립", 한국교육개발원 연구보고서 RR-12, 2017
• 11 Geiser, C., "Datenanalyse mit Mplus Eine Anwendungsorientierte Einfuhrung. Wiesbaden: Springer VS Verlag. 김진현, 한지나 역(2019) Mpuls를 이용한 데이터 분석.", 서울: 학지사, 2011
• 12 Kline, R. B., "Principles and practice of structural equation modeling, 2nd ed. NY: Guilford Publication, Inc. 이현숙, 김수진, 전수현 역(2013). 구조방정식 모형: 원리와 적용.", 서울: 학지사., 2005
• 13 Wilson, M. R., "Constructing measures: An item response modeling approach. NY: Routledge. 백순근, 이용상, 신동광, 이문수, 전유아 역 (2018) 과정중심 평가 도구 개발을 위한 문항반응모형을 적용한 척도개발.", 서울: 한국문화사., 2010