수능 영어 듣기평가 변화 분석 : 발화속도와 언어적 요소

국문 초록 (Abstract)

본 연구는 전체 25개 학년도 대학수학능력시험(이하 수능) 영어 듣기문항의 언어학적 특징과 발화길이, 그리고 발화속도를 수치화하여 변화양상을 분석하는데 목적이 있다. 변화를 보인 언어적 요소의 지표(기초 산출치, 어휘정보 및 다양성, 통사적 복잡성 및 이독성, 응집성)는 실제 학생들이 참여한 2001학년도와 2013학년도 결과 값을 기준으로 면밀히 분석하였으며, 이는 추후 수능 문항의 개발과 개선, 그리고 수업현장의 실제적 자료의 선정을 위한 객관적 자료로 참고 될 수 있다. 1994학년도부터 현재에 이르기까지 25년 간 실시되고 있는 수능 영어영역은 문항 구성이나 배점 등의 형식적인 유형만 조금씩 바뀌었을 뿐, 듣기평가에 사용되는 음성파일의 발화속도에는 거의 변함이 없다. 그리고 언어학적 특징들도 읽기지문과 비교하였을 때, 상당히 쉬운 수준에 머물러있다. 1997년부터 초등학교에서 영어교육이 실시되면서 조기교육이 보편화되고, 각종 미디어의 발달로 실제적인 영어에 노출되어 온 요즘 학생들에게는 시험상황이라는 특수성을 감안한다 하더라도 인위적으로 낮춘 속도나 단어 수준은 부자연스러울 뿐만 아니라, 듣기의 중요성마저 깨닫지 못하게 할 뿐이다. 실생활과 가까운 자료로 교육하고 평가하겠다는 정부의 영어교육과정계획에도 불구하고 이를 가장 잘 반영해야 하는 수능 듣기평가에서는 오히려 비정상적으로 느린 속도의 말하기 자료를 사용하고 있고, 같은 영역 내 읽기 지문의 수준보다 더 쉬운 단어들로 듣기문항을 출제하고 있는 것이다. 이러한 현실의 문제점을 파악하고, 객관적 수치를 근거로 한 자료를 제시함으로써 문제점 해결의 근거와 참고 자료를 제시하고자 다음과 같은 연구를 진행하였다. 우선, 언어적 특징을 수치화하기 위해 언어분석 프로그램인 코메트릭스를 사용하였고, 발화길이 측정에는 프라트와 워드 프로그램을, 발화 속도 측정에는 엑셀을 사용하였다. 변화를 보인 특정 언어적 요소들에 대하여 심층 분석을 진행하였으며, 이를 위해 학생들에게 덜 친숙하면서도 시험 간 적정한 시기적 차이를 가지는 2001학년도와 2013학년도 수능 영어 듣기문항을 선정하였다. 치러진 2회분의 시험 결과는 각각 신뢰도 검사를 진행한 뒤, 두 회 차 간 평균 점수 차의 유의확률을 확인하기 위해 대응표본 t검정(paired sample t-test)을 실시하였다.
25년간의 수능 영어 듣기평가 문항을 대상으로 발화길이, 발화속도 그리고 언어적 요소 측면에서 분석 한 결과, 전체적인 난이도와 응집성, 그리고 발화길이가 증가하고 있음을 확인할 수 있었다. 그러나 발화속도는 앞선 수치들과 함께 증가하지 않고, 유지되거나 약간 감소하는 추세임을 알 수 있었다. 또한, 수능 영어 듣기평가지문에 사용된 어휘의 난이도가 증가하는 것은 사실이지만, 읽기지문보다 현저히 낮은 수준에 머물러있는 실정임을 알 수 있었다. 이는 발화속도와 어휘수준은 물론, 전반적인 듣기문항이 상향조정 될 필요가 있음을 시사한다. 따라서 교육 현장에서는 학생들이 다양한 분야의 어휘들과 현지 발화속도에 준하는 현실성 있는 자료에 노출 될 기회를 충분히 제공해 줄 필요가 있다. 그리고 이를 통해, 더욱 진정성 있고 실제적인 듣기의 학습 및 평가가 이루어질 수 있을 것으로 기대해 본다.

다국어 초록 (Multilingual Abstract)

The purpose of this study is to examine the changing patterns of linguistic features, speech length and speech rate shown in English listening items in Korean College Scholastic Ability Test (CSAT). The difficulty and speech length of listening items in the CSAT have increased over 25 years while speech rate have shown rather static pattern. Linguistic features, speech length, and speech rate of the listening items from the 1994 to 2018 academic years were calculated and presented numerically. High school second graders participated in 2001 and 2013 CSAT listening tests, with about 10 days of time interval, and the results were used for the deeper analysis on the linguistic features that showed different changing patterns.
Coh-Metrix was used to measure the listening items’ linguistic features and to present them as numerical figures. For the calculation of the speech rate and length, Praat, MS Word and MS Excel were used. The reliabilities of the two tests, which students actually took, were measured and then the Paired Sample t-test was conducted on them to check the statistical significance.
The major finding of the analysis that the degree of difficulty, cohesion, speech length of the test items have in general been increased while the speech rate has been static or somewhat decreased. And some of the features (Familiarity, Word frequency, FKGL and Flesch Reading Ease) were found to be increasing compared to the previous years, but still they are far lower than that of reading items. This indicates that the overall levels of vocabulary and speech rate need to be more challenging and authentic..
Once English was the ultimate goal of learning English but nowadays, it is nothing but a means of communication. So the CSAT which is one of the most influential tests in Korea, has a big responsibility to evaluate what it is intended to measure. But the result of this thesis shows that English listening items in the test need to be fixed in many aspects. In addition, the results also indicates that the usage of authentic materials in English listening classes is urgent while waiting for the changes to be made on the listening items in the CSAT. Therefore, English classes should be the time and place where students can experience the actual and authentic materials so that they can apply what they learned to the real situations they will face. And I hope the results of this study could be some help in developing CSAT listening items and choosing appropriate level of authentic materials for listening classes.

목차 (Table of Contents)

• 제1장 서론 1
• 1.1 연구의 배경 및 필요성 1
• 1.2 연구의 목적 및 의의 4
• 1.3 논문의 구성 5
• 제2장 이론적 배경 7
• 2.1 듣기 7
• 2.1.1 듣기의 정의 및 중요성 7
• 2.1.2 듣기에 영향을 미치는 요인 10
• 2.2 듣기평가 13
• 2.2.1 수능 영어영역 특징 13
• 2.2.2 수능 영어영역 듣기문항 선행연구 15
• 2.3 코메트릭스 관련 선행 연구 18
• 제3장 연구 설계 24
• 3.1 연구 문제 24
• 3.2 연구 대상 25
• 3.2.1 수능 영어영역 듣기문항 25
• 3.2.2 듣기평가 참여자 26
• 3.3 연구 도구 26
• 3.3.1 언어적 요소 분석도구 26
• 3.3.2 발화길이 및 속도 분석도구 31
• 3.4 연구 분석절차 32
• 3.5 연구 분석방법 34
• 3.5.1 언어적 요소 분석방법 34
• 3.5.2 발화길이 및 속도 분석방법 35
• 3.5.3 듣기평가 분석방법 36
• 제4장 연구 결과 및 분석 37
• 4.1 언어적 요소 연구결과 37
• 4.1.1 기초 산출치 37
• 4.1.2 어휘다양성 및 어휘정보 40
• 4.1.3 통사적 복잡성 및 이독성 44
• 4.1.4 응집성 46
• 4.2 발화길이 및 속도 49
• 4.2.1 발화길이 분석결과 49
• 4.2.2 발화속도 분석결과 51
• 4.3 듣기평가시행 분석결과 52
• 제5장 논의 및 시사점 54
• 5.1 연구결과 요약 및 논의 54
• 5.1.1 기초 산출치, 발화길이, 발화속도 55
• 5.1.2 어휘다양성 및 어휘정보 56
• 5.1.3 통사적 복잡성 및 이독성 58
• 5.1.4 응집성 60
• 5.2 교육적 함의 60
• 5.3 연구의 제한점 및 후속 연구를 위한 제언 62
• 5.4 결론 63
• 참고문헌 65
• 부록1-1 연도별 기초 산출치 지표 값 76
• 부록1-2 연도별 기초 산출치 그래프 77
• 부록2-1 연도별 어휘정보 및 다양성 지표 값 78
• 부록2-2 연도별 어휘정보 및 다양성 그래프 79
• 부록2-3 연도별 어휘정보 및 다양성 그래프 80
• 부록2-4 연도별 어휘정보 및 다양성 그래프 81
• 부록3-1 연도별 통사적 복잡성 및 이독성 지표 값 82
• 부록3-2 연도별 통사적 복잡성 및 이독성 그래프 83
• 부록3-3 연도별 통사적 복잡성 및 이독성 그래프 84
• 부록4-1 연도별 응집성 지표 값 85
• 부록4-2 연도별 응집성 그래프 86
• 부록4-3 연도별 응집성 그래프 87
• 부록5-1 연도별 발화길이(지문길이,지속시간)그래프 88
• Abstract 89