한국어 말하기 평가 구인에 대한 교사 인식 비교 분석 연구
저자
발행사항
서울 : 韓國外國語大學校 大學院, 2021
학위논문사항
학위논문(석사) -- 韓國外國語大學校 大學院 국어국문학과 2021. 2
발행연도
2021
작성언어
한국어
주제어
DDC
895.1 판사항(22)
발행국(도시)
서울
기타서명
A comparison study of teacher perceptions on the construct of Korean speaking test
형태사항
viii, 127 p. : 삽도 ; 26 cm
일반주기명
한국외국어대학교 논문은 저작권에 의해 보호받습니다.
지도교수: 홍종명
참고문헌: p. 104-109
UCI식별코드
I804:11059-200000372373
소장기관
The purpose of this study is to identify the differences in perception on the importance of assessment constructs for the Korean speaking proficiency test depending on the factors such as the assessment target and the rater's career background.
Speaking proficiency test evaluates the test taker's speaking ability by giving scores based on the assessment criteria for his or her discourse while performing the given task. This performance-oriented assessment of speaking proficiency was first developed in the 1960s when there was a rising prominence of communication-oriented language use along with the idea that the assessment should be done in a practical and direct way. Since then, speaking has been recognized as a visible and basic communicative language skill and the discussion for the importance of speaking education and speaking assessment in the field of Korean language education began.
When the speaking assessment is conducted in a performance-oriented way, it includes the examinee's knowledge about the assessment as well as the process of performing the tasks and thus, it requires a reference system that can evaluate the taker's various and complex responses. In this regard, the most common approach is to establish appropriate assessment constructs, select and train professional raters. However, even if the raters receive professional training in order to improve their expertise in rating, the resulting scores may differ depending on each rater's attitude towards the assessment constructs. There are various factors that can be involved in the course of rating the speaking proficiency tests and these factors affect the progress of the rating, which is the main cause for the difference in assessment results among the raters.
In speaking assessment, it is very important to clearly set up the constructs since the results may vary greatly depending on them. Therefore, if the assessment constructs, which represent each element of Korean speaking ability, are accurately established, it will be possible to set the educational contents and teaching direction to improve the learner's Korean speaking proficiency. Therefore, this study aims to understand how the influence of the rater affects the weighting calculation of assessment constructs by dividing the study participants into experienced teachers and pre-service teachers. Furthermore, this study attempts to examine whether there is a difference in importance by assessment constructs in accordance with the purpose of learning Korean and the types of the assessment tasks through teacher perception surveys.
To this end, the assessment constructs for the speaking proficiency tests and the factors influencing the process of rating the speaking assessments were first reviewed as a theoretical background of this study. In terms of other foreign language speaking proficiency tests, the assessment constructs for the English, Japanese, and Chinese speaking tests were compared and analyzed. In case of Korean speaking proficiency test, the assessment constructs proposed in previous studies were thoroughly analyzed by their similarities and differences and based on the analysis, eight assessment constructs and sub-factors for each construct were selected as a subject for this study.
Based on the selected eight assessment constructs and their sub-factors, the Delphi technique was used to find out the relative importance of the assessment constructs by rater's influence, learning purpose, and type of the assessment tasks. The first questionnaire consists of five short answer questions in which 85 experienced teachers and 20 prospective teachers participated. Of these five questions, all respondents presented various opinions to the two questions asking about the problem of the current assessment constructs and the need for additional constructs, and hence the second questionnaire was designed based on these responses.
The follow-up survey was conducted and 105 respondents likewise participated in the second questionnaire. Unlike the first questionnaire in which only assessment constructs were presented, sub-factors for each assessment constructs were added in the second questionnaire to rate their importance and all questions were closed-type questions using a 5-point Likert scale. The second Delphi survey was analyzed by measuring the CVR value, first suggested by Lawshe(1975), together with examining whether there is a difference in perception of importance by assessment constructs depending on the existence of career experience, the duration of teaching, and the type of institution. As a result, all groups presented differences in the importance of the assessment constructs and their sub-factors, excluding sociolinguistic ability, and thus, the it was confirmed that the perception on the importance of assessment constructs for the Korean speaking proficiency test may vary in accordance with the rater and the asssessment target.
본 연구는 평가 대상이나 채점자의 배경 요인 등에 따라 한국어 말하기 평가의 평가 구인별 중요도 인식의 차이가 있음을 밝히는 데 그 목적이 있다.
말하기 능력 평가는 수험자가 주어진 평가 과제를 수행하면서 발화한 담화에 대해 채점자가 평가 준거를 바탕으로 점수를 부여하는 것이다. 이러한 수행 중심의 말하기 능력 평가는 1960년대 의사소통 중심의 언어 사용 중요도 향상과 함께 평가 역시 실제적이고 직접적인 방법으로 이루어져야 한다는 논의에서 시작되었다. 즉, 말하기 영역을 가시적이고 기본적인 의사소통적 언어 영역으로 인식하고 한국어 교육에서도 말하기 교육과 말하기 평가에 대한 중요성을 논의하기 시작했다.
말하기 평가가 수행 중심의 평가로 진행될 때는 평가에 관한 수험자의 지식과 수행 과정을 포함하여 평가한다는 의미를 갖게 되며 다양하고 복잡한 형태로 나타나는 수험자의 응답을 평가할 수 있는 준거 체계를 요구하게 된다. 이와 관련하여 가장 일반적인 접근 방법은 평가 구인을 설정 및 전문적인 채점자 선정 및 양성이다. 그러나 채점자가 채점에 채점자가 채점에 관한 전문성을 위해 관련된 훈련을 받는다고 해도 채점자의 인식의 차이에 따라 산출되는 점수가 상이할 수 있다. 말하기 평가에서 채점 과정에 개입할 수 있는 요인들은 다양하다. 이 요인들은 채점의 진행에 영향을 미치며, 이는 채점자 사이의 상이한 평가 결과가 나타나게 하는 주된 원인이 된다.
말하기 평가에 있어서 구인의 명확한 설정은 매우 중요한데, 이는 평가 구인에 따라 평가 결과가 상이하게 나타날 수 있기 때문이다. 따라서 한국어 말하기 능력을 이루는 각각의 요소인 평가 구인이 명확히 설정되어 있으면 학습자의 한국어 말하기 능력 향상을 위해 교육해야 하는 내용과 그 방향을 설정할 수 있을 것이다. 따라서 본 연구는 채점자 영향이 평가 구인의 가중치 산정에 어떤 영향을 미치는지 크게 경력 교원과 예비 교원으로 나누어 파악하고자 하며, 한국어 학습 목적 및 과제 유형에 따라서도 평가 구인별 중요도의 차이가 나는지 교사 인식 조사를 통해 살펴보고자 한다.
이를 위해 먼저 본 연구의 이론적 기반이 되는 말하기 평가 구인 및 말하기 평가의 채점 과정에 영향을 주는 요인들을 살펴보았다. 외국어 말하기 평가로는 영어, 일본어, 중국어 말하기 평가를 살펴보았으며 각 시험별 평가 구인을 비교·분석하였고, 한국어 말하기 능력 평가 구인의 경우에는 기존의 선행연구를 검토하여 제시된 구인의 공통점 및 차이점을 분석하였다. 그리고 이를 바탕으로 본고에서 제시할 8가지의 평가 구인 및 평가 구인별 하위 요인들을 선정하였다.
선정된 8개의 구인 및 세부 항목을 바탕으로 채점자 영향, 학습 목적, 평가 과제 유형별 평가 구인의 상대적 중요도를 알아보기 위하여 델파이 기법을 사용하였다. 1차 설문은 주관식 문항으로 구성되어 있으며 경력 교원 85명, 예비 교원 20명이 설문에 참여하였다. 1차 설문 문항은 총 5가지로 구성되어 있었는데 평가 구인의 문제점과 추가적으로 필요한 구인에 대해 묻는 2가지의 문항에 응답자 전원이 다양한 의견을 제시하여 이를 바탕으로 2차 설문 문항을 구성하였다.
이후 진행된 2차 설문은 1차 설문과 마찬가지로 105명의 응답자가 참여하였다. 평가 구인만 제시된 1차 설문과 달리 2차 설문에서는 평가 구인별 세부 항목의 중요도를 설문 문항에 추가하였으며 모든 문항은 5점 리커트 척도를 사용한 폐쇄형 문항이다. 2차 델파이 조사는 Lawshe(1975)에 의해 처음으로 제시된 CVR 값을 측정하여 분석하였으며, 경력 유무, 교육 기간, 기관 유형에 따라서도 구인별 중요도 인식의 차이가 있는지 살펴보았다. 분석 결과, 사회언어학적 능력을 제외한 평가 구인 및 구인별 세부 요인의 중요도가 집단별로 모두 상이하다는 것을 알 수 있었으며 이를 통해 한국어 말하기 능력 평가 구인의 중요도는 평가자와 평가 대상에 그 중요도 인식의 차이가 나타난다는 것을 확인하였다.
분석정보
서지정보 내보내기(Export)
닫기소장기관 정보
닫기권호소장정보
닫기오류접수
닫기오류 접수 확인
닫기음성서비스 신청
닫기음성서비스 신청 확인
닫기이용약관
닫기학술연구정보서비스 이용약관 (2017년 1월 1일 ~ 현재 적용)
학술연구정보서비스(이하 RISS)는 정보주체의 자유와 권리 보호를 위해 「개인정보 보호법」 및 관계 법령이 정한 바를 준수하여, 적법하게 개인정보를 처리하고 안전하게 관리하고 있습니다. 이에 「개인정보 보호법」 제30조에 따라 정보주체에게 개인정보 처리에 관한 절차 및 기준을 안내하고, 이와 관련한 고충을 신속하고 원활하게 처리할 수 있도록 하기 위하여 다음과 같이 개인정보 처리방침을 수립·공개합니다.
주요 개인정보 처리 표시(라벨링)
목 차
3년
또는 회원탈퇴시까지5년
(「전자상거래 등에서의 소비자보호에 관한3년
(「전자상거래 등에서의 소비자보호에 관한2년
이상(개인정보보호위원회 : 개인정보의 안전성 확보조치 기준)개인정보파일의 명칭 | 운영근거 / 처리목적 | 개인정보파일에 기록되는 개인정보의 항목 | 보유기간 | |
---|---|---|---|---|
학술연구정보서비스 이용자 가입정보 파일 | 한국교육학술정보원법 | 필수 | ID, 비밀번호, 성명, 생년월일, 신분(직업구분), 이메일, 소속분야, 웹진메일 수신동의 여부 | 3년 또는 탈퇴시 |
선택 | 소속기관명, 소속도서관명, 학과/부서명, 학번/직원번호, 휴대전화, 주소 |
구분 | 담당자 | 연락처 |
---|---|---|
KERIS 개인정보 보호책임자 | 정보보호본부 김태우 | - 이메일 : lsy@keris.or.kr - 전화번호 : 053-714-0439 - 팩스번호 : 053-714-0195 |
KERIS 개인정보 보호담당자 | 개인정보보호부 이상엽 | |
RISS 개인정보 보호책임자 | 대학학술본부 장금연 | - 이메일 : giltizen@keris.or.kr - 전화번호 : 053-714-0149 - 팩스번호 : 053-714-0194 |
RISS 개인정보 보호담당자 | 학술진흥부 길원진 |
자동로그아웃 안내
닫기인증오류 안내
닫기귀하께서는 휴면계정 전환 후 1년동안 회원정보 수집 및 이용에 대한
재동의를 하지 않으신 관계로 개인정보가 삭제되었습니다.
(참조 : RISS 이용약관 및 개인정보처리방침)
신규회원으로 가입하여 이용 부탁 드리며, 추가 문의는 고객센터로 연락 바랍니다.
- 기존 아이디 재사용 불가
휴면계정 안내
RISS는 [표준개인정보 보호지침]에 따라 2년을 주기로 개인정보 수집·이용에 관하여 (재)동의를 받고 있으며, (재)동의를 하지 않을 경우, 휴면계정으로 전환됩니다.
(※ 휴면계정은 원문이용 및 복사/대출 서비스를 이용할 수 없습니다.)
휴면계정으로 전환된 후 1년간 회원정보 수집·이용에 대한 재동의를 하지 않을 경우, RISS에서 자동탈퇴 및 개인정보가 삭제처리 됩니다.
고객센터 1599-3122
ARS번호+1번(회원가입 및 정보수정)