한국어 쓰기 자동 채점을 위한 언어 자질 탐색 연구
저자
발행사항
서울 : 연세대학교 대학원, 2023
학위논문사항
학위논문(박사) -- 연세대학교 대학원 , 한국학협동과정 한국어교육전공 , 2023.8
발행연도
2023
작성언어
한국어
주제어
발행국(도시)
서울
기타서명
An exploratory study on the language features for the automated scoring of Korean writing
형태사항
162 p. : 삽화(일부천연색) ; 26 cm
일반주기명
지도교수: 원미진
UCI식별코드
I804:11046-000000550553
소장기관
본 연구는 언어 평가 환경이 대규모 쓰기 평가에서의 채점자 신뢰성을 확보하고 효율성을 높이기 위해 자동 채점으로 전환되는 시대의 흐름을 반영하여 한국어 학습자의 쓰기 답안을 자동 채점할 때 점수에 영향을 미치는 언어 자질이 무엇인가를 탐색하기 위한 연구이다. 이에 한국어 학습자가 작성한 문어 평가 자료를 984편 수집하여 계량적으로 측정 가능한 언어 자질을 추출하고 이를 분석하는 동시에 이 자질들이 과제 유형별, 숙달도별로 점수 예측력에 영향을 미치는 중요도를 밝히고자 하였다.
본 연구에서는 선행 외국어 평가와 자동 채점 연구에서 채점 자질로 활용되고 있는 언어 자질들을 살펴보고 한국어 쓰기 능력에 영향을 미치는 언어 자질을 검토한 후, 본 연구의 분석 대상인 언어 자질을 결정하였다. 수집한 문어 자료는 형태소 분석, 오류 분석 등 전처리를 하였으며, 이를 바탕으로 언어 자질을 추출하고 분석 방법으로 랜덤 포레스트를 사용하여 언어 자질의 중요도를 과제, 언어, 내용의 세 가지 채점 영역으로 나누어 분석하였다.
그 결과 모든 과제 유형에서 과제 영역은 글의 길이 관련 언어 자질이, 언어 영역에서는 오류 관련 언어 자질이, 내용 영역에서는 글의 길이나 내용어 관련 언어 자질이 중요도가 높게 나타났으며, 과제 유형의 장르적 특성에 따라 과제 유형별로 언어 자질의 중요도의 정도에는 차이가 있었다. 숙달도별로는 초급 학습자, 중급 학습자의 글 역시 과제 영역에서는 글의 길이 관련 언어 자질이, 언어 영역에서는 어휘 다양도나 오류 관련 언어 자질이, 내용 영역에서는 내용의 풍부성 관련 언어 자질이 중요도가 높았음을 알 수 있었다. 다만 초급 학습자를 대상으로 한 설명하는 글의 경우, 중급 학습자를 대상으로 분석한 결과에 비해 상대적으로 문법 난이도나 연결어미, 전성어미와 같은 글의 조직 관련 언어 자질은 중요도가 높지 않았다. 이러한 결과를 바탕으로 점수 예측에 영향을 미치는 언어 자질의 중요도는 채점을 위한 기준과 과제 유형 및 평가 대상이 되는 학습자의 숙달도에 따라 달라질 수 있음을 알 수 있다.
영어 교육에서는 초기 자동 채점 연구부터 자동 채점에 적용 가능한 채점 자질에 대한 연구가 꾸준히 진행되어 온 반면, 국내의 자동 채점 연구는 초기 연구에서 문장 수준의 답안 채점에만 주목했다. 그러나 최근 연구는 인공지능 분야의 비약적인 발전에 따라 자동 채점 모델에 대한 연구도 활발히 진행되고 있다. 다만 아직까지는 점수에 영향을 미치는 패턴을 찾고 이를 학습하게 되는 대상인 채점 자질에 대한 연구는 아직 많지 않다. 그러나 딥러닝을 활용한 자동 채점 모델의 경우 방대한 데이터 구축이 필수적이며, 채점 결과에 대한 해석이 어렵다는 점에서 한계를 갖는다. 이러한 점을 고려할 때 비록 최근 인공신경망을 활용하는 딥러닝 방식이 가장 발전된 형태로 인식됨에도 불구하고 자동 채점 프로그램이 교육적으로 활용되기 위해서는 채점 과정에서 영향을 미칠 수 있는 채점 자질에 대한 탐색과 연구가 보완될 필요가 있다. 이러한 문제의식에서 출발한 본 연구는 학습자들이 사용한 어휘나 문법 등 계량적으로 측정 가능한 언어 자질을 추출하여 측정하고 분석함으로써 한국어 쓰기 채점 점수 예측에 영향을 주는 한국어 언어 자질의 중요도를 살펴보고, 한국어 서술형 문항의 자동 채점에의 적용 가능성을 확인함과 동시에 향후 자동 채점 결과에 대해 학습자에게 피드백을 제공할 수 있는 토대를 마련하였다는 점에서 의의가 있다.
분석정보
서지정보 내보내기(Export)
닫기소장기관 정보
닫기권호소장정보
닫기오류접수
닫기오류 접수 확인
닫기음성서비스 신청
닫기음성서비스 신청 확인
닫기이용약관
닫기학술연구정보서비스 이용약관 (2017년 1월 1일 ~ 현재 적용)
| 주요 개정내역 | 변경 사유 |
|---|---|
| · 수탁업체 콘소시엄 기관명 및 위탁기간 명시 | · 제6조(개인정보 처리업무의 위탁) 구체화 |
한국교육학술정보원은 정보주체의 자유와 권리 보호를 위해 「개인정보 보호법」 및 관계 법령이 정한 바를 준수하여, 적법하게 개인정보를 처리하고 안전하게 관리하고 있습니다. 이에 「개인정보 보호법」 제30조에 따라 정보주체에게 개인정보 처리에 관한 절차 및 기준을 안내하고, 이와 관련한 고충을 신속하고 원활하게 처리할 수 있도록 하기 위하여 다음과 같이 개인정보 처리방침을 수립·공개합니다.
주요 개인정보 처리 표시(라벨링)
목 차
제1조(개인정보의 처리 목적)
제2조(개인정보의 처리 및 보유 기간)
제3조(처리하는 개인정보의 항목)
제4조(개인정보파일 등록 현황)
제5조(개인정보의 제3자 제공)
제6조(개인정보 처리업무의 위탁)
제7조(개인정보의 파기 절차 및 방법)
제8조(정보주체와 법정대리인의 권리·의무 및 그 행사 방법)
제9조(개인정보의 안전성 확보조치)
제10조(개인정보 자동 수집 장치의 설치·운영 및 거부)
제11조(개인정보 보호책임자)
제12조(개인정보의 열람청구를 접수·처리하는 부서)
제13조(정보주체의 권익침해에 대한 구제방법)
제14조(추가적 이용·제공 판단기준)
제15조(개인정보 처리방침의 변경)
제1조(개인정보의 처리 목적)
제2조(개인정보의 처리 및 보유 기간)
3년
또는 회원탈퇴시까지5년
(「전자상거래 등에서의 소비자보호에 관한3년
(「전자상거래 등에서의 소비자보호에 관한2년
이상(개인정보보호위원회 : 개인정보의 안전성 확보조치 기준)
제3조(처리하는 개인정보의 항목)
제4조(개인정보파일 등록 현황)
개인정보파일 검색(privacy.go.kr)| 개인정보파일의 명칭 | 운영근거 / 처리목적 | 개인정보파일에 기록되는 개인정보의 항목 |
보유기간 | |
|---|---|---|---|---|
| 학술연구정보서비스 이용자 가입정보 | 한국교육학술정보원법 정보추제 동의 | 필수 | ID, 비밀번호, 성명, 생년월일, 신분(직업구분), 이메일, 소속분야, 웹진메일 수신동의 여부 | 3년 또는 탈퇴시 |
| 선택 | 소속기관명, 소속도서관명, 학과/부서명, 학번/직원번호, 휴대전화, 주소 | |||
제5조(개인정보의 제3자 제공)
제6조(개인정보 처리업무의 위탁)
제7조(개인정보의 파기 절차 및 방법)
제8조(정보주체와 법정대리인의 권리·의무 및 그 행사 방법)
제9조(개인정보의 안전성 확보조치)
제10조(개인정보 자동 수집 장치의 설치·운영 및 거부)
제11조(개인정보 보호책임자)
| 구분 | 담당자 | 연락처 |
|---|---|---|
| KERIS 개인정보 보호책임자 | 정보보호본부 안재호 |
- 이메일 : jinuk@keris.or.kr - 전화번호 : 053-714-0158 - 팩스번호 : 053-714-0195 |
| KERIS 개인정보 보호담당자 | 개인정보보호부 송진욱 | |
| RISS 개인정보 보호책임자 | 교육학술데이터본부 정광훈 |
- 이메일 : giltizen@keris.or.kr - 전화번호 : 053-714-0149 - 팩스번호 : 053-714-0194 |
| RISS 개인정보 보호담당자 | 학술진흥부 길원진 |
제12조(개인정보의 열람청구를 접수·처리하는 부서)
제13조(정보주체의 권익침해에 대한 구제방법)
제14조(추가적인 이용ㆍ제공 판단기준)
제15조(개인정보 처리방침의 변경)
자동로그아웃 안내
닫기인증오류 안내
닫기귀하께서는 휴면계정 전환 후 1년동안 회원정보 수집 및 이용에 대한
재동의를 하지 않으신 관계로 개인정보가 삭제되었습니다.
(참조 : RISS 이용약관 및 개인정보처리방침)
신규회원으로 가입하여 이용 부탁 드리며, 추가 문의는 고객센터로 연락 바랍니다.
- 기존 아이디 재사용 불가
휴면계정 안내
RISS는 [표준개인정보 보호지침]에 따라 2년을 주기로 개인정보 수집·이용에 관하여 (재)동의를 받고 있으며, (재)동의를 하지 않을 경우, 휴면계정으로 전환됩니다.
(※ 휴면계정은 원문이용 및 복사/대출 서비스를 이용할 수 없습니다.)
휴면계정으로 전환된 후 1년간 회원정보 수집·이용에 대한 재동의를 하지 않을 경우, RISS에서 자동탈퇴 및 개인정보가 삭제처리 됩니다.
고객센터 1599-3122
ARS번호+1번(회원가입 및 정보수정)