프로그램의 논리주도적 평가준거체제 개념모형에 관한 고찰; 청소년활동 프로그램을 중심으로 = Conceptual Framework of Theory-Driven Evaluative Criteria Set : Choosing Youth Activity Program

다국어 초록 (Multilingual Abstract)

This study aims to investigate a conceptual framework of theory-driven evaluative criteria set for the program which is validated from theoretical points of view. Specifically, this study tries to answer the following questions. How should we develop appropriate categories and subsequent items for youth activity program evaluation? As a theoretical validation process, conceptual framework for evaluation is developed based upon the program theory. In order to construct evaluative criteria set, matrix is also developed. The construction of theory-driven evaluative criteria set is an on-going process and this study hopefully contributes to this process by adopting theoretical framework for not only youth activity programs but any other programs evaluation. This study recognizes the importance of representation of various perspectives from major stakeholders in youth program evaluation when applying evaluative criteria set. Finally, this study emphasizes that conceptual framework of the criteria set developed here is very comprehensive in its scope, which means that people in youth programs or evaluation study could use the items with high level of flexibility depending upon their specific contexts as well as interests.

국문 초록 (Abstract)

이 연구의 목적은 이론적으로 타당화된 논리주도적 평가준거체제를 개발하기 위한 개념 틀을 제시하는 것이다. 연구목적을 달성하기 위한 연구문제는 프로그램의 논리주도적 평가준거체제의 영역은 어떻게 구성되어야 하는 가를 청소년활동 프로그램에 적용하여 이론적 개념 틀로 알아보는 것이다. 평가준거체제 개념모형 고찰을 위한 이론적 타당화 과정으로서 프로그램논리를 적용한 이론적 개념모형을 구안하고 평가준거체제 개발을 위한 메트릭스를 작성하였다. 이 개념모형과 메트릭스를 활용하여 논리주도적 평가준거체제의 영역설정을 위한 이론적 근거를 제시하였다. 따라서 이 연구는 평가대상 프로그램의 논리를 파악하여 맞춤평가를 위한 이론적 근거를 제공하는 평가준거체제의 개념 틀을 개발하였다는 점에서 의의가 있다. 또한 평가준거체제를 활용하는데 있어서는 프로그램의 특성, 평가목적에 따라 평가핵심관련자의 다양한 관점을 반영하여 필요한 준거를 융통성 있게 선별하여 활용할 수 있도록 개발된 종합적인 평가준거체제의 개념모형이라는 점에서 의의가 있다.

참고문헌 (Reference)

• 1 배호순, "학교교육과정 평가설계의 합리화를 위한 프로그램논리의 적용" 한국교육평가학회 16 (16): 1-22, 2003
• 2 배호순, "프로그램논리에 입각한 학교교육과정 평가논리체계의 정립" 15 (15): 43-68, 2002b
• 3 배호순, "평가의 원리" 원미사 1991
• 4 김진화, "청소년활동 프로그램 개발의 이해" 서울: 한국청소년개발원 2005
• 5 박성희, "청소년활동 프로그램 개발의 기초:프로그램 개발과 운영" 한국청소년개발원 1994
• 6 김정명, "청소년활동 동기부여방안 연구" 한국청소년연구원 1991
• 7 김경화, "청소년육성기금사업평가" 서울: 국가청소년위원회한국청소년개발원 2005
• 8 박영균, "청소년육성기금사업 성과평가 및 평가방안 연구" 서울: 문화관광부한국청소년개발원 2004
• 9 청소년위원회, "청소년위원회 법령집" 청소년위원회 2005
• 10 이광호, "청소년수련활동인증제연구" 서울:문화관광부 2004
• 11 문화관광부국립중앙청소년수련원, "청소년수련시설 청소년운영위원회 평가결과 보고서" 문화관광부국립중앙청소년수련원 2003b
• 12 문화관광부국립중앙청소년수련원, "청소년수련시설 청소년운영위원회 평가결과 보고서" 문화관광부국립중앙청소년수련원 2004c
• 13 문화관광부국립중앙청소년수련원, "청소년 수련시설 특성화프로그램 공모지원사업 선정평가 결과보고서" 문화관광부국립중앙청소년수련원 2004b
• 14 이광호, "우수 청소년 수련시설 선정인센티브 부여방안 연구" 서울: 한국청소년개발원 2000
• 15 문화관광부국립중앙청소년수련원, "시범청소년수련시설지정 및 인센티브 부여 사업결과 보고서" 문화관광부국립중앙청소년수련원 2002
• 16 김정주, "시범청소년수련시설 지정 및 인센티브부여 사업" 서울: 한국청소년개발원 2001
• 17 문화관광부국립중앙청소년수련원, "시범 청소년수련시설 지정 및 인센티브 부여 사업결과 보고서" 문화관광부국립중앙청소년수련원 2003a
• 18 문화관광부국립중앙청소년수련원, "시범 청소년수련시설 지정 및 인센티브 부여 사업결과 보고서" 문화관광부국립중앙청소년수련원 2004a
• 19 오혁진, "성인교육 프로그램에 대한 학습자의 평가준거 연구" 2000
• 20 김현철, "서울시 청소년활동프로그램 운영평가" 서울특별시한국청소년개발원 2005
• 21 이경상, "서울시 청소년활동프로그램 운영평가" 서울특별시한국청소년개발원 2004
• 22 변정현, "대학부설 평생교육기관의 교육서비스 마케팅 모형적용에 관한 연구" 2003
• 23 배호순, "논리주도평가의 이해와 활용 수업자료:Theory-Driven Evaluation" 2004
• 24 한국교육평가학회 편저, "교육평가 용어사전" 서울: 학지사 2004
• 25 배호순, "교육과정을 중심으로 한 프로그램논리패턴의 탐색" 15 (15): 1-25, 2002a
• 26 배호순, "교육과정 평가론" 서울: 교육과학사 2001
• 27 배호순, "교육과정 평가논리의 탐구" 서울: 교육과학사 2000
• 28 Benson, A.,, "Visions of Quality: How evaluators define, understand and represent program quality" USA: JAI 2001
• 29 Patton, M. Q, "Utilization-Focused Evaluation: The New Century Text" Thousand Oaks, CA: Sage 1997
• 30 Chen, "Using Theory to Improve Program and Policy Evaluations" 1992
• 31 Bickman, "Using Program Theory in Evaluation New Directions for Program Evaluation" Jossey-Bass 1987
• 32 Chen,H.T, "Theory-Driven Evaluations" Sage 1990
• 33 Rogers, P. J, "Program theory; Not whether program works, but how they work" Boston: Kluwer Academic 2000
• 34 Funnell, S, "Program Logic: An adaptable tool for designing and evaluating programs" 5-17, 1997
• 35 Fitzpatrick, J. L.,, "Program Evaluation: Alternatives Approaches and Practical Guides" NY: Longman 2004
• 36 Chen, H. T, "Practical program evaluation: Assessing and improving planning, implementation, and effectiveness" Sage publications 2005
• 37 Wholey, "New Directions for Program Evaluation" Jossey-Bass 7-92, 1987
• 38 Weiss, C. H, "Evaluation: Methods for Studying Programs and Policies" Upper Saddle, NJ: Prentice Hall 1998
• 39 Scriven, M, "Evaluation in the new millennium: The transdisciplinary vision" NJ: Lawrence Erlbaum Associates, Pub. 2003
• 40 Rossi, P. H.,, "Evaluation : A Systematic Approach" Thousand Oaks, CA: Sage 2004
• 41 House,E, "Evaluating with Validity" Sage 1980
• 42 Donaldson, S. I, "Evaluating Social Programs and Problems: Visions for the New Millennium" London: Lawrence Erlbaum Associates 2003