대학생들의 온라인 동료 피드백 코멘트 분석 (Analysis of Online Peer Feedback Comments by College Students)

서지정보

· 발행기관 : 중앙어문학회
· 수록지 정보 : 어문론집 / 89권 / 463 ~ 490페이지
· 저자명 : 정윤희, 김미선

초록

본 연구에서는 대학생들의 동료 피드백 코멘트를 의미 네트워크 분석 방법으로 고찰하여, 글쓰기에서의 동료 평가 양상을 살펴보는 데 목적이 있다. 대학생들이 동료 피드백에서 중요하게 언급하는 요소가 무엇인지 파악하고, 피드백에서 자주 사용된 평언을 분석하여 온라인 동료 합평이 효과적으로 이루어질 수 있는 방안을 모색하고자 한다. 궁극적으로는 표준화된 피드백 문구를 마련하여 동료 피드백의 질을 높이고, 온라인상에서 학생들이동료 피드백을 쉽게 할 수 있는 시스템을 마련하는 데 기초 자료로 활용하고자 한다.
글의 형식에 대한 평가 요소를 파악하기 위하여 근접중심성과 매개중심성 지표를 사용하여 분석한 결과, ‘단락’이 근접중심성과 매개중심성에서 가장 높은 비중을 차지하였다.
학생들이 동료 글을 평가할 때, 단락의 단위로 접근하며 단락의 구조나 형식을 가장 중요하게 생각하고 있다고 해석할 수 있다.
글의 내용에 대한 평가 요소를 파악하기 위하여 사용된 단어의 빈도, 근접중심성, 매개중심성 지표를 분석하였다. 근접중심성이 가장 높은 단어는 ‘주장’, 매개중심성이 가장 높은 단어는 ‘글’이었으며 ‘제시’, ‘근거’, ‘생각’ 등도 근접중심성이 높아 전체 의미구조에서핵심적인 역할을 하는 것으로 나타났다.
후속 연구를 통해 교수자의 평가 코멘트와 학생들의 평가 코멘트를 비교ㆍ검토하는 작업도 의미가 있으리라고 본다. 또한, 교수자나 학습자들이 자주 지적하는 내용이나 반복적으로 표현하는 문구 등은 유형화하여 피드백 언어로 체계화한다면 온라인 피드백의 자동화 시스템에서 활용도가 높을 것이다.

영어초록

The purpose of this study was to examine peer evaluation patterns in writing, through the examination of peer feedback comments from college students as a semantic network analysis method. It aimed to find ways to effectively conduct online peer review by identifying the factors that college students considered important in peer feedback, and by analyzing their frequently used comments.
Ultimately, a standardized feedback phrase was prepared in order to improve the quality of peer feedback and ultimately use it as basic data to automate feedback.
The analysis used closeness centrality and betweenness centrality as indicators to understand the evaluation factors for the format of the column. As a result, “short circuit” occupied the highest proportion of closeness centrality and betweenness centrality. When evaluating peer posts, the interpretation was that students approached them in units of paragraphs and considered the structure or form of paragraphs as the most important.
To understand the evaluation factors for the contents of the column, the indicators of frequency, closeness centrality, and betweenness centrality of the words used were analyzed. The word with the highest closeness centrality was “assertion” and the word with the highest betweenness centrality was “writing.” The words “presentation,” “ground,” and “thinking” were also found to play a key role in the overall semantic structure.
A meaningful endeavor would be to compare and review the instructors’ and students’ evaluation comments through a follow-up study. In addition, if the content frequently pointed out by instructors or learners or repeated phrases are categorized and systematized into feedback languages, online feedback will be highly utilized in the automation system.

참고자료

· 없음