듀오링고의 미션은 세계 최고의 학습 툴을 개발해 누구나 사용할 수 있게 하는 거예요. 그렇다면 듀오링고 과정의 학습자들이 학습 목표를 달성하는지 어떻게 알 수 있을까요? 듀오링고의 연구팀에서 바로 이 일을 연구한답니다!

듀오링고는 앱의 효과를 알아보기 위해 학습 효과성 연구를 실시해요. 학습자가 듀오링고를 통해 새 언어를 배우는 경우, 그 언어로 의사소통하는 데 필요한 스킬을 습득하고 있는지 확실히 알고 싶으니까요. 

듀오링고 학습 효과성 연구 프로그램을 가이드할 목적으로, 학습 경험 중 가장 중요한 요소를 평가할 체계가 개발되었어요. 또한, 이 체계를 통해 학습자가 앱 밖에서 언어를 어떻게 사용하는지 이해할 수 있어요—결국, 대부분의 학습자는 오로지 XP를 얻으려고 공부하는 건 아니니까요; 그들의 주요 학습 목적은 실생활에서 정말 필요한 경우에 언어를 사용하기 위한 것이니까요! 

학습 효과성 연구 평가 체계에 사용되는 네 가지 질문이 여기 있어요.

1. 학습자들은 듀오링고가 재미있고, 흥미롭고, 유용하다고 느끼는가?

이 질문은 관계성에 대한 것으로 학습자가 듀오링고에서 공부하는 것을 좋아하는지를 알려줘요. 결국, 학습자가 레슨을 하러 돌아오지 않는다면, 레슨이 얼마나 전문적으로 디자인되었는지는 그리 중요하지 않으니까요! 

이 질문에 대답하는 방법은 학습자로부터 직접 피드백을 받는 거예요. 피드백을 받는 한 가지 방법은 학습 경험 인터뷰를 통한 것인데요. 실제 학습자와 일대일로 만나 그들의 학습 경험, 목표, 도전 과제 등에 대해 이야기를 나눠요. 또한, 수천 명의 학습자들에게 설문조사를 통해 듀오링고 레슨이 어떻다고 생각하는지, 그리고 학습 중인 과정이 얼마나 유용하다고 생각하는지에 대해 물어요. 물론, 앱에서 얻는 학습 관련 데이터도 분석하고요! 예를 들어, 학습자가 매일 레슨을 하러 돌아오는가? 학습에 할애하는 시간은 얼마인가? 어떤 종류의 레슨을 매일 하는 것을 선호하는가? 각각의 이 질문들은 듀오링고 학습자가 앱을 얼마나 좋아하는지 알려준답니다!

금색 별이 있는 종이가 끼워진 클립보드와 또 한 장의 종이 위에 초록색 체크 표시가 되어 있는 이미지.

2. 학습자가 듀오링고에서 가르치는 지식과 스킬을 습득하는가?

듀오링고가 뭔가를 가르치고 있다고 생각한다고 해서, 학습자가 그것을 배우고 있다는 의미는 아니에요! 따라서 듀오링고는 학습자가 듀오링고 과정에서 가르치는 스킬과 정보를 잘 습득하고 있는지에 초점을 맞춘답니다. 과정 콘텐츠의 숙달 여부를 테스트함으로써 어떤 부분을 잘 가르치고 있는지, 그리고 개선해야 할 점은 무엇인지를 이해할 수 있어요. 

이 질문에 답하기 위해, 학습자가 레슨에서 배운 어휘와 문법을 얼마나 잘 알고 있는지, 그리고 듀오링고 앱을 사용하면서 읽기, 듣기, 말하기, 쓰기 영역에서 스킬 향상이 이루어지는지를 테스트해요. 또한, 학습 결과에 최대한 영향을 줄 수 있도록 학습 과정을 계획하고 개발한답니다. 예를 들어, 듀오링고의 교수법이 과학적이고 최신 연구 결과에 근거하는지를 평가하고, 과정 콘텐츠가 최고 수준인지 평가해요. 더불어, 학습자의 현재 레벨에 적합한 레슨과 레벨 향상에 따른 난이도 조절이 가능한 맞춤화된 학습을 제공할 수 있도록 AI 모델이 충분한 능력을 갖추고 있는지도 평가한답니다.

3. 학습자가 과정에서 배운 내용을 실제 의사소통에서 사용할 수 있는가?

대부분 학습자의 경우, 앱에서 완벽한 레슨을 하는 것이 학습의 궁극적인 목표는 아니에요. 학습자가 원하는 건 배운 새 언어를 실제 생활에서 사용하는 것이죠! 이 학습 평가 체계는 학습 내용의 적용에 초점을 맞추고, 학습자가 듀오링고에서 배운 것을 얼마나 다른 학습 상황이나 실제 시나리오에서 전환해 사용 가능한지를 연구해요. 

이 질문에 답하기 위해, 듀오링고는 학습자의 수행능력, 다시 말해 실제 상황에서 언어 사용법에 초점을 둔 테스트와 시뮬레이션 과제를 사용하여 연구를 진행해요. 예를 들어, 학습자의 목표가 여행인 경우, 학습자가 듀오링고에서 배운 내용으로 여행 관련 업무들(예: 비행기표 예약하기, 호텔에서 체크인하기)을 해낼 수 있는가? 

4. 학습의 결과로 학습자가 의도한 언어 능력 레벨에 도달하는가?

앞서 질문들은 학습 과정을 평가하는 데 도움을 주지만, 학습자의 언어 능력 목표 역시 중요해요! 궁극적으로 듀오링고는 학습자가 의도했던 레벨의 언어 능력에 도달하길 원해요. 듀오링고 과정은 유럽언어 공통기준 (CEFR)에 맞게 설계되었어요. 이것은 국제 언어 능력 평가의 기준으로서, 언어 학습 목표를 기초(A1, A2), 독립(B1, B2), 능숙(C1, C2) 사용자로 구분해요. 이에 따라 듀오링고 과정의 각 섹션은 의도된 언어 능력 목표를 갖고 있지요. 예를 들어, 학습자가 듀오링고에서 A2 콘텐츠를 완료하면, CEFR의 A2 레벨에 도달할 것을 기대해요.

유럽언어 공통기준(CEFR)의 여섯 개 레벨(A1, A2, B1, B2, C1, C2)을 보여주는 이미지. 각 레벨은 각기 다른 색상의 막대 그래프로 표시되어 있다. A1이 가장 작은 막대이고, C2가 가장 긴 막대이다. A1, A2는 “Basic”이라고 표시돼 있고, B1과 B2는 “Independent”, C1과 C2는 “Proficient”라고 막대 아래에 표시돼 있다.

이 질문에 답하기 위해, 표준화된 언어 능력 테스트를 사용해 학습자의 언어 스킬을 평가하고, 그 점수를 인정받는 언어 능력 등급에 기초해 해석해요. 듀오링고 과정의 다양한 지점에서 학습 중인 학습자들을 상대로 독립적인 언어 테스트를 보게 해서 그들의 언어 능력을 평가하는 방식으로 연구를 진행한답니다. 학습자가 의도한 언어 능력 레벨에 도달하면, 자신의 학습 목표를 이룰 수 있게 돼요. 예를 들어, 입국 심사를 통과하거나, 새로 배운 언어로 제작된 영화를 보거나, 교육 프로그램에 요구되는 언어 수준에 도달할 수 있고, 원하는 나라로 여행하거나, 기업에서 일자리를 구하거나, 그 외의 다양한 목표들을 이룰 수 있어요!

효과로 증명하는 듀오링고

이 네 가지 효과성 평가 체계는 전 세계 최고의 학습 툴을 제공하고자 하는 듀오링고의 미션을 반영해요. 듀오링고의 효과성 연구는 다음의 질문들에 답해요. 듀오링고 과정은 얼마나 효과적인가? 어떤 영역과 레벨에서 듀오링고 과정이 최고인가? 학습자가 성공하도록 돕기 위해 듀오링고가 개선할 부분은 무엇인가?