학습 데이터로 운영을 고치는 법: 러닝 애널리틱스 대시보드 실무

교육 담당자에게 데이터가 없는 경우는 드뭅니다. 접속 기록도, 진도율도, 시험 점수도 LMS(Learning Management System) 안에 이미 쌓여 있습니다. 문제는 그 숫자를 차수가 끝난 뒤에야 열어 본다는 데 있습니다. 러닝 애널리틱스(learning analytics)란 학습 과정에서 쌓이는 데이터를 모아 교육이 끝나기 전에 운영을 바로잡는 활동이며, 성패는 지표의 개수가 아니라 지표마다 "이 숫자가 나쁘면 무엇을 한다"는 조치가 붙어 있느냐에서 갈립니다.

이 글은 분석 이론이 아니라 운영 루틴으로 썼습니다. 어떤 지표를 남기고 무엇을 버릴지, 이탈이 실제로 어디서 일어나는지, 주 15분으로 도는 점검 순서는 어떻게 짜는지 순으로 정리합니다.

효과측정과 러닝 애널리틱스는 시점이 다르다

두 활동은 자주 섞여 불립니다. 그러나 담당자가 손에 쥐는 결과물이 완전히 다릅니다. 사후 효과측정은 "이 과정을 내년에도 열 것인가"에 답하고, 러닝 애널리틱스는 "이번 주에 누구에게 무엇을 보낼 것인가"에 답합니다. 종료 후 만족도 설문과 성과 측정 방법은 교육 끝나고 뭘 남기나: 만족도 설문·효과측정 실무에서 따로 다뤘으니, 여기서는 진행 중 데이터만 봅니다.

지표는 네 층으로 추린다

처음 대시보드를 짜면 지표가 스무 개를 넘기기 쉽습니다. 그러면 아무도 보지 않습니다. 학습 여정을 도달·진행·완주·품질 네 층으로 자르고, 층마다 지표 하나와 조치 하나만 남기는 편이 훨씬 오래 갑니다.

이 표를 만들 때 지켜야 할 원칙이 세 가지 있습니다.

첫째, 평균이 아니라 분포로 봅니다. 평균 진도율 62%라는 숫자는 그 자체로 알려주는 것이 거의 없습니다. 대부분이 60% 언저리에 몰려 있어서 나온 62%와, 0%대 무리와 95%대 무리로 갈라져 계산된 62%는 완전히 다른 상황이고 조치도 다릅니다. 앞은 콘텐츠 분량과 학습 시간의 문제이고, 뒤는 애초에 시작조차 못 한 집단의 문제입니다.

둘째, 진도는 반드시 기간 경과율과 함께 읽습니다. 진도율 40%는 4주 과정의 2주차에는 정상이고 마감 사흘 전에는 비상입니다. 절대값만 보는 대시보드는 매주 같은 경고를 울리다가 결국 아무도 보지 않게 됩니다. 진도가 어떤 원리로 집계되는지는 이러닝 진도율의 모든 것에 정리해 두었습니다.

셋째, 조치가 없는 지표는 지웁니다. 로그인 횟수, 페이지뷰, 총 학습시간 같은 숫자는 보기에는 그럴듯하지만 그 값이 나쁘다고 해서 담당자가 할 일이 정해지지 않습니다. 대시보드는 보고용 장식이 아니라 다음 행동을 고르는 도구입니다.

이탈은 과정이 아니라 구간에서 일어난다

"완주율이 낮다"는 진단으로는 고칠 것을 찾지 못합니다. 데이터를 열어 보면 이탈은 과정 전체에 고르게 퍼져 있지 않고 몇 개 구간에 몰려 있습니다. 구간마다 원인이 다르므로 처방도 달라야 합니다.

세 구간을 나누지 않고 전체 미이수자에게 같은 문구를 보내면, 이미 진도를 다 채우고 시험만 남은 사람에게 "학습을 시작해 주세요"라는 안내가 갑니다. 받는 사람은 그 순간부터 안내 메일을 열지 않습니다. 사유별 명단 분리와 자동 발송 세팅은 미이수자 자동 독려 세팅에서 화면 단위로 다뤘습니다.

주 15분으로 도는 점검 루틴

데이터를 본다는 말이 매일 대시보드를 들여다본다는 뜻은 아닙니다. 요일마다 볼 것을 하나씩 정해 두면 한 주에 15분으로도 돌아갑니다.

마지막 줄이 핵심입니다. 차수마다 콘텐츠나 평가를 한 군데씩만 고쳐도 네 차수면 네 군데가 바뀝니다. 반대로 "다음에 전면 개편하자"고 미루면 대개 아무것도 바뀌지 않은 채 다음 차수가 시작됩니다.

LMS 관리자 화면에서는 어디를 보나

별도 분석 시스템을 검토하기 전에, 지금 쓰는 LMS 관리자 화면에서 위 지표를 얼마나 뽑을 수 있는지 먼저 확인하는 편이 빠릅니다. 맑은이러닝 LMS를 기준으로 하면 다음 화면들이 여기에 대응합니다.

• 관리자 대시보드(운영현황): 승인이 필요한 회원, 미답변 Q&A, 입금·환불 처리처럼 밀려 있는 업무를 카드 위젯으로 모아 보여 줍니다. 위젯 구성은 대시보드 설정에서 바꿉니다.
• 과정운영 · 수료관리 · 통합수강생관리: 과정 개설부터 차수별 수강생 진행과 수료 처리까지가 한 줄기로 이어집니다. 진도 하위 그룹과 수료 미달 인원을 확인하는 출발점입니다.
• 회원소속 · 회원그룹 · 회원등급: 명단을 부서·기업·차수 단위로 쪼갤 수 있게 해 주는 축입니다. 이 축이 정리돼 있지 않으면 "누구에게 보낼 명단"이 끝내 만들어지지 않습니다.
• 발송관리(메일발송관리 · 메일템플릿관리): 사유별로 다른 문구를 템플릿으로 만들어 두고 명단에 맞춰 내보냅니다.
• 시험관리(문제은행) · 설문관리: 문항별 결과와 단일선택·다중선택·단답형 설문 응답이 품질 층의 원자료가 됩니다.
• 마이크로러닝별 시청통계: 짧은 콘텐츠는 시청 집계를 따로 확인합니다.

관리자 권한은 최고관리자부터 소속운영자까지 계층으로 나뉘어 있어, 위탁사나 부서 담당자에게 자기 소속 범위만 열어 주는 방식으로 운영할 수 있습니다. 데이터를 여는 범위를 조직 구조에 맞춰 미리 정해 두면, 나중에 조회 권한을 놓고 협의하느라 시간을 쓰지 않아도 됩니다.

자주 밟는 함정 세 가지

지표를 늘리는 것으로 시작하는 것. 항목이 많을수록 분석적으로 보이지만, 매주 실제로 보고 움직이는 숫자는 결국 서너 개입니다. 두세 달 동안 어떤 숫자를 보고 무엇을 했는지 기록해 두었다가, 그 지표만 남기십시오.

도구부터 만드는 것. 첫 달은 관리자 화면에서 뽑은 명단을 표 한 장으로 정리하는 수준이면 충분합니다. 무엇을 볼지 정해지지 않은 상태에서 화면부터 만들면, 완성된 뒤에 아무도 열지 않는 대시보드가 남습니다.

개인정보 범위를 정하지 않고 보는 것. 학습 기록은 개인정보입니다. 수집·이용 목적으로 고지한 범위 안에서, 교육 운영에 필요한 만큼만 조회하는 것이 원칙입니다. 보관 기간과 파기 시점, 조회 권한 범위는 학습자 개인정보와 교육이력, 얼마나 보관하고 언제 파기하나를 참고하시되, 최종 기준은 조직의 개인정보 처리방침과 소관 규정에 맞춰 확인하시기 바랍니다(발행 시점 2026-08 기준).

시작 체크리스트

• 이번 차수에서 볼 지표를 다섯 개 이하로 적었는가
• 지표마다 "나쁠 때 무엇을 한다"가 한 줄로 붙어 있는가
• 진도 지표를 기간 경과율과 함께 읽고 있는가
• 미이수 사유를 진도·시험·과제로 나눠 명단을 만들 수 있는가
• 조회 권한과 보관 기간을 담당자 선에서 설명할 수 있는가

다섯 줄이 채워지면 대시보드는 그다음 문제입니다. 지금 쓰는 시스템에서 이 명단들이 어떻게 뽑히는지 함께 확인해 보고 싶으시면 무료 상담으로 편하게 문의하셔도 됩니다.