AI 채점 시스템 협약 체결…정확성·신뢰성 강화 추진
3만 건 학습데이터 기반 구축…교원 연수·문항 개발 협력 확대
서울시교육청은 부산시교육청, 인천시교육청과 함께 AI 기반 서술형·논술형 평가지원시스템인 ‘채움AI’를 공동으로 운영하기 위한 업무협약을 체결한다. 사진=전국매일신문DB
서울시교육청은 부산시교육청, 인천시교육청과 함께 AI 기반 서술형·논술형 평가지원시스템인 ‘채움AI’를 공동으로 운영하기 위한 업무협약을 체결한다.
협약식은 26일 부산에서 열리며, 세 교육청 교육감을 비롯한 주요 관계자들이 참석할 예정이다. 이번 협약은 인공지능 기술을 활용한 서·논술형 평가 지원 도구를 공동으로 운영해 미래형 평가 체계를 구축하고, AI 채점의 정확성과 신뢰도를 높이기 위한 취지로 마련됐다.
‘채움AI’는 서·논술형 문항에 대한 자동 채점을 지원하는 시스템으로, 서울시교육청이 2025년 개발했다. 이후 66개 실천학교에서 공통 문항과 평가 기준을 적용해 약 3만 건의 고품질 학습 데이터를 축적했다.
운영 결과, 인간 채점자와의 일치도를 나타내는 QWK(Quadratic Weighted Kappa) 지수가 0.8 이상을 기록해 실제 평가에 활용 가능한 수준의 신뢰도를 확보했다.
이 시스템은 범용 AI 모델이 아닌 서·논술형 채점에 특화된 전용 모델을 기반으로 구축돼 채점의 일관성과 정확성을 높였으며, 교과별 맞춤형 채점과 피드백 제공이 가능한 점이 특징이다.
서울시교육청은 이번 협력을 통해 시스템 고도화와 시도 간 평가 기준의 통일을 추진하고, 공동 발전의 기반을 마련한다는 계획이다.
협약에 따라 세 교육청은 AI 기반 평가 시스템 운영을 통한 데이터 축적과 채점 결과 처리 체계 마련, 서·논술형 평가 문항 공동 개발 및 검토, 교원 역량 강화를 위한 연수 프로그램 운영 등을 함께 추진한다. 또한 협약 이행을 위한 협의체를 구성해 지속적인 협력을 이어갈 방침이다.
정근식 교육감은 “AI 기술을 접목한 서·논술형 평가는 학생의 사고력과 표현력을 평가하는 데 중요한 방향”이라며 “교육청 간 협력을 통해 공정하고 신뢰도 높은 평가 체계를 구축하고, 학교 현장의 평가 혁신을 적극 지원하겠다”고 말했다.
[전국매일신문] 김종영 기자
댓글
0