코로나19 전후 교사의 ICT 사용 변화 분석

1. 서론

디지털 대전환 시대를 맞이하여 인공지능을 비롯한 컴퓨터･정보 분야의 혁신이 사회 변화를 주도하고 있으며 그 변화 속도는 과거에 예측한 것보다 더 빠르게 현실로 다가오고 있다. 이러한 사회 및 교육환경의 급격한 변화에 적응하고 미래 사회를 준비하기 위해서는 컴퓨터를 포함한 다양한 디지털 기술을 활용하여 문제를 해결할 수 있는 컴퓨터･정보 소양(Computer and Information Literacy; CIL)이 강조되고 학교교육에서도 중요하게 다루어지고 있다[1-3]. 학교교육에서 학생들의 컴퓨터･정보 소양을 함양하기 위해서는 현재 학생들의 컴퓨터･정보 소양이 어느 정도 수준인지를 명확하게 파악할 수 있어야 하고, 이러한 결과를 바탕으로 관련 교육과정을 개선하고 교수학습을 지원할 필요가 있다[4-6].

이러한 사회적 요구에 따라 국제교육성취도평가협회(International Association for the Evaluation of Educational Achievement; IEA)는 컴퓨터･정보 소양을 ‘집, 학교, 직장, 사회에 효율적으로 참여하기 위해 조사하고, 생성하고, 의사소통하는 데 컴퓨터를 사용하는 개인의 능력’으로 정의하며, 컴퓨터･정보 소양을 국제적인 수준에서 객관적으로 평가할 수 있는 국제 컴퓨터･정보 소양 연구(International Computer and Information Literacy Study; ICILS)를 출범시켰다[7-10].

우리나라는 첫 번째 주기인 ICILS 2013에 이어 두 번째 주기인 ICILS 2018에 연속으로 참여하였다. ICILS 참여는 국제 수준에서 우리나라 학생들의 컴퓨터ㆍ정보 소양 및 컴퓨팅 사고력 수준을 파악하고 다른 참여국에 비해 상대적으로 부족하거나 앞으로 보완이 필요한 부분도 확인할 수 있다는 점에서 의미가 있다. ICILS 2013에서 우리나라 학생들의 컴퓨터･정보소양은 536점으로 참여국 중에서 5위를 차지하였고, ICILS 2018에서는 542점으로 참여국 중 2위로 높은 성취를 보였다. 다만, 이러한 높은 국제 순위는 우리나라가 참여하고 있는 다른 국제 비교 연구인 PISA, TIMSS에 비해 ICILS 참여국 수가 많지 않다는 점을 고려할 필요가 있다[11-14].

ICILS 2018 결과, 우리나라 학생들은 학교에서 학습 목적의 ICT 사용 비율이 다른 참여국 평균에 비해 저조하고, 상･하위 수준 간 점수 차이도 크게 나타났다. 또한, 컴퓨터･정보 소양 하위 영역별 분석 결과 기초적인 컴퓨터 사용을 다루는 영역이 다른 영역에 비해 상대적으로 정답률이 낮게 나타났다[15-18]. 우리나라 학생들의 이러한 취약점은 코로나19 초창기에 디지털 도구를 활용한 원격수업을 전면 도입하는 과정에서 겪은 학교 현장의 혼란스러운 상황을 이해할 수 있는 근거가 되었다. 즉, 우리나라 학생들이 학교에서 ICT를 활용하거나 디지털 도구를 사용하는 학습활동이 부족한 상황이었고, 그에 따라 기초적인 디지털 도구를 다루는 능력도 부족하였다는 점이 부각되었다. 이러한 코로나19 상황에서의 어려움을 극복하기 위해 관련 지원이 점차 강화되면서 학교 현장에서도 ICT 교육 환경에 대한 많은 변화가 이루어졌다.

본 연구에서는 코로나19 이전 및 이후 교사의 ICT 사용 변화를 구체적으로 분석함으로써 급격한 환경 변화에 대한 적응 및 준비가 부족한 분야와 한계점을 파악하고 ICT 현황을 진단하여 학생들의 컴퓨터ㆍ정보 소양 함양 방향과 효율적인 교수학습 지원을 위한 시사점을 도출하는 데 그 목적이 있다. 이를 위해 2018년에 시행한 ICILS 2018 교사 설문 문항 가운데 코로나19 이전과 이후의 변화를 파악할 수 있는 문항들을 선정하고, ICILS 2018에 참여하였던 일부 학교의 교사를 대상으로 설문조사를 재실시하였다.

2. 관련 연구

고주은 외 (2021)는 고등학교 교사의 ICT 활용 리터러시 수준을 파악하고 ICT 활용의도와 관련된 요인을 파악하기 위해 고등학교 교사들을 대상으로 ICT 활용 리터러시와 ICT 활용 수업 의도에 대한 설문조사를 진행하고 그 결과를 분석하였다. 분석 결과, ICT 활용 의도에 영향을 미치는 변인은 ICT 활용 가치 인식, ICT 활용 리터러시의 정의적 영역, ICT 활용 리터러시의 심동적 영역, ICT 활용 리터러시의 인지적 영역, ICT 활용 환경 인식의 순으로 나타났다. 특히, ICT 활용 가치가 가장 큰 영향을 미치는 것으로 나타났다. 교사가 수업에서 ICT를 활용하는 것이 학생들에게 가치가 있다고 판단하는 경우, 교사의 기대와 가치가 높아져 ICT를 더욱 적극적으로 활용하는 태도와 행동을 보이는 것으로 판단하였다. 학생들의 디지털 역량을 향상시키기 위해 교사들이 수업에서 ICT를 적극 활용할 수 있는 방향으로 정책적 지원이 필요하다고 제언하였다[19].

정재은 외 (2023)는 코로나19로 인하여 학교의 대면 교실수업이 비대면 원격수업으로 대체된 것이 중학교와 고등학교 교사의 ICT 활용 능력과 활용 정도에 어떠한 영향을 주었는지 알아보기 위하여 회귀불연속설계를 활용하여 인과관계를 확인하였다. 연구 결과 중등 교사 중 여교사가 남교사보다 ICT 활용 정도가 높았으며, 교직경력이 길수록 ICT 활용 능력과 ICT 활용 정도 평균값이 낮아졌다. 그리고 중등교사의 ICT 활용 능력과 활용 정도의 연도별 추이를 살펴보았을 때 중학교와 고등학교 교사 모두 2020년 이후 평균값이 크게 높아졌다. 마지막으로 코로나19는 중학교와 고등학교 교사의 ICT 활용 능력과 활용 정도에 유의한 영향을 주었다. 이러한 연구 결과를 토대로 교사의 ICT 활용 능력과 활용 정도를 신장시킬 수 있는 방안을 제언하였다[20].

전성균 외(2021)는 ICILS 2018 데이터를 바탕으로 우리나라 학생들의 컴퓨터･정보 소양 정답률을 분석하였다. 분석 결과 우리나라 학생들은 대체로 ICILS 2018 참여국 평균보다 높은 정답률을 보였다. 그러나 ‘컴퓨터 사용의 이해’영역은 컴퓨터･정보 소양 성취도가 높은 국가(덴마크, 핀란드)에 비해 상대적으로 낮은 편이었다. 우리나라 학생들은 컴퓨터 사용에 대한 기본적인 지식과 기능을 평가하는 문항, 우리나라 학교에서 많이 사용하지 않은 응용프로그램을 활용하는 문항 등에서 상대적으로 정답률이 낮게 나타났다. 이러한 우리나라 학생들의 성취 특성을 바탕으로 컴퓨터･정보 소양 교육을 위한 시사점을 제언하였다[18].

3. 연구 방법

3.1 연구대상

본 연구는 코로나 19로 인한 교사의 ICT 사용 변화를 분석하기 ICILS 2018에 참여한 서울과 경기도의 61개 중학교 2학년 교사를 대상으로 설문조사하였다. 2018년의 설문 응답자 및 2021년의 설문 응답자 현황은 Table 1과 같다.

Table 1.

Survey Participants

3.2 조사 도구

2018년 대비 2021년의 교사의 ICT 사용 변화를 비교하기 위하여 ICILS 2018에서 사용하였던 교사 설문 중 관련 문항을 동일하게 사용하였으며, 설문지 구성을 요약하여 제시하면 Table 2와 같다.

Table 2.

Contents of questionnaire

4. 연구 결과

4.1 교사의 ICT 사용 목적에 따른 ICT 사용 빈도

교사의 ICT 사용 목적에 따른 ICT 사용 빈도 변화를 분석한 결과는 Table 3과 같다. 교사의 ICT 사용 목적에 따른 ICT 사용 빈도의 변화를 살펴보면 ‘학교 밖에서 업무 이외의 목적으로’ 항목을 제외하고 모든 항목에서 교사들의 ICT 사용 빈도가 증가하였다. 사용 빈도가 증가한 항목 가운데 ‘학교에서 수업 중에’와 ‘학교 밖에서 업무 목적으로’는 유의한 증가를 보였다. ‘학교에서 수업 중에’ ICT를 매일 사용하는 비율이 2018년에는 53.2%였으나 2021년 조사에서는 73.6%로 상승하였다. ‘학교 밖에서 업무 목적으로’ ICT를 매일 사용하는 비율도 2018년에 30.5%에서 2021년 조사에서는 36.2%로 상승하였다. 이는 코로나19로 인해 원격수업이 활성화되면서 학교 안팎에서 수업과 관련된 ICT 사용 빈도가 증가한 것으로 해석할 수 있다.

Table 3.

Comparison of ICT use frequency according to teachers’ purpose of ICT useUnit: persons(%)

4.2 교사의 ICT 사용 자신감

교사의 ICT 사용 자신감을 세부 항목별로 분석한 결과는 Table 4와 같다. 분석 결과, ‘인터넷 상의 토론 게시판/사용자 집단에 참여하기’, ‘구글 문서도구, 네이버 오피스와 같은 공유 프로그램을 사용하여 다른 사람과 협업하기’, ‘학습 관리 시스템 사용하기’의 3가지 항목에서 유의한 차이가 나타났다. 이러한 결과를 보았을 때, 주로 수업 중에 학생들을 참여시키거나 상호작용이 많이 이루어지는 항목을 중심으로 ICT 사용에 대한 교사의 자신감이 높아졌음을 알 수 있다.

Table 4.

Comparison of teachers’ ICT self-efficacyUnit: persons(%)

4.3 학교 수업에서의 ICT 중점 항목

학생의 ICT 역량에 대해 교사가 학교 수업에서 중점을 두고 있는 정도를 분석한 결과는 Table 5와 같다. ICILS 2018과 2021년 결과의 차이를 통계적으로 검정한 결과, 모든 항목에서 유의한 차이가 나타났고, 긍정적 응답(‘다소 중점을 둠’, ‘매우 중점을 둠’) 비율이 증가하는 경향을 보였다. 특히,‘디지털 정보를 다른 사람과 공유하기’항목의 긍정적 응답 비율은 22.2%p 증가하였고, ‘정보를 온라인에서 공개적으로 이용 가능하도록 만드는 것의 결과를 이해하기’항목은 23.5%p 증가하였다. 코로나19 이후에 온라인을 활용한 자료 공유 및 상호작용이 활발히 이루어지면서 관련 항목과 연관된 수업 활동이 자연스럽게 증가한 데 따른 결과로 해석된다.

Table 5.

Comparison of Teachers’ emphasis on developing Computer and Information Literacy-related skillsUnit: persons(%)

4.4 교수학습에서 교사의 ICT 활용 빈도

교수학습 활동 유형별 교사의 ICT 활용 빈도에 대한 분석 결과는 Table 6과 같다. ICILS 2018 이후 모든 항목에서 교사의 ICT 활용 빈도가 증가하였으며, 특히 교수학습 상황에서 ICT 사용 비율의 증가 경향이 두드러지게 나타났다. ICILS 2018 대비 2021년 조사에서 큰 변화를 보인 항목을 중심으로 살펴보면, ‘개별 학생 또는 학생 소집단에 학습 보충 또는 강화 자원 제공’과 ‘학생의 과제물에 대한 피드백 제공’ 항목에 대해 ‘ICT를 항상 사용함’ 응답 비율이 10%p 이상 상승하였다. 반면에 ‘시험을 통한 학생 학습 평가’는 가장 적게(2.8%p) 상승한 항목으로 나타났다. 원격수업이 활성화되면서 교사의 ICT 사용 비율이 전반적으로 증가하였지만, 학생 평가와 같이 제도적 지원이 함께 이루어져야 하는 항목의 증가 비율은 다소 낮았다. 평가의 공정성 및 투명성 확보 차원에서 원격수업에서 작성한 과제물에 대한 평가를 지양하였던 지침[21]이 영향을 미쳤다고 볼 수 있다.

Table 6.

Comparison of Frequency of teachers' use of ICT in teaching and learningUnit: persons(%)

4.5 학습활동 유형별 학생의 ICT 활용 빈도

학습활동 유형별 학생의 ICT 활용 빈도에 대한 분석 결과는 Table 7과 같다. 전반적으로 ICILS 2018 이후 학생들의 ICT 사용 비율이 증가하였으며, ICILS 2018 대비 ‘ICT를 자주 사용함’과 ‘ICT를 항상 사용함’에의 응답 비율이 상대적으로 높게 나타난 항목은 ‘단기 과제 수행하기’, ‘자신의 생각을 다른 친구에게 설명하고 토론하기’, ‘평가를 받기 위해 완성된 과제 제출하기’, ‘자신의 진도에 따라 개별적으로 학습하기’, ‘자신의 학습 경험 성찰하기’, ‘프로젝트에 대해 다른 학생들과 의견 교환하기’, ‘학생 스스로 학습 활동의 순서 계획하기’, ‘다른 학생들과 결과물 공유하기’ 항목이었다.

Table 7.

Comparison of teachers who reported that students used ICT often or always when engaging in different class activitiesUnit: persons(%)

주로 온라인으로 학습하거나 온라인에서 의사소통하고, 과제 제출 및 공유 항목은 ICT 사용 비율이 크게 상승하였고, ICT를 사용하여 자료를 수집하거나 제작하는 활동은 상대적으로 상승 폭이 적게 나타났다. 이러한 결과는 앞서 제시한 교사의 ICT 사용 자신감과 수업에서 중점을 두는 학생들의 ICT 역량에 대해 주로 학생이 참여하여 온라인 상에서 자료를 공유하고, 피드백을 주고받는 항목 중심으로 긍정적인 변화가 나타난 결과(Table 4과 Table 5 참조)를 함께 고려할 필요가 있다. 즉, 학생들의 ICT 사용 빈도가 전반적으로 높아졌으나 코로나19 상황에서의 원격수업에 필요한 항목 중심으로 큰 변화가 있었음을 알 수 있다.

4.6 교수학습에서 ICT와 관련된 동료교사와의 상호작용

교사의 교수학습 상황에서 ICT 사용과 관련된 동료 교사와의 상호작용 정도에 대해 분석한 결과는 Table 8과 같다. Table 8에 제시된 바와 같이 교사가 교수학습 상황에서 ICT 사용과 관련된 동료 교사와의 상호작용은 2018년 대비 2021년 조사에서 전체적으로 유의한 증가를 보였다. 특히, ICT 기반 수업을 개발하기 위한 동료교사들과 협업 활동에서 긍정적 응답(‘동의함’과 ‘매우 동의함’)비율이 가장 크게 증가하였다.

Table 8.

Comparison of interactions with colleagues regarding the use of ICT in teaching and learning situationsUnit: persons(%)

4.7 교수학습에서 ICT 사용에 대한 교사 인식

교수학습에서 ICT 사용에 대한 교사의 인식을 분석한 결과는 Table 9와 같다. 분석결과, ICT 사용에 대한 긍정적 인식과 관련한 7개 항목 중 6개 항목에서 유의한 차이를 보였으며, 부정적 인식과 관련한 6개 항목에서는 모두 유의한 차이가 나타났다.

Table 9.

Comparison of teachers’ perceptions when using ICT in teaching and learningUnit: persons(%)

ICT 사용에 대한 긍정적 인식과 관련한 7개 항목 중 ‘학생이 학습에 보다 흥미를 느끼도록 하는 데 도움을 준다’, ‘학생들의 문제 해결력 발달에 도움을 준다’, ‘학생들의 학업 성취도를 향상시킨다’, ‘학생들이 더 나은 정보에 접근할 수 있게 한다’4개 항목에서는 동의 비율(‘동의함’과 ‘매우 동의함’)이 2018년 대비 2021년 조사에서 낮아졌다. 한편, ICT 사용에 대한 부정적 인식과 관련한 6개 항목에서 모두 동의 비율이 낮아지는 경향을 나타냄으로써 ICT 사용에 대해 긍정적 인식의 변화보다는 부정적 인식이 다소 개선되었다고 볼 수 있다. 원격수업의 도입과 함께 ICT 사용이 활발히 이루어지면서 교사들의 ICT 사용에 대한 인식 변화가 항목별로 다르게 나타난 결과에 주목하며, 수업 활동에서의 ICT 사용 관련 교사 연수를 세밀하게 지원할 필요가 있다.

5. 결론 및 제언

지식정보기술의 발달로 사회 전반에 걸쳐 많은 변화가 일어나고 있으며 4차 산업혁명 시대의 도래로 컴퓨터･정보 소양이 더욱 강조되고 있는 시기이다. 이와 관련하여 교육 분야에서도 10여년 전부터 디지털 교육환경, 글로벌 인재 등 이미 익숙해진 슬로건으로 미래 사회 준비를 지속적으로 추진해오고 있었지만, 코로나19는 그러한 노력들이 학교 현장에서 실현되는 시기를 앞당기는 원동력이 되었다할 수 있다. 예를 들면, 코로나19로 인하여 전국의 모든 학교가 등교 중지되어 충분한 사전 준비 및 시간적 여유도 없이 원격수업을 도입하여, 초등학생을 포함한 모든 학교급의 학생들이 학교 교실이 아닌 가정에서 컴퓨터 또는 태블릿기기 등으로 온라인으로 접속하여 교사의 수업에 참여하였다. 이러한 시대적, 사회적 환경의 변화에 따라 교실수업 환경이 급변하는 상황에서 본 연구는 코로나19로 인하여 학교현장에서 교사들의 ICT 사용 빈도는 어느 정도 변화하고, 그들의 ICT 사용 경험이나 인식에 어떠한 변화가 있는가에 관심을 두었다.

ICILS는 5년을 주기로 중학생들의 컴퓨터･정보 소양을 평가하고 교사의 ICT 관련 역량 및 인식, 그리고 학교의 ICT 자원들을 조사한다. 특히, ICILS의 교사 설문에서는 교사들이 학교 현장에서 어떠한 목적으로 ICT를 얼마나 자주 사용하는지, 교사들의 ICT 사용에 대한 자신감은 어느 정도인지, 그리고 교사들의 ICT 사용에 대한 경험과 인식은 어떠한지 등을 조사한다. ICILS의 가장 최근 주기는 ICILS 2018로 코로나19가 시작되기 바로 직전인 20108년에 시행되었으므로 본 연구에서는 코로나19 이전과 이후의 변화를 비교 분석하기 위하여 ICILS 2018에 사용된 교사 설문 문항 일부를 활용하여 코로나19 이후인 2021년에 설문조사를 재실시하고 교사의 ICT 사용 변화를 분석하였다.

분석 결과, 교사의 ICT 사용과 관련하여 학교 안팎에서 수업과 관련된 교사들의 ICT 사용 빈도가 증가하였으며, 특히 ICT를 사용한 상호작용이 증가하였다. 교사들의 ICT 사용 자신감과 교사의 ICT 활용도 또한 2018년 대비 2021년에 상승하였다. 또한, 교수학습에서 ICT 사용에 대한 교사의 인식의 변화를 살펴보면 ICT 사용에 대한 부정 인식은 통졔적으로 유의한 차이가 있었고, 2018년도 대비 2021년도에 감소하였다.

전반적으로 코로나19 이후에 원격수업이 활성화되면서 교사의 ICT 사용이 증가하였음을 알 수 있다. 우리나라 학생들이 학교 수업에서의 ICT 사용이 ICILS 2018 참여국에 비해 전반적으로 낮았다는 ICILS 2018 분석 결과[10]를 고려하면 긍정적인 변화라고 볼 수 있다. 그러나 ICT 사용에 대한 교사들의 부정적 인식은 개선되었지만, ICT 사용에 대한 긍정적 인식은 개선이 필요한 것으로 나타났다.

이러한 연구 결과를 토대로 ICT 사용 및 원격수업에 대한 양적인 성장뿐 아니라 수업의 질을 제고할 수 있는 방안을 마련할 필요가 있다. 이를 위해 교과 고유의 특성을 반영하여 교수학습 과정에서 ICT 활용을 통한 문제 해결 과정에서 긍정적 인식을 높일 수 있는 방향으로 ICT를 활용한 교수학습 연수 프로그램 개발이 필요하다. 또한, 효과적인 교수학습을 통해 수업의 질을 제고할 수 있는 교사 연수를 지원할 필요가 있다.

Acknowledgments

본 논문은 2021년 한국교육과정평가원의 연구보고서 ‘ICILS 2018 심층 분석 및 ICILS 2023 평가 기반 구축(연구보고 RRE 2021-6)’의 일부 내용을 수정･보완하여 작성하였으며, 한국교육과정평가원의 공식적인 견해와는 다를 수 있음.

References

• Park, S., Lee, E., Jeon, S., & Jung, C. (2018). A Study on Cultivation Computer and Information Literacy. Korea Institute Of Curriculum & Evaluation, RRE 2018-8.
• Jeon, S., Son, Y., & Park, S. (2020). Analysis of the ICILS 2018 Results by Korean Students’ Educational Experience in Computer and Information Literacy and Computational Thinking. The Journal of Korean Association of Computer Education, 23(3), 1-8. [https://doi.org/10.32431/kace.2020.23.3.001]
• Jeon, S., & Sang, K. (2023). Analysis of Item Response Behavioral Characteristics Using ICILS 2018 Process Data. The Journal of Korean Association of Computer Education, 26(3), 1-8. [https://doi.org/10.32431/kace.2023.26.3.001]
• Fraillon, J., Schulz, W., & Ainley, J. (2013). International Computer and Information Literacy Study: Assessment framework. Amsterdam: IEA.
• Fraillon, J., Ainley, J., Schulz, W., Duckworth, D., & Friedman, T. (2019a). IEA International Computer and Information Literacy Study 2018: Assessment framework. IEA. [https://doi.org/10.1007/978-3-030-19389-8]
• Park, S., Lee, E., Sang. K., Jeon, S., & Jung, C. (2018). A Study on Cultivating Computer and Information Literacy. Korea Institute Of Curriculum & Evaluation, RRE 2018-8.
• Fraillon, J., Ainley, J., Schulz, W., Friedman, T., & Gebhardt, E. (2014). Preparing for Life in a Digital Age; The IEA International Computer and Information Literacy Study international Report. Cham: Springer. [https://doi.org/10.1007/978-3-319-14222-7]
• Kim, S., Park, J., Chon, K., Kim, M., Lee, Y., Seo, J., & Kim, M. (2014). Finding from ICILS for Korea: ICILS 2013 international results. Korea Institute Of Curriculum & Evaluation, RRE 2014-3-2.
• Fraillon, J., Ainley, J., Schulz, W., Friedman, T., & Duckworth, D. (2019b). Preparing for life in a digital world: IEA International Computer and Information Literacy Study 2018 International Report. IEA. [https://doi.org/10.1007/978-3-030-19389-8]
• Park, S., Kim, H., Sang. K., Jeon, S., & Choi, I. (2019). International Computer and Information Literacy Study: An Analysis of ICILS 2018 Results. Korea Institute Of Curriculum & Evaluation, RRE 2019-9.
• Seo, M., Kim, K., Jeon, S., Lee, J., & Kim, S. (2021). In-Depth Analysis on the Results of ICILS 2018 and Preparations for ICILS 2023. Korea Institute Of Curriculum & Evaluation, RRE 2021-5.
• Kim, K. (2020). Analysis of ICT Accessibility and Subjects Utilization of Korean Students Based on PISA 2018 Data. JOURNAL OF The Korean Association of information Education, 24(1), 39-48. [https://doi.org/10.14352/jkaie.2020.24.1.39]
• Choi, Y., Kim, H. (2021). Analysis of the Linkage between Korean Science Curriculum according to TIMSS 2019 8th grade Physics subject learning period. The Journal of Learner-Centered Curriculum and Instruction, 21(5), 437-449. [https://doi.org/10.22251/jlcci.2021.21.5.437]
• Ham, E. (2022). Can we measure students’ task engagement using item response time in a low stake test? Evidence from PISA 2015. Journal of Educational Evaluation, 35(1), 23-48. [https://doi.org/10.31158/JEEV.2022.35.1.23]
• Sang, K., Kim, K., Jeon, S., Park, M., & Lee, J. (2020). Exploring Computer and Information Literacy and Computing Thinking Achievement Characteristics and Improvement Plan: ICILS 2018 In-depth Analysis. Korea Institute Of Curriculum & Evaluation, RRE 2020-6.
• Seo, M., Kim, K., Lee, J., Jeon, S., & Kim, S. (2021). Comprehensive Analysis on the Results of TIMSS 2019 and its Trends. Korea Institute Of Curriculum & Evaluation, RRE 2021-6.
• Seo, M., Kwon, J., Kim, C., Lee, D., Jeon, S., Lee, J., & Kim, J. (2022). In-Depth Analysis of Student’s Achievement in Math, Science, and Computer·Information Based on TIMSS/ICILS. Korea Institute Of Curriculum & Evaluation, RRE 2022-5.
• Jeon, S., & Kim, K. (2021). Analysis of the correct-answer rate of Computer and Information Literacy items of Korean students in ICILS 2018. The Journal of Korean Association of Computer Education, 24(5), 27-35. [https://doi.org/10.32431/kace.2021.24.5.003]
• Go, J., & Park, S. (2021). Analysis of High School Teachers’ ICT literacy and Intention to use. Journal of The Korean Association of Information Education, 25(4), 591-601. [https://doi.org/10.14352/jkaie.2021.25.4.591]
• Jung, J., Lee, S., & Kwak, H. (2023). The Effects of COVID-19 on Secondary School Teachers’ ICT Utilization Ability and Degree of ICT Utilization. Journal of Korean Association for Educational Information and Media, 29(1), 255-283. [https://doi.org/10.15833/KAFEIAM.29.1.255]
• Ministry of Education. (2020, Oct 13). Distance learning student evaluation guidebook-middle school. https://star.moe.go.kr/web/contents/m20200.do?schM=view&id=2171#none