Performance Evaluation of ChatGPT on the National Nurse Examinations
본 연구는 ChatGPT의 간호교육에 활용 가능성을 확인하고자 간호학 분야에서의 ChatGPT의 지식 수준을 측정하였다. 지식수준 측정 방법으로 간호사 국가시험에 대한 ChatGPT의 수행능력을 평가하였다. 수행능력 평가는 2019년 부터 2023년까지 5년 동안의 간호사 국가시험에 대한 ChatGPT의 정답률을 확인하는 서술적 연구를 수행하였다. 간호사 국가시험의 합격 기준은 총점 60%이고, 과목별 과락 기준은 40% 미만이다. 총 5년 동안의 간호사 국가시험에 대한 ChatGPT의 평균 정답률은 49.5%로 간호학생의 정답률인 79.3%보다 낮았다. 총점 기준으로 2023년에 53.6%로 가장 높은 정답률을 보였고, 과목별로는 정신간호학이 62.9%로 가장 높은 정답률을 보였다. 5년간 총 40개의 과목 중 29개 과목(72.5%)이 과락 기준 이상의 정답률을 보였다. 연도별 ChatGPT의 정답률을 살펴보면, 2021년까지 정답률이 50% 미만이었으나, 2022년부터는 50% 이상으로 상승하였다. 본 연구의 결과, ChatGPT는 지난 5년 동안 간호사 국가시험에 합격하지 못하였으나 합격 수준에 가까운 수행능력을 보여주어 ChatGPT의 간호교육에 활용 가능성을 보여주었다. 앞으로 ChatGPT 같은 생성형 AI를 활용하는 다양한 연구가 간호교육에서 진행되기를 기대한다.
Authors
- Seon-Mi Jang
Publication Details
- Journal
- Journal of the Korea Academia-Industrial cooperation Society
- Published
- 2024-08-31
- DOI
- https://doi.org/10.5762/kais.2024.25.8.121
- Citations
- 2
- Primary Topic
- Artificial Intelligence in Healthcare and Education
- Type
- article
- Field-Weighted Citation Impact
- 0.24