Performance Evaluation of ChatGPT on the National Nurse Examinations

본 연구는 ChatGPT의 간호교육에 활용 가능성을 확인하고자 간호학 분야에서의 ChatGPT의 지식 수준을 측정하였다. 지식수준 측정 방법으로 간호사 국가시험에 대한 ChatGPT의 수행능력을 평가하였다. 수행능력 평가는 2019년 부터 2023년까지 5년 동안의 간호사 국가시험에 대한 ChatGPT의 정답률을 확인하는 서술적 연구를 수행하였다. 간호사 국가시험의 합격 기준은 총점 60%이고, 과목별 과락 기준은 40% 미만이다. 총 5년 동안의 간호사 국가시험에 대한 ChatGPT의 평균 정답률은 49.5%로 간호학생의 정답률인 79.3%보다 낮았다. 총점 기준으로 2023년에 53.6%로 가장 높은 정답률을 보였고, 과목별로는 정신간호학이 62.9%로 가장 높은 정답률을 보였다. 5년간 총 40개의 과목 중 29개 과목(72.5%)이 과락 기준 이상의 정답률을 보였다. 연도별 ChatGPT의 정답률을 살펴보면, 2021년까지 정답률이 50% 미만이었으나, 2022년부터는 50% 이상으로 상승하였다. 본 연구의 결과, ChatGPT는 지난 5년 동안 간호사 국가시험에 합격하지 못하였으나 합격 수준에 가까운 수행능력을 보여주어 ChatGPT의 간호교육에 활용 가능성을 보여주었다. 앞으로 ChatGPT 같은 생성형 AI를 활용하는 다양한 연구가 간호교육에서 진행되기를 기대한다.

Authors

Publication Details

Journal
Journal of the Korea Academia-Industrial cooperation Society
Published
2024-08-31
DOI
https://doi.org/10.5762/kais.2024.25.8.121
Citations
2
Primary Topic
Artificial Intelligence in Healthcare and Education
Type
article
Field-Weighted Citation Impact
0.24
Controls
|||
ALL TIME
JAN
FEB
MAR
APR
MAY
JUN
JUL
AUG
SEP
OCT
article

Performance Evaluation of ChatGPT on the National Nurse Examinations

Seon-Mi Jang
2 citations
Journal of the Korea Academia-Industrial cooperation Society
Artificial Intelligence in Healthcare and Education
0.24
article

Performance Evaluation of ChatGPT on the National Nurse Examinations

Seon-Mi Jang
article en
2 citations

Abstract

본 연구는 ChatGPT의 간호교육에 활용 가능성을 확인하고자 간호학 분야에서의 ChatGPT의 지식 수준을 측정하였다. 지식수준 측정 방법으로 간호사 국가시험에 대한 ChatGPT의 수행능력을 평가하였다. 수행능력 평가는 2019년 부터 2023년까지 5년 동안의 간호사 국가시험에 대한 ChatGPT의 정답률을 확인하는 서술적 연구를 수행하였다. 간호사 국가시험의 합격 기준은 총점 60%이고, 과목별 과락 기준은 40% 미만이다. 총 5년 동안의 간호사 국가시험에 대한 ChatGPT의 평균 정답률은 49.5%로 간호학생의 정답률인 79.3%보다 낮았다. 총점 기준으로 2023년에 53.6%로 가장 높은 정답률을 보였고, 과목별로는 정신간호학이 62.9%로 가장 높은 정답률을 보였다. 5년간 총 40개의 과목 중 29개 과목(72.5%)이 과락 기준 이상의 정답률을 보였다. 연도별 ChatGPT의 정답률을 살펴보면, 2021년까지 정답률이 50% 미만이었으나, 2022년부터는 50% 이상으로 상승하였다. 본 연구의 결과, ChatGPT는 지난 5년 동안 간호사 국가시험에 합격하지 못하였으나 합격 수준에 가까운 수행능력을 보여주어 ChatGPT의 간호교육에 활용 가능성을 보여주었다. 앞으로 ChatGPT 같은 생성형 AI를 활용하는 다양한 연구가 간호교육에서 진행되기를 기대한다.

Journal of the Korea Academia-Industrial cooperation SocietyVol. 25(8)
Gender equality
Openalex Percentile: Top 40%
Artificial Intelligence in Healthcare and Education
0.24
AI Navigator

Ask Laika to Summarize, Analyze, and Connect papers live on the map.

Summarize Papers & Methodologies

Extract key findings, datasets, and comparative methods across publications.

Benchmark Rankings & Visual Analytics

Rank top research institutions, authors, funders, topics, and journals by Field-Weighted Citation Impact (FWCI) and paper volume with instant charts.

Connect Distant Disciplines

Bridge topological clusters on the map to find hidden collaborative intersections.